云服务器内容精选

华为云首页用户手册

Oozie开发指南（安全模式）

MAPREDUCE服务 MRS-Oozie应用开发简介:Oozie简介

Oozie简介 Oozie是一个用来管理Hadoop job任务的工作流引擎，Oozie流程基于有向无环图（Directed Acyclical Graph）来定义和描述，支持多种工作流模式及流程定时触发机制。易扩展、易维护、可靠性高，与Hadoop生态系统各组件紧密结合。 Oozie流程的三种类型： Workflow 描述一个完整业务的基本流程。 Coordinator Coordinator流程构建在Workflow流程之上，实现了对Workflow流程的定时触发、按条件触发功能。 Bundle Bundle流程构建在Coordinator流程之上，提供对多个Coordinator流程的统一调度、控制和管理功能。 Oozie主要特点：支持分发、聚合、选择等工作流程模式。与Hadoop生态系统各组件紧密结合。流程变量支持参数化。支持流程定时触发。自带一个Web Console，提供了流程查看、流程监控、日志查看等功能。

MAPREDUCE服务 MRS Oozie开发指南（安全模式）
MAPREDUCE服务 MRS-Oozie应用开发简介:Oozie应用开发常见概念

Oozie应用开发常见概念流程定义文件描述业务逻辑的XML文件，包括“workflow.xml”、“coordinator.xml”、“bundle.xml”三类，最终由Oozie引擎解析并执行。流程属性文件流程运行期间的参数配置文件，对应文件名为“job.properties”，每个流程定义有且仅有一个该属性文件。 keytab文件存放用户信息的密钥文件。在安全模式下，应用程序采用此密钥文件进行API方式认证。 Client 客户端直接面向用户，可通过Java API、Shell API、 REST API或者Web UI访问Oozie服务端。

MAPREDUCE服务 MRS Oozie开发指南（安全模式）
MAPREDUCE服务 MRS-Oozie应用开发流程

Oozie应用开发流程本文档主要基于Java API对Oozie进行应用开发。开发流程中各阶段的说明如图1和表1所示。图1 Oozie应用程序开发流程表1 Oozie应用开发的流程说明阶段说明参考文档了解基本概念在开始开发应用前，需要了解Oozie的基本概念，了解场景需求等。 Oozie应用开发常见概念准备开发和运行环境 Oozie的应用程序当前推荐使用Java语言进行开发。可使用IDEA工具。准备本地应用开发环境准备工程 Oozie提供了不同场景下的样例程序，您可以导入样例工程进行程序学习。导入并配置Oozie样例工程准备安全认证如果您使用的是安全集群，需要进行安全认证。配置Oozie应用安全认证根据场景开发工程提供了Java语言的样例工程。开发Oozie应用编译并运行程序指导用户将开发好的程序编译并提交运行。调测Oozie应用查看程序运行结果程序运行结果会写在用户指定的路径下。用户还可以通过UI查看应用运行情况。父主题： Oozie开发指南（安全模式）

MAPREDUCE服务 MRS Oozie开发指南（安全模式）