正在生成
详细信息:
检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
配置Spark Executor退出时执行自定义代码 本章节仅适用于MRS 3.2.0及之后版本。 配置场景 通过配置如下参数可以实现Executor退出时执行自定义代码。 配置参数 在Spark客户端的“spark-defaults.conf”配置文件中进行设置。
表1 参数含义 参数 含义 to 后继action节点的名称 样例代码 <start to="mr-dataLoad"/> 父主题: Oozie样例代码说明
<message> This workflow failed, error message[${wf:errorMessage(wf:lastErrorNode())}] </message> </kill> 父主题: Oozie样例代码说明
(可参见job.properties) 样例代码 <action name="copyData"> <fs> <delete path='${nameNode}/user/oozie_cli/${dataLoadRoot}/result'/>
(可参见job.properties) 样例代码 <action name="copyData"> <fs> <delete path='${nameNode}/user/oozie_cli/${dataLoadRoot}/result'/>
表1 参数含义 参数 含义 to 后继action节点的名称 样例代码 <start to="mr-dataLoad"/> 父主题: Oozie样例代码说明
样例代码 下面列出producer和consumer主要逻辑代码作为演示。
代码样例 下面列出producer和consumer主要逻辑代码作为演示。
> <start to="copyData"/> <action name="copyData"> </action> …… <end name="end"/> </workflow-app> 父主题: Oozie样例代码说明
(可参见job.properties) 样例代码 <coordinator-app name="cron-coord" frequency="${coord:days(1)}" start="${start}" end="${end}" timezone="UTC" xmlns="
(可参见job.properties) 样例代码 <coordinator-app name="cron-coord" frequency="${coord:days(1)}" start="${start}" end="${end}" timezone="UTC" xmlns="
表1 参数含义 参数 含义 name end活动的名称 样例代码 <end name="end"/> 父主题: Oozie样例代码说明
<message> This workflow failed, error message[${wf:errorMessage(wf:lastErrorNode())}] </message> </kill> 父主题: Oozie样例代码说明
表1 参数含义 参数 含义 name end活动的名称 样例代码 <end name="end"/> 父主题: Oozie样例代码说明
样例代码 nameNode=hdfs://hacluster resourceManager=10.1.130.10:26004 queueName=QueueA dataLoadRoot=examples oozie.coord.application.path=${nameNode
(可参见job.properties) 样例代码 <action name="mr-dataLoad"> <map-reduce> <resource-manager>${resourceManager}</resource-manager>
> <start to="copyData"/> <action name="copyData"> </action> …… <end name="end"/> </workflow-app> 父主题: Oozie样例代码说明
(可参见job.properties) 样例代码 <action name="mr-dataLoad"> <map-reduce> <resource-manager>${resourceManager}</resource-manager>
样例代码 nameNode=hdfs://hacluster resourceManager=10.1.130.10:26004 queueName=QueueA dataLoadRoot=examples oozie.coord.application.path=${nameNode
表1 参数含义 参数 含义 to 后继action节点的名称 样例代码 <start to="mr-dataLoad"/> 父主题: Oozie代码样例说明