检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
com.obs.services.EcsObsCredentialsProvider：通过ECS云服务获取AK/SK信息。 com.obs.services.BasicObsCredentialsProvider：使用用户传入OBS的AK/SK信息。
页面主要包括了Jobs、Stages、Storage、Environment、Executors、SQL、JDBC/ODBC Server等部分。Streaming应用会多一个Streaming标签页。
前提条件 当前用户具备待删除作业的编辑“Edit”权限或作业所在分组的编辑“Jobs Edit”权限。 操作步骤 登录“Loader WebUI”界面。
前提条件 当前用户具备待导出作业的编辑“Edit”权限或作业所在分组的编辑“Jobs Edit”权限。 操作步骤 登录“Loader WebUI”界面。
操作步骤 登录Manager页面，选择“集群 > 服务 > JobGateway > 实例”，查看所有JobServer实例节点IP。 获取部署了JobServer的节点中，IP最小的节点（以下简称“最小IP节点”）。若最小IP节点更新服务客户端失败，执行3， 否则执行4。
登录FusionInsight Manager，选择“集群 > 服务 > HBase > 配置”，在搜索框中搜索并修改以下参数： fs.coldFS：修改该参数值为OBS文件系统名，例如：obs://OBS并行文件系统名称。
Hue界面主要用于文件、表等数据的查看与分析，禁止通过Hue界面对操作对象进行删除等高危管理操作。如需操作，建议在确认对业务没有影响后通过各组件的相应操作方法进行处理，例如使用HDFS客户端对HDFS文件进行操作，使用Hive客户端对Hive表进行操作。
Hue界面主要用于文件、表等数据的查看与分析，禁止通过Hue界面对操作对象进行删除等高危管理操作。如需操作，建议在确认对业务没有影响后通过各组件的相应操作方法进行处理，例如使用HDFS客户端对HDFS文件进行操作，使用Hive客户端对Hive表进行操作。
用户也可以使用API配置对象的优先级。 设置优先级，可通过Configuration.set("mapreduce.job.priority", <priority>)或Job.setPriority(JobPriority priority)设置。 父主题： Yarn性能调优
执行程序参数中填写的参数为：wordcount obs://wordcount01/input/ obs://wordcount01/output/。 参数“obs://wordcount01/input/”中的OBS文件系统名需要替换为实际环境创建的文件系统名。
用户也可以使用API配置对象的优先级。 设置优先级，可通过Configuration.set("mapreduce.job.priority", <priority>)或Job.setPriority(JobPriority priority)设置。 父主题： Yarn性能调优
执行如下命令将OBS容器内部的目录挂载到Alluxio的/obs目录。 alluxio fs mount /obs obs://<OBS_BUCKET>/<OBS_DIRECTORY>/ 父主题： 使用Alluxio
set fs.obs.access.key=AK; set fs.obs.secret.key=SK; set metaconf:fs.obs.access.key=AK; set metaconf:fs.obs.secret.key=SK; 新建表的存储类型为obs。
fs.obs.access.key=AK; fs.obs.secret.key=SK; fs.obs.endpoint=endpoint; 新建表的存储类型为OBS。
fs.obs.access.key=AK; fs.obs.secret.key=SK; fs.obs.endpoint=endpoint; 新建表的存储类型为obs。
在“数据配置”选择需要恢复的对象。 单击“校验”，界面显示“校验恢复任务配置成功”。 单击“确定”。 在恢复任务列表已创建任务的“操作”列，单击“执行”，开始执行恢复任务。 任务执行完成后，“任务状态”显示为“成功”。 父主题： 备份恢复MRS集群数据
对系统的影响 当Guardian调用ECS的securitykey接口失败时，可能会导致任务获取访问OBS的临时aksk失败，进而业务无法正常访问OBS。 可能原因 集群未绑定ECS委托。 ECS底层接口异常，导致请求失败。 处理步骤 确认是否绑定委托。
配置Yarn大作业扫描 Yarn大作业扫描功能主要用于监控Hive、HetuEngine、Spark等作业的本地临时文件（例如shuffle文件是否过大）、监控Hive、HetuEngine、Spark的关键HDFS目录（不支持OBS）是否过大。
/jobs/<jobid> 一个Job主要信息包含列出数据流计划，状态，状态转换的时间戳，每个顶点（运算符）的聚合信息。 /jobs/<jobid>/vertices 目前与“/jobs/<jobid>”相同。
补丁下载地址 华北-北京一：https://mrs-container1-patch-cn-north-1.obs.cn-north-1.myhuaweicloud.com/MRS_Common_Script/MRS_315_Patch_Diskmgt_v2.1_20230502.
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
