检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Confirm the project name and file location 导入完成后，IDEA主页显示导入的样例工程。 图16 已导入工程 （可选）如果导入Scala语言开发的样例程序，还需要为工程设置语言。 在IDEA主页，选择“File > Project Structures
如果未申请独享的存储池，请选择“云硬盘”，创建的磁盘使用公共存储资源。 专属分布式存储：为用户提供独享的存储资源，通过数据冗余和缓存加速等多项技术，提供高可用性和持久性，以及稳定的低时延性能。 如果您在专属分布式存储服务页面申请了存储池，可以选择“专属分布式存储”，在已申请的存储池中创建磁盘。
Confirm the project name and file location 导入完成后，IDEA主页显示导入的样例工程。 图16 已导入工程 （可选）如果导入Scala语言开发的样例程序，还需要为工程设置语言。 在IDEA主页，选择“File>Project Structures
”，MRS 3.x之前版本为Master节点上的“/opt/client”。 如果当前集群已开启Kerberos认证，参考创建MRS集群用户页面，创建一个用于提交作业的用户。 如果当前集群未开启Kerberos认证，则无需执行本步骤。 本示例创建一个机机用户，并分配了正确的用户组
待操作集群的名称 > 服务 > HDFS > 实例”，在实例列表中找到该NameService的备NameNode实例，查看其“配置状态”是否为“已同步”。 是，执行6。 否，执行4。 勾选该备NameNode实例，单击“启动实例”，等待启动完成。 等待1个NameNode合并元数据的周期时间后，查看告警是否清除。
Administrator”和“KMS Administrator”权限。 关于更多磁盘加密详情请参考云硬盘加密。 开启系统盘加密时，需配置以下参数： 系统盘密钥ID：已选择的密钥名称对应的密钥ID信息。 系统盘密钥名称：选择用来加密系统盘的密钥名称，默认选择密钥名称为“evs/default”的默认主密钥，在下拉框中可以选择其他用户主密钥。
spark-examples-security （已包含安全认证代码） yarn-client 代码认证。 yarn-cluster 不支持。 如上表所示，yarn-cluster模式中不支持在Spark工程代码中进行安全认证，因为需要在应用启动前已完成认证。 未提供Python样例工程的安全认证
“目的端路径”：填写保存备份数据的OBS目录。 “最大备份数”：填写备份目录中可保留的备份文件集数量。 单击“确定”保存。 在备份任务列表中已创建任务的“操作”列，选择“更多 > 即时备份”，开始执行备份任务。 备份任务执行完成后，系统自动在备份目录中为每个备份任务创建子目录，目录
Cookie”开关，即查看配置“flink-conf.yaml”文件中的“security.enable: true”，查看“security cookie”是否已配置成功，例如： security.cookie: ae70acc9-9795-4c48-ad35-8b5adc8071744f605d1d
录，可安装方法可参考《MapReduce服务用户指南》的“客户端管理”章节。 确认服务端HDFS组件已经安装，并正常运行。 客户端运行环境已安装1.7或1.8版本的JDK。 获取并解压缩安装包“MRS_HDFS_Client.tar”。执行如下命令解压。 tar -xvf MRS_HDFS_Client
xamples/jars/spark-examples_*.jar /tmp 如果当前集群已开启Kerberos认证，参考创建MRS集群用户页面，创建一个用于提交作业的用户。 如果当前集群未开启Kerberos认证，则无需执行本步骤。 本示例创建一个机机用户，并分配了正确的用户组
配置回收站清理策略 前提条件 集群已安装Guardian、Ranger、Hadoop等组件。 如果安装Hadoop、HetuEngine、Hive、Spark等组件后，再安装Guardian，则需要重新下载客户端，并对管理面作业提交的默认客户端进行刷新。 如果当前集群未启用Kerberos认
单击“新建作业”，进入“基本信息”界面，创建作业基本信息。 图2 “基本信息”界面 在“名称”中输入作业的名称。 在“类型”中选择“导出”。 在“组”中设置作业所属组，默认没有已创建的组，单击“添加”创建一个新的组，输入组的名称，单击“确定”保存。 在“队列”中选择执行该作业的YARN队列。默认值“root.default”。
支持单击设置多个阈值时间条件，或单击删除。 单击“确定”保存规则。 在新添加规则所在的行，单击“操作”中的“应用”，此时规则的“生效状态”变成“生效”。 当前已创建的规则单击“取消应用”后，才能应用新规则。 配置MRS集群告警阈值（MRS 2.x及之前版本） 在MRS Manager，单击“系统设置”。
行任务。 默认使用带宽控制为20MB/s，如果重新设置带宽流量或加大数据量，Balance操作可能会对正在运行的业务产生影响。 前提条件 已安装HDFS客户端。 配置Balance任务 使用客户端安装用户登录客户端所在节点。执行命令切换到客户端安装目录，例如“/opt/client”。
在集群详情页面，单击“节点管理”页签。 在Task节点组的“操作”列，选择“缩容”。 缩容类型选择“指定节点缩容”，勾选需要缩容的节点。 当节点处于关机、失联、未知、已隔离、故障状态时，可以指定节点缩容。 勾选“我已经阅读上述信息，并了解具体影响。”，并单击“确定”。 父主题： MRS集群管理
行任务。 默认使用带宽控制为20MB/s，如果重新设置带宽流量或加大数据量，Balance操作可能会对正在运行的业务产生影响。 前提条件 已安装HDFS客户端。 配置Balance任务 使用客户端安装用户登录客户端所在节点。执行命令切换到客户端安装目录，例如“/opt/client”。
打开“Security Cookie”开关，配置“security.enable: true”，查看“security cookie”是否已配置成功，例如： security.cookie: ae70acc9-9795-4c48-ad35-8b5adc8071744f605d1d
rkUI页面查看任务详情。 图2 查看Spark任务详情 任务运行完成中，在HBase Shell中查询HBase表内容，可以看到对应记录已更新。 cd /opt/client source bigdata_env hbase shell scan 'table2' ROW
jks）复制到客户端目录下，如“/opt/flume-client/fusionInsight-flume-1.9.0/conf/”（要求已安装Flume客户端），其中10.196.26.1为客户端所在节点业务平面的IP地址。 scp ${BIGDATA_HOME}/FusionInsight_Porter_8
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
