检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
包年/包月 按需计费 选择“按需计费”时，可能需要冻结一定的保证金。详细内容，请参见计费说明。 按需计费 集群名称 集群名称不允许重复。只能由字母、数字、中划线和下划线组成，并且长度为1～64个字符。 MRS_hbase 集群类型 提供几种集群类型： 分析集群 流式集群 混合集群 自定义 自定义
“作业类型”选择“HadoopStreaming”，参考表1配置作业信息。 表1 作业配置信息 参数 描述 示例 作业名称 作业名称，只能由字母、数字、中划线和下划线组成，并且长度为1～64个字符。 hadoop_job 运行程序参数 可选参数，为本次执行的作业配置相关优化参数（例如线程
取值范围： 只能由英文字母、数字以及“_”和“-”组成，且长度为[1-64]个字符。 默认取值： 不涉及 project_id 是 String 参数解释： 项目编号。获取方法，请参见获取项目ID。 约束限制： 不涉及 取值范围： 只能由英文字母和数字组成，且长度为[1-64]个字符。
搜索并修改“hbase.replication.cluster.id”参数，表示标识主集群HBase的ID，用于备集群连接主集群。参数值支持大小写字母、数字和下划线（_），长度不超过30。 重启HBase服务并安装客户端。 单击“保存”，保存配置。单击“概览”，选择“更多 > 重启服务”，输入
范围true或者false Decimal 默认值是(10,0) ，最大值是(38,38) 说明： 当进行带过滤条件的查询时，为了得到准确的结果，需要在数字后面加上BD。例如，select * from carbon_table where num = 1234567890123456.22BD
RSGroup管理”。 单击“添加RSGroup”按钮，在弹出的添加RSGroup页面填写新增的RSGroup名称，RSGroup名称包括数字、字母或下划线（_），长度为1-120个字符。然后单击“确定”。 查看RSGroup 选择待操作的RSGroup，在操作列单击“查看”，即
RSGroup管理”。 单击“添加RSGroup”按钮，在弹出的添加RSGroup页面填写新增的RSGroup名称，RSGroup名称包括数字、字母或下划线（_），长度为1-120个字符。然后单击“确定”。 查看RSGroup 选择待操作的RSGroup，在操作列单击“查看”，即
参见对应表格内容为租户配置属性。 表1 租户参数一览表（MRS 3.x版本） 参数名 示例 描述 名称 ta1 指定当前租户的名称，可包含数字、字母或下划线（_）。 根据业务需求规划租户的名称，不得与当前集群中已有的角色、HDFS目录或者Yarn队列重名。 租户类型 非叶子租户 指定租户是否是一个叶子租户。
Hudi）数据入湖后，存在Hudi相同分区下同主键数据重复问题，导致数据不一致。 Alter删除分区在写同名分区数据，执行clean无效。 Hudi以数字开头的hudi表名，表创建成功，在进行删除分区时失败。 FileGroup下只有一个4bytes文件时，Hudi读写报错。 Hudi表删表之后重建会报错。
只能由英文字母和数字组成，且长度为[1-64]个字符。 默认取值： 不涉及 cluster_id 是 String 参数解释： 集群ID。如果指定集群ID，则获取该集群做过补丁更新的最新版本元数据。获取方法，请参见获取集群ID。 约束限制： 不涉及 取值范围： 只能由英文字母、数字以及“_
单击“HSFabric”，选择“实例配置”，查看“server.port”的值，默认为“29900”。 192.168.1.1:29900 区域 当前请求发起方所属区域，只能包数字和下划线。 0755_01 接收超时时长(秒) 等待接收数据的超时时长(单位：秒)。 60 Task总超时时长(秒) 每个跨域Task执行的总超时时长(单位：秒)。
只能由英文字母和数字组成，且长度为[1-64]个字符。 默认取值： 不涉及 cluster_id 是 String 参数解释： 集群ID。如果指定集群ID，则获取该集群做过补丁更新的最新版本元数据。获取方法，请参见获取集群ID。 约束限制： 不涉及 取值范围： 只能由英文字母、数字以及“_
只能由英文字母和数字组成，且长度为[1-64]个字符。 默认取值： 不涉及 cluster_id 是 String 参数解释： 集群ID。如果指定集群ID，则获取该集群做过补丁更新的最新版本元数据。获取方法，请参见获取集群ID。 约束限制： 不涉及 取值范围： 只能由英文字母、数字以及“_
处理步骤 确认异常来源。 查看作业日志中收到的错误码，确认错误码是属于APIG还是MRS。 若是公共APIG的错误码（APIG的错误码是APIGW开头），联系公共APIG维护人员。 若是MRS侧错误，继续下一步。 排查服务和进程运行状态等基本情况。 登录Manager界面确认是否有服务故
Yarn节点配置调优 操作场景 合理配置大数据集群的调度器后，还可通过调节每个节点的可用内存、CPU资源及本地磁盘的配置进行性能调优。 具体包括以下配置项： 可用内存 CPU虚拟核数 物理CPU使用百分比 内存和CPU资源的协调 本地磁盘 操作步骤 若您需要对参数配置进行调整，具体操作请参考修改集群服务配置参数。
配置消息订阅规则相关参数。 表1 消息订阅规则参数说明 参数 示例 参数说明 规则名称 mrs_alarm 用户自定义发送订阅消息的规则名称，只能包含数字、英文字符、中划线和下划线。 提醒通知 开启 选择开启时，将按照该订阅规则为订阅者发送对应订阅消息。 选择关闭时，该规则不会生效，即不会向订阅者发送订阅消息。
只能由英文字母和数字组成，且长度为[1-64]个字符。 默认取值： 不涉及 表2 Query参数 参数 是否必选 参数类型 描述 connector_id 否 String 参数解释： 连接ID。获取方法，请参见获取连接ID。 约束限制： 不涉及 取值范围： 只能由英文字母、数字以及“_
只能由英文字母和数字组成，且长度为[1-64]个字符。 默认取值： 不涉及 cluster_id 是 String 参数解释： 集群ID。如果指定集群ID，则获取该集群做过补丁更新的最新版本元数据。获取方法，请参见获取集群ID。 约束限制： 不涉及 取值范围： 只能由英文字母、数字以及“_
子租户参数一览 参数名 描述 集群 显示上级父租户所在集群。 父租户资源 显示上级父租户的名称。 名称 指定当前租户的名称，长度为3~50个字符，可包含数字、字母或下划线（_）。 根据业务需求规划子租户的名称，不得与当前集群中已有的角色、HDFS目录或者Yarn队列重名。 租户类型 指定租户是否是一个叶子租户：
从checkpoint恢复spark应用的限制 第三方jar包跨平台（x86、TaiShan）支持 在客户端安装节点的/tmp目录下残留了很多blockmgr-开头和spark-开头的目录 ARM环境python pipeline运行报139错误码 Structured Streaming 任务提交方式变更 常见jar包冲突处理方式
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
