检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
/tmp/clusteringjob.properties --spark-memory 12g 指定clustering的排序方式和排序列： 当前clustering支持linear、z-order、hilbert 三种排序方式，可以通过option方式或者set方式来设置。
ConsumerRecords<String, String> records = consumer.poll(waitTime); for (ConsumerRecord<String, String> record : records) {
的摘要。 与“/ joboverview”相同，但仅包含已完成，已取消或失败的Job。 /jobs/<jobid> 一个Job主要信息包含列出数据流计划，状态，状态转换的时间戳，每个顶点（运算符）的聚合信息。 /jobs/<jobid>/vertices 目前与“/jobs/<jobid>”相同。
的摘要。 与“/ joboverview”相同，但仅包含已完成，已取消或失败的Job。 /jobs/<jobid> 一个Job主要信息包含列出数据流计划，状态，状态转换的时间戳，每个顶点（运算符）的聚合信息。 /jobs/<jobid>/vertices 目前与“/jobs/<jobid>”相同。
https://oozie server hostname:port/oozie -config job.properties文件所在路径 -run 参数列表： 表2 参数列表 参数 含义 job 表示执行的是job任务 -oozie Oozie服务器地址（任意节点） -config job.properties文件所在路径
https://oozie server hostname:port/oozie -config job.properties文件所在路径 -run 参数列表： 表2 参数列表 参数 含义 job 表示执行的是job任务 -oozie Oozie服务器地址（任意节点） -config “job.properties”文件所在路径
参数说明 表1 参数说明 配置参数 说明 默认值 supervisor.slots.ports supervisor上能够运行workers的端口列表。每个worker占用一个端口，且每个端口只运行一个worker。通过这项配置可以设置每台机器上运行的worker数量。端口的取值范围是1
的摘要。 与“/ joboverview”相同，但仅包含已完成，已取消或失败的Job。 /jobs/<jobid> 一个Job主要信息包含列出数据流计划，状态，状态转换的时间戳，每个顶点（运算符）的聚合信息。 /jobs/<jobid>/vertices 目前与“/jobs/<jobid>”相同。
首先使用KafkaPartitioner对象去构造一个FlinkKafkaDelegatePartitioner对象，然后再检查该对象是否可序列化。由于ClosureCleaner::clean函数是static函数，当用例中的KafkaPartitioner对象是非static时，
首先使用KafkaPartitioner对象去构造一个FlinkKafkaDelegatePartitioner对象，然后再检查该对象是否可序列化。由于ClosureCleaner::clean函数是static函数，当用例中的KafkaPartitioner对象是非static时，
> 服务 > Spark2x > 配置”。单击“全部配置”。 选择“SparkResource2x > 默认”，修改以下参数： 表1 参数列表 参数 默认值 修改结果 spark.shuffle.service.enabled false true 重启Spark2x服务，配置生效。
-omm-xxx.log”），确认HMaster日志中没有频繁打印“system pause”或“jvm”等GC相关信息。 然后可以通过下列三种方式确认原因为HDFS性能慢造成告警产生。 使用客户端验证，通过hbase shell进入hbase命令行后，执行list验证需要运行多久。
e取得权限，单击“确定”。 在MRS Manager界面选择“系统设置 > 用户管理”，在用户名中选择hdfsuser，然后在右侧“操作”列中选择“更多 >下载认证凭据”下载，保存后解压得到用户的user.keytab文件与krb5.conf文件，用于在样例工程中进行安全认证，如图1所示。
environment variables CLOUD_SDK_AK and CLOUD_SDK_SK in the local environment ak = os.environ["CLOUD_SDK_AK"] sk = os.environ["CLOUD_SDK_SK"]
产生告警的集群名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 Unhealthy Host 不健康节点的主机列表。 对系统的影响 故障的NodeManager节点无法提供Yarn服务。 容器减少，集群性能下降。 可能原因 NodeManager节点所在主机的硬盘空间不足。
38010 重要 否 告警参数 参数名称 参数含义 来源 产生告警的集群名称。 角色名 产生告警的角色名称。 主题名 产生告警的Topic名称列表。 对系统的影响 单副本的Topic存在单点故障风险，当副本所在节点异常时，会直接导致Partition没有leader，影响该Topic上的业务。
https://oozie server hostname:port/oozie -config job.properties文件所在路径 -run 参数列表： 表2 参数列表 参数 含义 job 表示执行的是job任务 -oozie Oozie服务器地址（任意节点） -config “job.properties”文件所在路径
通过sqoop import命令从PgSQL导出数据到Hive时报错 背景 使用sqoop import命令抽取开源PgSQL数据库内容到MRS HDFS或Hive中。 用户问题 使用sqoop命令可以查询PgSQL表，但是执行sqoop import命令导入导出时报错： The
overwrite语句误操作导致数据丢失 问题 如何对重点目录进行保护，防止“insert overwrite”语句误操作导致数据丢失？ 回答 当用户要对Hive重点数据库、表或目录进行监控，防止“insert overwrite”语句误操作导致数据丢失时，可以利用Hive配置中的“hive.local.dir
WebUI 第一次访问Presto WebUI，需要在浏览器中添加站点信任以继续打开页面。 方法三（适用于MRS 1.9.2及之后版本）： 在集群列表页面，单击集群名称，登录集群详情页面，选择“组件管理”。 若集群详情页面没有“组件管理”页签，请先完成IAM用户同步（在集群详情页的“概览
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
