检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
对系统的影响 用户提交的Spark任务执行失败。 可能原因 KrbServer服务异常。 LdapServer服务异常。 ZooKeeper服务异常。 HDFS服务故障。 Yarn服务故障。 对应的Hive服务故障。 处理步骤 检查Spark依赖的服务是否有服务不可用告警。 登录MRS集群详情页面，选择“告警管理”。
ClickHouse企业级能力增强 通过ELB访问ClickHouse ClickHouse开启mysql_port配置 父主题： 使用ClickHouse
阈值为每GB对应500000块数，用户根据需要调整内存值），确认GC_PROFILE的值为custom，保存配置。 选择“集群 > 待操作集群的名称 > HDFS > 实例”勾选状态为“配置过期”的DataNode实例，选择“更多 > 重启实例”使GC_OPTS配置生效。 重启期
HBase用户认证失败 用户问题 HBase用户认证失败。 问题现象 客户侧HBase用户认证失败，报错信息如下： 2019-05-13 10:53:09,975 ERROR [localhost-startStop-1] xxxConfig.LoginUtil: login failed
定位信息”。查看告警上报实例所在的节点主机信息。 在FusionInsight Manager首页，选择“集群 > 服务 > JobGateway > 实例”。 勾选上报告警的实例，选择“更多 > 滚动重启实例”。 重启期间服务业务可能受损或中断，建议选择业务低峰期操作。 查看实例重启后运行状态是否为良好。
定位信息”。查看告警上报实例所在的节点主机信息。 在FusionInsight Manager首页，选择“集群 > 服务 > JobGateway > 实例”。 勾选上报告警的实例，选择“更多 > 滚动重启实例”。 重启期间服务业务可能受损或中断，建议选择业务低峰期操作。 查看实例重启后运行状态是否为良好。
安全集群需要认证对HDFS有权限的用户，普通集群无需执行： kinit {用户} 执行以下命令进行回退（卸载完补丁后执行）: sh rollback_hdfs_file.sh 回退完成后需要在FusionInsight Manager界面上重启Spark的JDBCServer2x实例。 回退客户端补丁
适当调大参数值并保存配置，选择“集群 > 服务 > HBase > 实例”，勾选受影响的“RegionServer”实例，选择“更多 > 滚动重启 ”，在弹出的界面中输入用户和密码，单击“确定”，在“滚动重启实例”界面单击“确定”，等待滚动重启完成，使其生效。 配置生效后，在告警列表中，查看本告警是否清除。
FlinkServer REST API样例程序 使用代理用户访问FlinkServer REST API样例程序（Java） 父主题： 开发Flink应用
1-hw-ei-311001-SNAPSHOT.jar 由于“$SPARK_HOME/jars/streamingClient010/*”默认没有添加到classpath，所以需要手动配置。 在提交应用程序运行时，在命令中添加如下参数即可，详细示例可参考在Linux环境中调测Spark应用。
最大单条数据大小*通道个数，但xmx参数值不能超过节点剩余内存。 重启受影响的服务或实例，观察界面告警是否清除。 是，处理完毕。 否，执行6。 重启服务期间服务不可用，Flume业务中断。 重启实例期间若配置SinkGroup的failover模式且至少保持一个实例正常运行时Flume业务不中断，否则Flume业务会中断。
配置DataNode用做HDFS缓存的最大内存。 FLUME_HEAPSIZE 配置每个flume实例能使用的最大JVM内存。 IMPALAD_MEM_LIMIT 配置impalad实例可使用的最大内存。 添加自定义资源配置组。 是否需要根据时间自动调整资源配置？ 是，执行3.b。
本章节操作仅支持MRS 3.x及之后的版本。 对系统的影响 保存新的配置需要重启服务，此时对应的服务不可用。 修改Manager日志级别 以omm用户登录主管理节点。 执行以下命令，切换路径。 cd ${BIGDATA_HOME}/om-server/om/sbin 执行以下命令，修改日志级别。
选择“现有集群”，选中一集群并单击集群名进入集群信息页面。 若MRS集群为开启Kerberos认证的安全集群，需先完成IAM用户同步（在集群详情页的“概览”页签，单击“IAM用户同步”右侧的“同步”进行IAM用户同步）。 单击“文件管理”，进入“文件管理”页面。 选择“HDFS文件列表”。 图1 HDFS文件列表
使用Tez 访问Tez WebUI查看任务执行结果 Tez常用配置参数 Tez日志介绍 Tez常见问题
供安全认证和用户管理功能，可能引起无法登录Manager和组件的WebUI。 可能原因 Manager中LdapServer进程故障。 处理步骤 检查Manager中LdapServer进程是否正常。 以omm用户登录集群中的Manager所在节点主机。 可以通过登录FusionInsight
-p数据库登录用户密码 -PFE查询连接端口 -hDoris FE实例IP地址 Doris FE的查询连接端口，可以通过登录FusionInsight Manager，选择“集群 > 服务 > Doris > 配置”，查询Doris服务的“query_port”参数获取。 Doris
使用Presto 访问Presto的WebUI 使用Presto客户端执行查询语句 Presto常见问题
完成每天一次的定时数据分析工作，请参见coordinator.xml。 上传流程文件。 使用或切换到拥有HDFS上传权限的用户。 使用HDFS上传命令，将“dataLoad”目录上传到HDFS某个指定目录（oozie_cli用户需要对该目录有读写权限）。 该指定目录需要与之前“job.properties”中定义的“oozie
使用Hue 访问Hue WebUI界面 创建Hue操作任务 配置HDFS冷热数据迁移 Hue常用配置参数 Hue日志介绍 Hue常见问题 Hue故障排除
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
