检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Flink DataStream样例程序（Scala） 功能介绍 实时统计连续网购时间超过2个小时的女性网民信息，将统计结果直接打印出来。 DataStream FlinkStreamScalaExample代码样例 下面代码片段仅为演示，具体代码参见com.huawei.bigdata
式删除某些列如“col1”后，更新parquet文件中以旧的schema写入的列“col1”，在这种情况下，parquet尝试在传入记录中查找所有当前字段，当发现“col1”不存在时，发生上述异常。 解决这个问题的办法是使用所有schema演进版本来创建uber schema，并使用该schema作为target
Manager首页，选择“运维 > 告警 > 告警 > Kafka默认用户状态异常 > 定位信息”。查看告警上报的实例的主机名。 根据告警提示的主机信息，登录到该节点上。 执行id -Gn kafka，查看返回结果是否报"No such user"。 是，记录当前节点主机名，并执行4。 否，执行6。
interval”设置成较大的值，或者不对参数进行设置。查看MapReduce任务是否能成功执行。 是，执行2.e。 否，执行2.b。 检查Yarn服务状态。 登录MRS集群详情页面，选择“告警管理”。 在告警列表中，查看是否有“ALM-18000 Yarn服务不可用”产生。 是，执行2
> 告警”页面，查看系统是否上报“ALM-27001 DBService服务不可用”告警。 是，执行2。 否，执行3。 参考ALM-27001 DBService服务不可用告警帮助指导对DBService服务状态异常进行处理，待DBService告警消除后，查看“Ranger服务不可用”告警是否清除。
待操作集群的名称 > 服务 > DBService”。 在“概览”页面查看“数据目录磁盘空间使用率”图表，检查数据目录磁盘空间使用率是否超过90%。 是，执行3。 否，执行13。 以omm用户登录DBServer主管理节点，执行以下命令，查看数据库是否进入只读模式。 source $DBSERVER_HOME/
告警”，在告警列表中查看对应的磁盘是否存在“ALM-12017 磁盘容量不足”告警。 是，执行4。 否，执行5。 参考ALM-12017 磁盘容量不足操作步骤进行处理，故障恢复后，查看本告警是否恢复。 是，处理完毕。 否，执行7。 选择“主机 > 待查看的主机名称”，在主机的概览页面查看对应分
conf）。user.keytab和krb5.conf文件为安全模式下的认证文件，需要在FusionInsight Manager中下载principal用户的认证凭证，样例代码中使用的用户为：super，需要修改为准备好的开发用户。 打包项目 通过IDEA自带的Maven工具，打包项目
件。 -diff <oldSnapshot> <newSnapshot> 将新旧版本之间的差异内容，拷贝到目标位置的旧版本文件中。 -skipcrccheck 是否跳过源文件和目标文件之间的CRC校验。 -strategy {dynamic|uniformsize} 指定拷贝任务
可能原因 Kafka服务异常。 网络异常。 Kafka Topic异常。 原因分析 通过Manager页面，查看Kafka集群当前状态，发现状态为“良好”，且监控指标内容显示正确。 查看SparkStreaming日志中提示错误的Topic信息。 执行Kafka相关命令，获取Topic分布信息和副本同步信息，观察返回结果。
至少包含一个小写字母、一个大写字母、一个数字和一个特殊字符，支持的特殊字符包含-%;[]{}@_。 查看密码修改结果： MRS 3.3.0-LTS版本：登录到ClickHouse Server节点的，查看“${BIGDATA_HOME}/FusionInsight_ClickHouse_*/
检查DataNode实例。 在MRS集群详情页面，单击“组件管理 > HDFS > 实例”。 查看所有DataNode实例的状态是否为“良好”。 是，执行3。 否，执行1.c。 重启DataNode实例，查看能否成功启动。 是，执行2.b。 否，执行2.a。 删除被破坏的文件。 在集群节点使用客户端。执行hdfs
开发Flink应用 编译并运行程序 指导用户将开发好的程序编译并提交运行。 编译并调测Flink应用 查看程序运行结果 程序运行结果会写在用户指定的路径下，用户还可以通过UI查看应用运行情况。 查看Flink应用调测结果 调优程序 您可以根据程序运行情况，对程序进行调优，使其性能满足业务场景需求。
开发Flink应用 编译并运行程序 指导用户将开发好的程序编译并提交运行。 编译并调测Flink应用 查看程序运行结果 程序运行结果会写在用户指定的路径下，用户还可以通过UI查看应用运行情况。 查看Flink应用调测结果 调优程序 您可以根据程序运行情况，对程序进行调优，使其性能满足业务场景需求。
Tserver进程CPU占用率超过阈值”告警，查看告警来源。 在“运维 > 告警 > 阈值设置 > Kudu”，找到该告警的阈值，再对比集群Kudu实例的CPU使用率监控项，和阈值对比，查看超阈值情值，处理CPU使用率过高的问题，或修改阈值。 在“运维 > 告警”页签，查看该告警是否恢复。 是，处理完毕。
> 实例”。 查看所有DataNode实例的状态是否为“良好”。 是，执行11。 否，执行3。 重启DataNode实例，查看能否成功启动。 重启期间服务业务可能受损或中断，建议选择业务低峰期操作。 是，执行4。 否，执行5。 选择“运维 > 告警 > 告警”，查看该告警是否恢复。
数据库 > 数据目录磁盘空间使用率”，查看该告警阈值是否合理（默认值80%为合理值）。 是，执行3。 否，执行2。 根据实际服务的使用情况修改告警阈值。 选择“集群 > 待操作集群的名称 > 服务 > DBService”，在“概览”页面查看“数据目录磁盘空间使用率”图表，检查数
story部分数据丢失。 查看调测结果 Spark应用程序运行完成后，可通过如下方式查看应用程序的运行情况。 通过运行结果数据查看应用程序运行情况。 结果数据存储路径和格式已经由Spark应用程序指定，可通过指定文件获取。 登录Spark WebUI查看应用程序运行情况。 Spark主要有两个Web页面。
HDFS的业务访问量太大，超过了已有DataNode的负载能力。 处理步骤 查看阈值设置是否合理 在FusiongInsight Manager首页，选择“运维 > 告警 > 阈值设置 > 待操作集群的名称 > HDFS > 磁盘 > 总副本预留磁盘空间所占比率”，查看该告警阈值设置是否合理（默认90%为合理值，用户可以根据自己的实际需求调节）。
检查NameNode节点是否进入安全模式。 登录FusionInsight Manager页面，选择“运维 > 告警 > 告警”，查看该告警的详细信息，在定位信息中查看发生该告警的主机名称。 选择“集群 > 服务 > HDFS”，单击“NameNode Web UI”后的“NameNode
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
