检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
导入样例工程到IntelliJ IDEA开发环境。 打开IntelliJ IDEA，在“Quick Start”页面选择“Open or Import”。 另外，针对已使用过的IDEA工具，可以从主界面选择“File > Import project...”导入样例工程。 图6 Open or Import（Quick
产生告警的元素类型。 部件名 产生告警的元素名称。 对系统的影响 Flume Channel的磁盘空间使用量有继续增长的趋势，将会使数据导入到指定目的地的时间增长，当Flume Channel的磁盘空间使用量达到100%时会导致Flume Agent进程暂停工作。 可能原因 Flume Sink故障，导致数据无法发送。
认40%）时，告警恢复。 过载磁盘定义：磁盘分区的IO使用率大于80%的磁盘认为是过载磁盘。 例如： 某TopicA的Partition分布在三个Broker上，其中两个Broker上Partition所在磁盘分区的IO使用率大于80%。 那么，在过载磁盘上的Partition占比等于2/3，大于40%，触发告警。
ALM-45644告警全部恢复后，等待几分钟，检查本告警是否恢复。 是，处理完毕。 否，执行5。 在TaskManager日志检查缓存命中率并收集日志 使用具有FlinkServer管理操作权限的用户登录FusionInsight Manager。 选择“运维 > 告警 > 告警 > ALM-45649
值章节处理对应的告警。 ALM-45647告警全部恢复后，等待几分钟，检查本告警是否恢复。 是，处理完毕。 否，执行12。 收集故障信息 使用具有FlinkServer管理操作权限的用户登录FusionInsight Manager。 选择“运维 > 告警 > 告警 > ALM-45650
dmin”，进入Ranger WebUI界面。 在Ranger WebUI界面，单击右上角用户名，选择“Log Out”，退出当前用户。 使用rangeradmin用户或者其他具有Ranger管理员权限用户重新登录。rangeradmin用户默认密码请参考用户账号一览表获取。 在Ranger
组件业务用户 代码认证： 通过获取客户端的principal和keytab文件在应用程序中进行认证。 MapReduce的安全认证代码 目前使用统一调用LoginUtil类进行安全认证。 在MapReduce样例工程的“com.huawei.bigdata.mapreduce.ex
Coordinator进程GC时间过长，会影响Coordinator进程运行的性能，甚至造成Coordinator进程不可用。 可能原因 该节点Coordinator进程堆内存使用率过大，或配置的堆内存不合理，导致进程GC频繁。 处理步骤 检查GC时间。 登录MRS集群详情页面，选择“告警管理”。 选中“告警ID”为
对系统的影响 Worker进程GC时间过长，会影响Worker进程运行的性能，甚至造成Worker进程不可用。 可能原因 该节点Worker进程堆内存使用率过大，或配置的堆内存不合理，导致进程GC频繁。 处理步骤 检查GC时间。 登录MRS集群详情页面，选择“告警管理”。 选中“告警ID”为
检查knox进程是否异常。 登录FusionInsight Manager页面，在告警列表中，单击此告警所在行的，查看该告警的主机名称。 使用PuTTY工具，以root用户登录该告警的主机地址。 执行命令su - omm，切换至omm用户。 执行sh ${BIGDATA_HOME
多主实例模式与非多主实例模式两种模式的JDBCServer接口相比，除连接方式不同外其他使用方法相同。由于Spark JDBCServer是Hive中的HiveServer2的另外一个实现，其使用方法，请参见Hive官网：https://cwiki.apache.org/confl
Storm > 下载客户端 > 完整客户端”，下载客户端程序到“远端主机”，即目标ECS。 登录到客户端下载的目标ECS。 在Linux系统中，使用如下命令解压客户端压缩包。 tar -xvf MRS_Storm_Client.tar tar -xvf MRS_Storm_ClientConfig
********************************************"); // 读取文本路径信息，并使用逗号分隔 final String[] filePaths = ParameterTool.fromArgs(args).get("filePath"
Manager首页，选择“运维 > 告警 > 告警”中查看是否存在告警“ALM-14002 DataNode磁盘空间使用率超过阈值”。 是，执行6。 否，执行8。 参考ALM-14002 DataNode磁盘空间使用率超过阈值进行处理，查看对应告警是否清除。 是，执行7。 否，执行8。 等待5分钟，检查该告警是否恢复。
解决Hive向量化if语句中由于数据被覆盖导致数据错误和NPE问题 解决开启向量化时，str_to_map函数执行长时间异常问题 解决Hive开启向量化参数后使用split函数执行MR任务效率很低问题 解决Hive开启向量化后查询包含nvl函数和decimal(10,5)字段类型的表报错问题 解决Tez分区空目录报错，报目录不存在问题
值章节处理对应的告警。 ALM-45647告警全部恢复后，等待几分钟，检查本告警是否恢复。 是，处理完毕。 否，执行12。 收集故障信息 使用具有当前Flink作业的管理操作权限的用户登录Manager。 选择“运维 > 告警 > 告警 > ALM-45648 RocksDB持续
模式下，不兼容老版本的客户端。推荐使用yarn-cluster模式。 客户端向ResourceManager发送Spark应用提交请求，ResourceManager为其返回应答，该应答中包含多种信息（如ApplicationId、可用资源使用上限和下限等）。Client端将启动
值章节处理对应的告警。 ALM-45647告警全部恢复后，等待几分钟，检查本告警是否恢复。 是，处理完毕。 否，执行12。 收集故障信息 使用具有FlinkServer管理操作权限的用户登录FusionInsight Manager。 选择“运维 > 告警 > 告警 > ALM-45642
ALM-45647告警全部恢复后，等待几分钟，检查本告警是否恢复。 是，处理完毕。 否，执行8。 在TaskManager日志检查是否Level0层SST文件数过多并收集日志 使用具有FlinkServer管理操作权限的用户登录FusionInsight Manager。 选择“运维 > 告警 > 告警 > ALM-45644
为了提高通信速率，希望不同主机之间的通信能够尽量发生在同一个机架之内，而不是跨机架。 为了提高容错能力，分布式服务的进程或数据需要尽可能存在多个机架的不同主机上。 Hadoop使用一种类似于文件目录结构的方式来表示主机。 由于HDFS不能自动判断集群中各个DataNode的网络拓扑情况，管理员需设置机架名称来确定主机
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
