检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
确保本地PC的时间与MRS集群的时间差要小于5分钟,若无法确定,请联系系统管理员。MRS集群的时间可通过FusionInsight Manager页面右下角查看。 已准备开发环境及MRS集群相关配置文件,详情请参考准备连接HBase集群配置文件。 操作步骤 参考获取MRS应用开发样例工程,获取样例
修改MRS集群组件配置参数 为了满足实际业务的需求,用户可以在MRS中快速查看及修改服务默认的配置。 前提条件 如果通过MRS管理控制台操作,需要已完成IAM用户同步(在集群详情页的“概览”页签,单击“IAM用户同步”右侧的“同步”进行IAM用户同步)。 如果通过Manager界
配置LDAP输出审计日志 用户可以通过设置LDAP服务的审计日志输出级别,将审计内容输出至系统日志信息中(如“/var/log/messages”),用于查看用户的活动信息及操作指令信息。 LDAP的审计日志开启后,会产生大量日志信息,严重影响集群性能,请谨慎开启。 该章节仅适用于MRS 3.x及之后版本。
以root用户登录集群故障节点,用户密码为安装前用户自定义,请咨询系统管理员。 执行chage -l omm命令来查看当前omm用户密码设置信息。 查找“Account expires”对应值,查看用户设置是否过期。 如果参数值为“never”,则代表永不过期。 是,执行3。 否,执行4。 执行chage
使用CDM从旧的集群迁移数据至新集群的HDFS过程失败。 问题现象 使用CDM从源HDFS导入目的端HDFS,发现目的端MRS集群故障,NameNode无法启动。 查看日志发现在启动过程中存在“Java heap space”报错,需要修改NameNode的JVM参数。 图1 故障日志 原因分析 使用CD
Doris”。 查看Doris服务“运行状态”是否为“良好”。 是,执行4。 否,执行3。 若服务进程未启动,请先启动服务进程,并查看该告警是否清除。 是,处理完毕。 否,执行4。 查看集群是否有其他Doris相关告警产生。若有其他告警,请按照相应的告警帮助文档进行恢复,并查看该告警是否清除。
Manager首页,选择“运维 > 告警 > 告警 > Kafka默认用户状态异常 > 定位信息”。查看告警上报的实例的主机名。 根据告警提示的主机信息,登录到该节点上。 执行id -Gn kafka,查看返回结果是否报"No such user"。 是,记录当前节点主机名,并执行4。 否,执行6。
> 告警”页面,查看系统是否上报“ALM-27001 DBService服务不可用”告警。 是,执行2。 否,执行3。 参考“ALM-27001 DBService服务不可用”告警帮助指导对DBService服务状态异常进行处理,待DBService告警消除后,查看“Ranger服务不可用”告警是否清除。
interval”设置成较大的值,或者不对参数进行设置。查看MapReduce任务是否能成功执行。 是,执行2.e。 否,执行2.b。 检查Yarn服务状态。 登录MRS集群详情页面,选择“告警管理”。 在告警列表中,查看是否有“ALM-18000 Yarn服务不可用”产生。 是,执行2
恢复Manager数据 查看备份数据位置。 在MRS Manager,选择“系统设置 > 备份管理”。 在任务列表指定任务的“操作”列,单击“更多 > 查询历史”,打开备份任务执行历史记录。 在弹出的窗口中,在指定一次执行成功记录的“备份路径”列,单击“查看”,打开此次任务执行的备份路径信息,查找以下信息:
S,热数据存储在HDFS中,能有效降低存储成本。 该功能仅MRS 3.3.0及之后版本支持。 OBS读IOPS的能力降低,因此只适用于低频查询的场景。 OBS不适合并发大量读请求的场景,并发大量读请求可能会导致请求异常。 原理介绍 HBase支持对同一张表的数据进行冷热分离存储。
待操作集群的名称 > 服务 > DBService”。 在“概览”页面查看“数据目录磁盘空间使用率”图表,检查数据目录磁盘空间使用率是否超过90%。 是,执行3。 否,执行13。 以omm用户登录DBServer主管理节点,执行以下命令,查看数据库是否进入只读模式。 source $DBSERVER_HOME/
告警”,在告警列表中查看对应的磁盘是否存在“ALM-12017 磁盘容量不足”告警。 是,执行4。 否,执行5。 参考“ALM-12017 磁盘容量不足”操作步骤进行处理,故障恢复后,查看本告警是否恢复。 是,处理完毕。 否,执行7。 选择“主机 > 待查看的主机名称”,在主机的
检查Flink依赖的ZooKeeper服务是否异常。 在FusionInsight Manager首页,选择“运维 > 告警 > 告警”。 在告警列表中,查看是否存在告警“ALM-13000 ZooKeeper服务不可用”。 是,执行3。 否,执行5。 参考“ALM-13000 ZooKeeper服务不可用”章节处理对应的告警。
告警阈值配置不合理。 租户分配的文件目录数上限不合理 处理步骤 查看阈值设置是否合理 查看告警定位信息,获取上报告警的租户名称,租户目录。 在FusiongInsight Manager首页,单击“租户资源”页面选择上报告警的租户名称,单击“资源”,查看上报告警的租户目录所对应的文件数阈值配置设置是
Manager首页,选择“集群 > 服务”,查看Hive、KrbServer是否已停止。 是,启动已停止的服务,执行2。 否,执行3。 在FusionInsight Manager首页,选择“运维 > 告警 > 告警”,在告警列表中,查看“Impala服务不可用”告警是否清除。 是,操作结束。
ource.jar。 打包Strom应用业务 提交拓扑 指导用户将开发好的程序提交运行。 提交Storm拓扑 查看程序运行结果 指导用户提交拓扑后查看程序运行结果。 查看Storm应用调测结果 父主题: Storm应用开发概述
称、用户自动搜索包含此关键字的全部作业。 清空搜索框的内容,系统会重新显示所有作业。 查看作业详细信息 在“作业浏览器”的作业列表,单击作业所在的行,可以打开作业详情。 在“元数据”页签,可查看作业的元数据。 单击“日志”可打开作业运行时的日志。 父主题: 创建Hue操作任务
index.parallelism 索引查找的并行度,其中涉及Spark Shuffle。 默认情况下,根据输入的工作负载特征自动计算的。 0 hoodie.bloom.index.prune.by.ranges 为true时,从文件框定信息,可以加快索引查找的速度。 如果键具有单调递增的前缀,例如时间戳,则特别有用。
> Impala > 进程FGCT >Catalog进程FGCT(Catalog)”查看阈值大小(默认值12s)。 在FusionInsightManager首页,选择“运维 > 告警 > 告警”查看是否存在告警ID为“29014”的告警。 是,执行3。 否,操作结束。 在Fusi