检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用sqoop-shell工具导入数据到HBase 操作场景 本文将以从Oracle导入数据到HBase的作业为例，介绍如何分别在交互模式和批量模式下使用sqoop-shell工具进行创建和启动Loader作业。 前提条件 已安装并配置Loader客户端，具体操作请参见使用客户端运行Loader作业。
Repartition时有部分Partition没数据 问题 在repartition操作时，分块数“spark.sql.shuffle.partitions”设置为4500，repartition用到的key列中有超过4000个的不同key值。期望不同key对应的数据能分到不同
使用Flume客户端加密工具 安装Flume客户端后，配置文件的部分参数可能需要填写加密的字符，Flume客户端中提供了加密工具。 安装Flume客户端。 登录安装Flume客户端的节点，并切换到客户端安装目录。例如“/opt/FlumeClient”。 切换到以下目录 cd f
配置自定义调度器的WebUI 配置场景 如果用户在ResourceManager中配置了自定义的调度器，可以通过以下配置项为其配置相应的Web展示页面及其他Web应用。 配置描述 参考修改集群服务配置参数进入Yarn服务参数“全部配置”界面，在搜索框中输入参数名称。 表1 配置自定义调度器的WebUI
regionserver节点上的region，最后出现查询该RS上某一个region时会报region not online的异常。 处理步骤 进入HBase服务页面： MRS 3.x之前版本，单击集群名称，登录集群详情页面，选择“组件管理 > HBase”。 如果集群详情页面没
业务进程响应缓慢或不可用。 可能原因 告警阈值配置或者平滑次数配置不合理。 处理步骤 检查告警阈值配置或者平滑次数配置是否合理。 登录FusionInsight Manager，选择“运维 > 告警 > 阈值设置 > 待操作集群的名称 > Doris > CPU和内存 > FE的CPU使用率
业务进程响应缓慢或不可用。 可能原因 告警阈值配置或者平滑次数配置不合理。 处理步骤 检查告警阈值配置或者平滑次数配置是否合理。 登录FusionInsight Manager，选择“运维 > 告警 > 阈值设置 > 待操作集群的名称 > Doris > CPU和内存 > FE的内存使用率 (FE)”。
业务进程响应缓慢或不可用。 可能原因 告警阈值配置或者平滑次数配置不合理。 处理步骤 检查告警阈值配置或者平滑次数配置是否合理。 登录FusionInsight Manager，选择“运维 > 告警 > 阈值设置 > 待操作集群的名称 > Doris > CPU和内存 > BE的CPU使用率
1; 是，执行4。 否，执行5。 等待几分钟查看告警是否消失。 是，操作结束。 否，执行5。 收集故障信息 在FusionInsight Manager界面，选择“运维 > 日志 > 下载”。 在“服务”中勾选待操作集群的“ClickHouse”。 在“主机”中选择异常的主机，单击“确定”。
同步”会显示“未同步”。 单击“IAM用户同步”右侧的“同步”。同步状态在MRS控制台页面选择“操作日志”查看当前用户是否被修改。 是，则可以重新提交Hive作业。 否，则检视上述步骤是否全部已执行完成。 是，请联系运维人员处理。 否，请等待执行完成后再提交Hive作业。 父主题：
影响该Broker正常提供读写服务。 可能原因 该节点Kafka实例堆内存使用率过大，或配置的堆内存大小不合理，导致使用率超过阈值。 处理步骤 检查Kafka实例堆内存使用率。 在FusionInsight Manager首页，选择“运维 > 告警 > 告警 > Kafka堆内存使用率超过阈值
告警”，查找上报的告警，在操作列单击“清除”，手动清除该告警。 重新执行受影响的作业，观察后续作业是否还会触发该告警。 否，操作结束。 是，执行6。 收集故障信息 在FusionInsight Manager界面，选择“运维 > 日志 > 下载”。 在“服务”中勾选待操作集群的“Spark”。
ion_id），所以需要先在管理控制台上获取到作业ID。作业ID获取步骤如下： 登录MRS管理控制台。 选择“现有集群”，单击待操作集群的集群名称，进入集群详情页面。 选择“作业管理”页签，在作业列表中获取待操作作业对应的“ID”。 图2 作业ID 父主题： 附录
JournalNode节点的网络不可达。 处理步骤 查看JournalNode实例是否启动。 在FusionInsight Manager首页，选择“运维 > 告警 > 告警”，在告警列表中单击此告警。 查看“定位信息”，获取告警产生的JournalNode节点IP地址。 选择“集群 > 待操作集群的名称 > 服务
DataNode可用直接内存不足，可能会造成内存溢出导致服务崩溃。 可能原因 该节点DataNode实例直接内存使用率过大，或配置的直接内存不合理，导致使用率超过阈值。 处理步骤 检查直接内存使用率。 在FusionInsight Manager首页，选择“运维 > 告警 > 告警”，单击告警“ALM-14016
文件或目录路径 删除文件为高危操作，在执行操作前请务必确认对应文件是否不再需要。 等待1个小时，检查该告警是否清除。 是，处理完毕。 否，执行5。 检查系统阈值是否正确设置。 在FusionInsight Manager首页，选择“集群 > 待操作集群的名称 > 服务 > HDFS
修改完用户密码后，单击右上角用户名，选择下拉菜单中的“Log Out”，并使用新的密码重新进行登录。 使用Ranger UserSync同步集群节点上的Unix操作系统用户 Ranger UserSync是Ranger中一个重要的组件，它支持将Unix系统用户或LDAP用户同步到Ranger WebU
Hive支持的传统关系型数据库语法说明 概述 Hive支持如下传统关系型数据库语法： Grouping EXCEPT、INTERSECT Grouping 语法简介： 当Group by语句带with rollup/cube选项时，Grouping才有意义。 CUBE生成的结果集显示了所选列中值的所有组合的聚合。
删除CarbonData表Segments 操作场景 如果用户将错误数据加载到表中，或者数据加载后出现许多错误记录，用户希望修改并重新加载数据时，可删除对应的segment。可使用segment ID来删除segment，也可以使用加载数据的时间来删除segment。 删除segment操作只能删除未合并的
合并CarbonData表Segments 操作场景 频繁的数据获取导致在存储目录中产生许多零碎的CarbonData文件。由于数据排序只在每次加载时进行，所以，索引也只在每次加载时执行。这意味着，对于每次加载都会产生一个索引，随着数据加载数量的增加，索引的数量也随之增加。由于每
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
