检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用cd命令进入使用率较高的磁盘对应的3中获取的数据存储目录下。 使用du -sh *命令打印出当前topic的名称及大小。 由于Kafka的全局的数据保留时间默认是7天。部分topic由于业务写入量大，而这些topic的分区正好在上面使用量高的磁盘上，因此导致磁盘使用率较高。 可以通过修改全局数据的保留
查询时长（s） 慢查询的SQL语句当前累计执行的时间，单位是秒。 用户 执行慢查询的SQL语句的ClickHouse用户。 客户端IP 提交该慢查询SQL语句的客户端IP。 占用的内存空间（MB） 慢查询SQL语句占用的内存大小统计，单位是MB。 操作 当前查询出来的慢SQL语句，可以单击“终止”结束该慢SQL语句查询。
HDFS磁盘空间使用率超过阈值”告警。 是，执行1.b。 否，执行2.a。 参考ALM-14001 HDFS磁盘空间使用率超过阈值进行处理，查看对应告警是否清除。 是，执行1.c。 否，执行3。 等待5分钟后，在“告警管理”页面查看本告警是否清除。 是，处理完毕。 否，执行2.a。 检查DataNode节点平衡状态。
通过Hue执行HetuEngine SQL 操作场景 用户需要使用图形化界面在集群中执行HetuEngine语句时，可以通过Hue完成任务。 本章节适用于MRS 3.3.0及之后版本。 前提条件 需要MRS集群已安装HetuEngine组件并添加HSFabric实例。HSFabr
Service是否存在，如果不存在则会创建以及为其添加默认Policy。如果用户在使用过程中误删了Service，可以重启或者滚动重启相应组件服务来恢复，如果是误删了默认Policy，可先手动删除Service，再重启组件服务。 图1 Ranger与组件的关系 父主题： Ranger
Oozie调度HiveSQL作业报错处理 问题现象 MRS 3.x集群Oozie调度Hive作业任务失败，查看日志HiveSQL，实际上是运行成功的，但Yarn任务总体失败，报错如下： java.io.ioException:output.properties data exceeds
池实际参数配置值。 单击“确定”。 在弹出窗口单击“确定”，确认保存配置。 添加自定义资源配置组 是否需要在不同时间段自动调整资源配置？ 是，执行9。 否，只需要使用“default”在所有时间段生效，任务结束。 单击“配置”，修改“系统资源调整基数”，然后单击“下一步”。 单击“添加”增加新的资源配置组。
配置数据的压缩算法，这里的压缩是HFile中block级别的压缩。对于可以压缩的数据，配置压缩算法可以有效减少磁盘的IO，从而达到提高性能的目的。 说明： 并非所有数据都可以进行有效压缩。例如一张图片的数据，因为图片一般已经是压缩后的数据，所以压缩效果有限。常用的压缩算法是SNAPPY，因为
配置ClickHouse支持事务能力 本章节适用于MRS 3.3.0-LTS及之后版本。 操作场景 原子性是指事务是一个不可分割的工作单元，一个事务可以包含多个操作，这些操作要么全部执行，要么全都不执行。但是由于事务在执行过程中，可能出现一些意外，例如用户回滚了事务、连接断开、断电等，导致事务被中断执行。
<浮动ip> 是，浮动IP正常，若Hue WebUI依然不能访问，请联系技术支持。 否，浮动IP被占用，执行5。 登录到集群内Hue主实例外的其他所有节点，执行以下命令，查看当前节点是否占用了Hue的浮动IP。 ifconfig | grep -B2 <浮动ip> 是，执行ifconfig
典型场景：从HBase导出数据到HDFS/OBS 操作场景 该任务指导用户使用Loader将数据从HBase导出到HDFS/OBS。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HDFS/OBS目录和数据。 确保用户已授权
使用Loader从HBase导出数据到HDFS/OBS 操作场景 该任务指导用户使用Loader将数据从HBase导出到HDFS/OBS。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HDFS/OBS目录和数据。 确保用户
combineByKey() : RDD[(K, V)] => RDD[(K, C)]，是将RDD[(K, V)]中key相同的数据的所有value转化成为一个类型为C的值。 groupByKey() 和reduceByKey()是combineByKey的两种具体实现，对于数据聚合比较复杂而gro
配置数据的压缩算法，这里的压缩是HFile中block级别的压缩。对于可以压缩的数据，配置压缩算法可以有效减少磁盘的IO，从而达到提高性能的目的。 说明： 并非所有数据都可以进行有效压缩。例如一张图片的数据，因为图片一般已经是压缩后的数据，所以压缩效果有限。常用的压缩算法是SNAPPY，因为
期间将导致影响服务不可用，谨慎使用。 单击“确定”，等待服务重启成功。 选择“集群 > 主备集群容灾”，查看当前集群是否配置了主备容灾。 是，执行7。 否，操作结束。 主集群与容灾集群内ZooKeeper服务的“ssl.enabled”配置需保持一致，请参考以上步骤继续修改未操作集群内的“ssl
在HBase的Web UI页面中，Table Details页面展示的是HBase存储表的概要信息，如图5所示。 图5 TableDetails 在HBase的Web UI页面中，Debug dump页面展示的是HBase的Debug信息，如图6所示。 图6 Debug dump 在HBase的Web
都满足断言函数或者数组为空时，返回true, 如果有一个或者多个元素不满足断言函数，则返回false。当断言函数对于一个或者多个元素的结果是NULL时，返回结果也是NULL： select all_match(a, x-> true) from (values array[]) t(a);
properties和worker.config.properties 开启动态过滤功能，默认“false”。 添加完成后将“立即启动”置为“是”，单击“确定”。 父主题： HetuEngine性能调优
在HBase的Web UI页面中，Table Details页面展示的是HBase存储表的概要信息，如图5所示。 图5 TableDetails 在HBase的Web UI页面中，Debug dump页面展示的是HBase的Debug信息，如图6所示。 图6 Debug dump 在HBase的Web
登录FusionInsight Manager。 选择“集群 > 服务 > HBase > 更多 > 启用Ranger鉴权”，查看该参数是否置灰。 是，创建用户并在Ranger中赋予该用户相关操作权限： 选择“系统 > 权限 > 用户 > 添加用户”，在新增用户界面创建一个机机用户，例如developuser。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
