-
ALM-19011 RegionServer的Region数量超出阈值 - MapReduce服务 MRS
角色名 产生告警的角色名称。 主机名 产生告警的主机名。 对系统的影响 RegionServer的Region数超出阈值,会影响HBase的数据读写性能。 可能原因 RegionServer的Region分布不均衡。 HBase集群规模过小。 处理步骤 查看告警定位信息 在FusionInsight
-
管理组件和主机监控 - MapReduce服务 MRS
定制、查看监控图表。 在“图表”区域框中,单击“定制”自定义服务监控指标。 在“时间区间”选择查询时间,单击“查看”显示该时间段内的监控数据。 管理角色实例监控 针对MRS 3.x之前版本,请参考管理角色实例监控操作。 在MRS集群详情页面,单击“组件管理”,在组件列表中单击服务指定名称。
-
CREATE TABLE - MapReduce服务 MRS
CREATE TABLE 本章节主要介绍Doris创建表的SQL基本语法和使用说明。 基本语法 CREATE TABLE [IF NOT EXISTS] [database.]table ( column_definition_list, [index_definition_list]
-
ALM-12099 发生core dump - MapReduce服务 MRS
可能会导致集群短暂的不可用。 可能原因 相关进程发生crash。 处理步骤 以下解析查看core文件堆栈信息的操作有可能会涉及到用户的敏感数据,开发或运维人员必须在获得用户授权的情况下才能进行操作。 告警所产生的core文件系统默认保留72小时,文件保存超时或者大小超过设定值后会
-
准备Flink应用开发用户 - MapReduce服务 MRS
有Kafka组件的集群配置跨集群互信,并将flinkuser用户加入“kafkaadmin”用户组。 当用户需要运行向Kafka生产并消费数据程序(Scala和Java语言)样例程序时,需要加入“kafkaadmin”用户组。 在MRS Manager界面选择“系统设置 > 用户
-
开源组件Web站点 - MapReduce服务 MRS
WebUI的图形化数据迁移管理工具,由Hue WebUI承载。 MRS 3.x及以后版本集群,在Manager页面选择“集群 > 服务 > Hue > Hue WebUI > Hue (主机名称,主)”。 Loader页面是基于开放源代码Sqoop WebUI的图形化数据迁移管理工具,由Hue
-
配置ZooKeeper ZNode ACL - MapReduce服务 MRS
删除权限 delete(d) 删除当前的znode 读权限 read(r) 获取当前znode的数据,可以列出当前znode所有的子znodes 写权限 write(w) 向当前znode写数据,写入子znode 管理权限 admin(a) 设置当前znode的权限 对系统的影响 修改
-
ALM-24003 Flume Client连接中断(2.x及以前版本) - MapReduce服务 MRS
Flume服务端端口。 对系统的影响 产生告警的Flume Client无法与Flume Server端进行通信,Flume Client端的数据无法传输到Flume Server端。 可能原因 Flume Client端与Flume Server端网络故障。 Flume Client端进程故障。
-
Kafka Shell命令介绍 - MapReduce服务 MRS
<Kafka集群IP:21007> --topic <Topic名称> --producer.config config/producer.properties 消费数据,需要拥有该Topic的消费者权限 bin/kafka-console-consumer.sh --topic <Topic名称> --bootstrap-server
-
Kafka Shell命令介绍 - MapReduce服务 MRS
<Kafka集群IP:21007> --topic <Topic名称> --producer.config config/producer.properties 消费数据,需要拥有该Topic的消费者权限 bin/kafka-console-consumer.sh --topic <Topic名称> --bootstrap-server
-
HDFS Shell命令介绍 - MapReduce服务 MRS
list子命令显示provider中所有的密钥名,这个provider由用户在core-site.xml中配置或者由-provider参数指定。-metadata参数显示的是元数据。 父主题: HDFS应用开发常见问题
-
开发和部署HetuEngine UDF - MapReduce服务 MRS
加载。 使用HetuEngine UDF 使用客户端访问: 进入HetuEngine客户端,请参考快速使用HetuEngine访问Hive数据源。 执行如下命令创建HetuEngine UDF: CREATE FUNCTION example.namespace01.add_two
-
ALM-12073 cep资源异常 - MapReduce服务 MRS
产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 对系统的影响 Manager主备倒换。 cep进程持续重启,可能会导致监控数据异常。 可能原因 cep进程异常。 处理步骤 检查cep进程是否异常。 打开FusionInsight Manager页面,在告警列表中,
-
查询主机列表 - MapReduce服务 MRS
String 操作系统盘容量 data_volume_type String 数据盘类型 data_volume_size Integer 数据盘容量 data_volume_count Integer 数据盘个数 表5 TagPlain 参数 参数类型 描述 key String 键。标签的key值不能包含“=”
-
配置ZooKeeper ZNode ACL - MapReduce服务 MRS
删除权限 delete(d) 删除当前的znode 读权限 read(r) 获取当前znode的数据,可以列出当前znode所有的子znodes 写权限 write(w) 向当前znode写数据,写入子znode 管理权限 admin(a) 设置当前znode的权限 对系统的影响 修改
-
IAM用户同步MRS说明 - MapReduce服务 MRS
请等待5分钟,新修改策略才能生效。 单击“IAM用户同步”右侧的“同步”后,集群详情页面会出现短时间空白,这是由于正在进行用户数据同步中,请耐心等待,数据同步完成后,页面将会正常显示。 安全集群提交作业:安全集群中用户可通过界面“作业管理”功能提交作业,具体请参考运行MapReduce作业。
-
HDFS Shell命令介绍 - MapReduce服务 MRS
list子命令显示provider中所有的密钥名,这个provider由用户在core-site.xml中配置或者由-provider参数指定。-metadata参数显示的是元数据。 表2 Colocation 客户端shell命令 操作 命令 描述 创建组 hdfs colocationadmin -createGroup
-
ALM-12016 CPU使用率超过阈值 - MapReduce服务 MRS
Manager页面,在告警列表中,单击此告警所在行的,查看该告警的节点地址。 进入“主机”界面,单击告警的所在节点。 在界面观察“主机CPU使用率”实时数据5分钟左右,若CPU使用率多次超过设置的阈值,请联系MRS集群管理员提升CPU。 排查当前业务量是否处于高峰阶段。若处于高峰阶段导致该告警
-
HDFS Shell命令介绍 - MapReduce服务 MRS
list子命令显示provider中所有的密钥名,这个provider由用户在core-site.xml中配置或者由-provider参数指定。-metadata参数显示的是元数据。 表2 Colocation 客户端shell命令 操作 命令 描述 创建组 hdfs colocationadmin -createGroup
-
调测Kafka High Level KafkaStreams API样例程序 - MapReduce服务 MRS
properties 重新打开一个客户端连接窗口,执行以下命令,使用“kafka-console-consumer.sh”从输出Topic消费数据,查看统计结果。 cd /opt/client source bigdata_env kafka-console-consumer.sh --topic