检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在管理控制台上获取到账号ID。账号ID获取步骤如下： 登录管理控制台。 单击用户名，在下拉列表中单击“我的凭证”。 在“API凭证”页面中查看账号ID。 图1 获取账号ID 父主题： 附录
查看MRS集群日志 MRS集群日志概述 查看MRS云服务操作日志 查看历史MRS集群信息 查看MRS集群审计日志 查看MRS组件角色实例日志 在线检索MRS集群日志 下载MRS集群日志 采集MRS集群服务堆栈信息 配置MRS组件默认日志级别与归档文件大小 配置MRS集群审计日志本地备份数
s.sh查看当前消费情况。 查看Offset保存在Kafka上的Consumer Group列表： ./kafka-consumer-groups.sh --list --bootstrap-server <Broker的任意一个节点的业务IP:Kafka集群IP端口号> --command-config
查看Kafka Topic信息 操作场景 用户可以在Manager或KafkaUI上查看Kafka已创建的主题信息。 在Manager查看Kafka Topic信息 进入Kafka服务页面： MRS 3.x之前版本，单击集群名称，登录集群详情页面，选择“组件管理 > Kafka”。
节点，执行查询命令查看导入的结果。 例如，导入完成后查询表warehouse_t1数据，结果如下： clickhouse client --host ClickHouse的实例IP --user 登录名 --password --port ClickHouse的端口号 --database
节点，执行查询命令查看导入的结果。 例如，导入完成后查询表warehouse_t1数据，结果如下： clickhouse client --host ClickHouse的实例IP --user 登录名 --password --port ClickHouse的端口号 --database
PLAINTEXT：支持无认证的明文访问，默认端口号为9092，可通过查看参数“port”的值获取。 SASL_PLAINTEXT：支持Kerberos认证的明文访问，默认端口号为21007，可通过查看“sasl.port”参数的值获取。 SSL：支持无认证的SSL加密访问，默认端口号为9093，可通过查看参数“ssl
B对应500000块数，用户可根据需要调整内存值。 查看HDFS容量状态 NameNode信息 MRS 3.x之前版本：登录MRS控制台，选择“组件管理 > HDFS > NameNode(主)”，单击“Overview”，查看“Summary”显示的当前HDFS文件对象、文件数量、目录数量和Block数量信息。
查看作业历史信息 操作场景 该任务指导您在日常运维中，查看某个Loader作业的历史执行状态以及每次执行时长，同时提供该作业两种操作： 脏数据：查看作业执行过程中处理失败的数据、或者被清洗过滤掉的数据，针对该数据可以查看源数据中哪些数据不符合转换、清洗规则。 日志：查看作业在MapReduce执行的日志信息。
免信息泄露。 port ：Coordinator的端口号，请根据实际情况替换，可使用gs_om -t status --detail查询Coordinator数据路径，在该路径下的“postgresql.conf”文件中查看端口号信息。 创建用于接受数据的空表，如表“customer_t1”：
如何查看所有MRS集群？ MRS所有的集群都展示在MRS管理控制台的“MRS集群”页面中，进入“MRS集群”页面，可查看所有集群。集群数量较多时，可采用翻页显示，您可以查看任何状态下的集群。 现有集群：包括除了“失败”和“已删除”状态以外的所有集群。 历史集群：仅包含“已删除”状
LdapServer > 实例”，查看LDAP服务对应的节点。 切换到“配置”，查看集群LDAP端口号，即“LDAP_SERVER_PORT”参数值，默认为“21780”。 以root用户通过LDAP服务的IP地址登录LDAP节点。 执行以下命令，查看iptables过滤列表中INPUT策略。
配置”，搜索hadoop.rpc.protection查看。 针对MRS 3.x之前版本，在集群详情页选择“组件管理 > HDFS > 服务配置”，将“基础配置”切换为“全部配置”，搜索hadoop.rpc.protection查看。 操作步骤 进入Yarn服务参数“全部配置”界面，具体操作请参考修改集群服务配置参数。
查看Ranger审计信息 Ranger管理员可通过Ranger界面查看Ranger运行审计日志及组件使用Ranger鉴权后权限管控审计日志信息。 查看Ranger审计信息内容 使用Ranger管理员用户rangeradmin登录Ranger管理页面，具体操作可参考登录Ranger
系统域名”。可登录FusionInsight Manager界面，选择“系统 > 域和互信”中查看集群实际域名。 查看作业管理界面，作业状态为“运行中”。 参考管理Kafka Topic中的消息，执行以下命令查看Sink表中是否接收到数据，即查看Kafka topic是否正常写入数据。 sh kafka-console-consumer
查看Ranger审计信息 Ranger管理员可通过Ranger界面查看Ranger运行审计日志及组件使用Ranger鉴权后权限管控审计日志信息。 查看Ranger审计信息内容 使用Ranger管理员用户rangeradmin登录Ranger管理页面，具体操作可参考登录Ranger
查看MRS集群补丁信息 查看集群组件的补丁信息。如果集群组件，如Hadoop或Spark等出现了异常，可下载补丁版本，修复问题。 登录MRS管理控制台。 选择“现有集群”，选中一集群并单击集群名，进入集群基本信息页面。 进入“补丁管理”页面，可查看当前MRS集群补丁信息。 补丁版本信息如下：
ClickHouse > 实例”，查看所有ClickHouseBalancer实例对应的业务IP地址。 端口：登录FusionInsight Manager，选择“集群 > 服务 > ClickHouse > 逻辑集群”，查看对应逻辑集群的HTTP Balancer端口号中的“加密端口”。 说明：
如何查看Flume日志 Flume日志保存在/var/log/Bigdata/flume/flume/flumeServer.log 里。绝大多数数据传输异常、数据传输不成功，在日志里都可以看到提示。可以直接输入以下命令查看： tailf /var/log/Bigdata/flu
管理消息 进入Kafka服务页面： 登录FusionInsight Manager，然后选择“集群 > 服务 > Kafka”。 单击“实例”，查看Kafka Broker角色实例的IP地址。 记录Kafka角色实例其中任意一个的IP地址即可。 根据业务情况，准备好客户端，参考使用MRS客户端章节，登录安装客户端的节点。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
