-
如何配置Kafka客户端shell命令日志 - MapReduce服务 MRS
zkclient.ZkEventThread) ... Test __consumer_offsets counter test test2 test3 test4 父主题: 使用Kafka
-
配置SNMP北向参数 - MapReduce服务 MRS
“SNMP服务”的开关默认为关闭,单击启用SNMP服务。 设置表1所示的对接参数。 表1 对接参数 参数名称 参数说明 版本 SNMP协议版本号,取值范围: v2c:低版本,安全性较低 v3:高版本,安全性比v2c高 推荐使用v3版本。 本地端口 本地端口,默认值“20000”,取值范围“1025”到“65535”。
-
执行Kafka Topic设置ACL操作失败,提示“NoAuthException” - MapReduce服务 MRS
执行Kafka Topic设置ACL操作失败,提示“NoAuthException” 问题背景与现象 在使用Kafka客户端命令设置Topic ACL权限时,发现Topic无法被设置。 kafka-acls.sh --authorizer-properties zookeeper
-
如何调用API - MapReduce服务 MRS
如何调用API 构造请求 认证鉴权 返回结果
-
如何使用IDEA远程调试业务 - MapReduce服务 MRS
t,address=5055,suspend=n,server=y,保存配置后重启相关实例。 调试Storm程序需要先修改指定的服务端参数,并在重启服务后生效,建议在测试环境上进行调测。 提交拓扑后,在Storm UI上进入到Topology界面,再单击进入要调试组件界面。 图1
-
配置Syslog北向参数 - MapReduce服务 MRS
slog配置”。 “Syslog服务”的开关默认为关闭,单击启用Syslog服务。 设置表1所示的对接参数。 表1 对接参数 参数区域 参数名称 参数说明 Syslog协议 服务IP 设置对接服务器IP地址。 服务端口 设置对接端口。 协议 设置协议类型,取值范围: “TCP” “UDP”
-
如何在MRS集群中手动添加组件? - MapReduce服务 MRS
如何在MRS集群中手动添加组件? 问:如何在已创建好的MRS集群中手动添加服务? 答: 已经创建的MRS 3.1.0及之前版本集群不支持安装新的组件。如果需要使用当前集群未安装的组件,则需要重新创建一个集群,并且选择所需要的组件。 MRS 3.1.2-LTS.3及之后版本的自定义
-
OMS维护页面概述 - MapReduce服务 MRS
Manager以后,选择“系统 > OMS”后,打开OMS维护页面,管理员可以在此页面对OMS进行维护操作,包含查看基本信息、查看OMS业务模块的服务状态,也可以手工触发健康检查。 OMS为操作维护系统的管理节点,OMS节点一般有两个,互为主备。 基本信息 FusionInsight M
-
怎么通过客户端设置Map/Reduce内存? - MapReduce服务 MRS
怎么通过客户端设置Map/Reduce内存? 问题现象 客户端怎么设置Map/Reduce内存? 处理步骤 Hive在执行SQL语句前,可以通过set命令来设置Map/Reduce相关客户端参数。 以下为与Map/Reduce内存相关的参数: set mapreduce.map.memory
-
其他任务管理说明 - MapReduce服务 MRS
> 查询历史”或“查询历史” 打开任务运行日志窗口,查看运行详细情况以及备份路径。 “查看” 检查恢复任务的参数设置。 “执行” 运行恢复任务。 父主题: 备份恢复设置
-
如何使用IDEA远程调试业务 - MapReduce服务 MRS
t,address=5055,suspend=n,server=y,保存配置后重启相关实例。 调试Storm程序需要先修改指定的服务端参数,并在重启服务后生效,建议在测试环境上进行调测。 提交拓扑后,在Storm UI上进入到Topology界面,再单击进入要调试组件界面。 图1
-
配置ZooKeeper ZNode ACL - MapReduce服务 MRS
/znode名称 [zk: 192.168.0.151:2181(CONNECTED) 3] getAcl /test 'world,'anyone : cdrwa 使用setAcl命令增加权限。设置新权限命令如下: setAcl /test world:anyone:cdrwa,sasl:用户名@<系统域名>:权限值
-
HDFS上设置配额导致HBase启动失败 - MapReduce服务 MRS
is exceeded。 解决办法 通过后台使用df -h命令查看数据盘目录空间已满,因此需要删除无用的数据来进行应急恢复。 后续需要扩容节点来解决数据目录空间不足问题。 父主题: 使用HBase
-
修改OMS服务配置参数 - MapReduce服务 MRS
Kerberos在LDAP查询用户信息的超时时间,单位为毫秒。 Kadmin监听端口 kadmin服务的端口。 KDC监听端口 kinit服务的端口。 Kpasswd监听端口 kpasswd服务的端口。 重置LDAP账户口令 Kerberos访问LDAP使用的机机账户(cn=krbadmin
-
Hue WebUI中Oozie编辑器的时区设置问题 - MapReduce服务 MRS
Hue WebUI中Oozie编辑器的时区设置问题 问题 在Hue设置Oozie工作流调度器的时区时,部分时区设置会导致任务提交失败。 回答 部分时区存在适配问题,建议时区选择“Asia/Shanghai”,如图1所示。 图1 时区选择 支持的时区可以参考Oozie WebUI页
-
为什么给HBase使用的HDFS目录设置quota会造成HBase故障 - MapReduce服务 MRS
e>,<RS-Port>,<startcode>-splitting] Task = installed = 6 done = 3 error = 3 ?at org.apache.hadoop.hbase.master.SplitLogManager.splitLogDistr
-
如何重置或修改Manager(admin)密码? - MapReduce服务 MRS
如何重置或修改Manager(admin)密码? 已知旧密码修改admin密码请参考修改admin密码 忘记旧密码重置admin密码请参考修改组件运行用户密码 父主题: 账号密码类
-
如何使用IDEA远程调试 - MapReduce服务 MRS
address=5006需要换成3获取到的For JDK1.4.x对应的调试命令。 图3 Spark运行命令 设置调试断点。 在IDEA代码编辑窗口左侧空白处单击鼠标左键设置相应代码行断点,如图4所示,在SparkPi.scala的29行设置断点。 图4 设置断点 启动调试。 在IDEA菜单栏中选择“Run
-
如何使用IDEA远程调试 - MapReduce服务 MRS
address=5006需要换成3获取到的For JDK1.4.x对应的调试命令。 图3 Spark运行命令 设置调试断点。 在IDEA代码编辑窗口左侧空白处单击鼠标左键设置相应代码行断点,如图4所示,在SparkPi.scala的29行设置断点。 图4 设置断点 启动调试。 在IDEA菜单栏中选择“Run
-
如何配置HBase文件存储 - MapReduce服务 MRS
接口进行读取。 使用HFS接口存储在HDFS中的数据,暂不支持备份与容灾。 操作步骤 登录MRS Manager。 单击“服务管理 > HBase > 服务配置”,“参数类别”类型选择“全部配置”,然后在左边窗口选择“HMaster > 系统”。 在“hbase.coprocessor