-
HDFS日志文件过大导致OS盘空间不足 - MapReduce服务 MRS
原因分析 在HDFS长时间运行场景下,操作系统会把JVM创建的“/tmp/.java_pid*”文件定期清理。
-
HBase日志文件过大导致OS盘空间不足 - MapReduce服务 MRS
原因分析 在HBase长时间运行场景下,操作系统会把JVM创建的“/tmp/.java_pid*”文件定期清理。
-
Alluxio API接口介绍 - MapReduce服务 MRS
HTTP REST API Master REST API:https://docs.alluxio.io/os/restdoc/2.0/master/index.html Worker REST API:https://docs.alluxio.io/os/restdoc/2.0
-
查看Ranger用户权限同步信息 - MapReduce服务 MRS
选择“Settings > Users/Groups/Roles”,可查看系统中的用户、用户组、Roles信息。 Users:显示Ranger从LDAP或者OS同步的所有用户信息。 Groups:显示Ranger从LDAP或者OS同步的所有用户组、角色信息。
-
查看Ranger用户权限同步信息 - MapReduce服务 MRS
选择“Settings > Users/Groups/Roles”,可查看系统中的用户、用户组、Roles信息。 Users:显示Ranger从LDAP或者OS同步的所有用户信息。 Groups:显示Ranger从LDAP或者OS同步的所有用户组、角色信息。
-
查看部件包 - MapReduce服务 MRS
操作步骤 登录FusionInsight Manager,选择“系统 > 部件”。 在“已安装部件”查看所有部件列表。 在“平台类型”列可查看部件已注册的OS及平台类型。 单击部件名称左侧的,可查看部件包含的服务及其版本号。 父主题: 系统设置
-
开启ClickHouse租户CPU优先级配置 - MapReduce服务 MRS
操作场景 ClickHouse租户支持CPU优先级,该特性依赖OS的CAP_SYS_NICE能力,需要开启该能力才可以生效。
-
PyFlink样例程序代码说明 - MapReduce服务 MRS
import logging import sys import os from pyflink.table import (EnvironmentSettings, TableEnvironment) def read_sql(file_path): if not os.path.isfile
-
PyFlink样例程序代码说明 - MapReduce服务 MRS
import logging import sys import os from pyflink.table import (EnvironmentSettings, TableEnvironment) def read_sql(file_path): if not os.path.isfile
-
系统设置 - MapReduce服务 MRS
系统设置 权限设置 对接设置 导入证书 OMS管理 查看部件包 父主题: Manager操作指导(适用于3.x版本)
-
MRS集群频繁产生节点间心跳中断告警 - MapReduce服务 MRS
经OS定位虚拟机发生重启的原因是节点没有可用的内存,系统发生内存溢出触发了oom-killer,当进程处于被调用的状态会使进程处于disk sleep状态,最终导致虚拟机发生重启。 查看占用的内存进程,发现占用内存都是正常的业务进程。 结论:虚拟机内存不能满足服务需求。
-
Hive对接OBS文件系统 - MapReduce服务 MRS
进入beeline客户端,在创建表时指定Location为OBS文件系统路径。
-
Flink对接OBS文件系统 - MapReduce服务 MRS
运行,在配置Flink对接OBS文件系统之前需要确保Yarn对接OBS文件系统功能是正常的。
-
Hudi对接OBS文件系统 - MapReduce服务 MRS
Hudi对接OBS文件系统 使用安装客户端用户登录客户端安装节点。 配置环境变量。
-
修改系统内部用户密码 - MapReduce服务 MRS
修改系统内部用户密码 修改Kerberos管理员密码 修改OMS Kerberos管理员密码 修改LDAP管理员和LDAP用户密码(含OMS LDAP) 修改LDAP管理账户密码 修改组件运行用户密码 父主题: 账户管理
-
HDFS文件系统目录简介 - MapReduce服务 MRS
HDFS文件系统目录简介 HDFS文件系统中目录结构如下表所示。
-
ALM-12040 系统熵值不足(2.x及以前版本) - MapReduce服务 MRS
ALM-12040 系统熵值不足(2.x及以前版本) 告警解释 每天零点系统检查熵值,每次检查都连续检查五次,首先检查是否启用并正确配置了rng-tools工具,如果没有配置,则继续检查当前熵值,如果五次均小于500,则上报故障告警。
-
修改操作系统用户密码 - MapReduce服务 MRS
操作系统的密码修改策略由用户实际使用的操作系统类型决定。 Retype New Password: Password changed. 父主题: 修改系统用户密码
-
Flume对接OBS文件系统 - MapReduce服务 MRS
创建OBS文件系统用于存放数据。 登录OBS控制台。 单击“并行文件系统”进入并行文件系统页面,单击“创建并行文件系统”。 填写文件系统名称,例如“esdk-c-test-pfs1”,其他参数请根据需要填写。单击“立即创建”等待创建完成。
-
ALM-19012 HBase系统表目录或文件丢失 - MapReduce服务 MRS
ALM-19012 HBase系统表目录或文件丢失 告警解释 系统按120秒周期性检测HBase在HDFS上的如下目录和文件是否存在,当检测到文件或者目录不存在时,上报该告警。当文件或目录都恢复后,告警恢复。 检查内容: 命名空间hbase在HDFS上的目录。