检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
开发环境的基本配置。版本要求：1.7或者1.8。 说明： 基于安全考虑，服务端只支持TLS 1.1和TLS 1.2加密协议，IBM JDK默认TLS只支持1.0，若使用IBM JDK，请配置启动参数“com.ibm.jsse2.overrideDefaultTLS”为“true”，设置后可以同时支持TLS1
如何避免Kerberos认证过期？ 对于JAVA应用 在连接HBase、HDFS或者其他大数据组件前，先调用loginUserFromKeytab()创建UGI，然后启动一个定时线程进行检查是否过期并在过期前重新登录。 private static void startCheck
hbase-common模块依赖commons-crypto，在hbase-common的pom.xml文件中，对于commons-crypto的引入，<version>使用了${commons-crypto.version}变量。该变量的解析逻辑为，os为aarch64时值为“1.0.0-hw-aarch64”，os为x86_64时值为“1
说明 参考文档 了解基本概念 在开始开发应用前，需要了解MapReduce的基本概念。 MapReduce应用开发常用概念 准备开发环境 使用Eclipse工具，请根据指导完成开发环境配置。 准备Eclipse与JDK 准备运行环境 MapReduce的运行环境即MapReduc
sh 回退完成后需要在FusionInsight Manager界面上重启Spark的JDBCServer2x实例。 回退客户端补丁 如果有使用自主安装的客户端（集群内、外新下载客户端），需要执行客户端升级或者回退的操作。 登录客户端所在节点并执行以下命令： cd /opt/{MRS补丁版本号}/client
HBase”，单击概览页面右上角的“ 启动服务”启动HBase服务。 HBase服务启动成功后，在告警列表中查看该告警是否清除。 是，处理完毕。 否，执行8。 使用对应步骤恢复HBase服务后，需要观察一段时间，确认HBase服务以及相关业务正常后，建议执行以下命令删除相关备份目录，避免残留存在坏快的无用文件：
hbase-common模块依赖commons-crypto，在hbase-common的pom.xml文件中，对于commons-crypto的引入，<version>使用了${commons-crypto.version}变量。该变量的解析逻辑为，os为aarch64时值为“1.0.0-hw-aarch64”，os为x86_64时值为“1
hbase-common模块依赖commons-crypto，在hbase-common的pom.xml文件中，对于commons-crypto的引入，<version>使用了${commons-crypto.version}变量。该变量的解析逻辑为，os为aarch64时值为“1.0.0-hw-aarch64”，os为x86_64时值为“1
sh 回退完成后需要在FusionInsight Manager界面上重启Spark的JDBCServer2x实例。 回退客户端补丁 如果有使用自主安装的客户端（集群内、外新下载客户端），需要执行客户端升级或者回退的操作。 登录客户端所在节点并执行以下命令： cd /opt/{MRS补丁版本号}/client
登录Manager页面，选择“系统设置 > 用户管理”。在提交作业的IAM用户的操作列，选择“更多 > 初始化密码”，根据界面提示操作。初始化完成后需要使用该用户登录一次MRS Manager。 登录MRS管理控制台，进入MRS集群，在“概览”页面，单击“IAM用户同步”右侧的“单击同步”。
MRS 2.1.0.1补丁说明 补丁基本信息 表1 补丁基本信息 补丁号 MRS 2.1.0.1 发布时间 2020-02-12 解决的问题 MRS 2.1.0.1 修复问题列表： MRS Manager 优化V2作业提交hive sql返回结果、解决委托token提交V2作业失败问题。
dmin”，进入Ranger WebUI界面。 在Ranger WebUI界面，单击右上角用户名，选择“Log Out”，退出当前用户。 使用rangeradmin用户或者其他具有Ranger管理员权限用户重新登录。rangeradmin用户默认密码请参考用户账号一览表获取。 在Ranger
产生告警的主机名。 对系统的影响 老年代GC时间超出阈值，会影响HBase数据的读写变慢，严重情况下，会出现请求超时。 可能原因 该节点HBase实例内存使用率过大，或配置的堆内存不合理，或HBase存在大量的IO操作，导致进程GC频繁。 处理步骤 检查GC时间 在FusionInsight Manager首页，选择“运维
组件业务用户 代码认证： 通过获取客户端的principal和keytab文件在应用程序中进行认证。 MapReduce的安全认证代码 目前使用统一调用LoginUtil类进行安全认证。 在MapReduce样例工程的“com.huawei.bigdata.mapreduce.ex
Manager界面，查看右上角任务。 查看当前集群是否存在正在运行的任务。 是，等待任务运行结束。 否，检查结束。 检查主备节点磁盘空间 分别登录主备OMS节点，查看磁盘使用信息。 执行以下命令，查看“/”目录的可用空间是否大于30GB。 df -h / 否，清理磁盘空间。 是，检查结束。 检查集群是否有非标修改组件配置的操作
GC时间超出阈值，会影响JobHistory进程运行的性能，甚至造成JobHistory进程不可用。 可能原因 该节点JobHistory进程堆内存使用率过大，或配置的堆内存不合理，导致进程GC频繁。 处理步骤 检查GC时间。 登录MRS集群详情页面，选择“告警管理”。 选中“告警ID”为
导入样例工程到IntelliJ IDEA开发环境。 打开IntelliJ IDEA，在“Quick Start”页面选择“Open or Import”。 另外，针对已使用过的IDEA工具，可以从主界面选择“File > Import project...”导入样例工程。 图6 Open or Import（Quick
tion Properties，其中Host为运行的NodeManager节点IP，Port端口号为8000，然后单击“Debug”。 若使用IDE直接提交MapReduce任务，则IDE即成为客户端的角色，参考1修改二次开发工程中的“mapred-site.xml”即可。 父主题：
tion Properties，其中Host为运行的NodeManager节点IP，Port端口号为8000，然后单击“Debug”。 若使用IDE直接提交MapReduce任务，则IDE即成为客户端的角色，参考1修改二次开发工程中的“mapred-site.xml”即可。 父主题：
Manager页面，选择“运维 > 告警 > 告警”，查看该告警的详细信息，在定位信息中查看发生该告警的主机名称。单击主机名称，查看对应的IP地址。 使用root用户登录告警上报主机IP节点。 执行以下命令查看服务核心文件是否存在。 stat /usr/local/diskmgt/inner/diskmgtd
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
