检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
基本概念 账号 用户注册华为云时的账号，账号对其所拥有的资源及服务具有完全的访问权限，可以重置用户密码、分配用户权限等。由于账号是付费主体，为了确保账号安全，建议您不要直接使用账号进行日常管理工作，而是创建用户并使用用户进行日常管理工作。 用户 由账号在IAM中创建的用户，是云服务的
conf文件为安全模式下的认证文件，需要在FusionInsight Manager中下载principal用户的认证凭证，样例代码中使用的用户为：sparkuser，需要修改为准备好的开发用户。 打包项目 将user.keytab、krb5.conf 两个文件上传客户端所在服务器上。
IDEA工具，同时本地需完成JDK、Maven等初始配置。 准备连接集群配置文件 应用程序开发或运行过程中，需通过集群相关配置文件信息连接MRS集群，配置文件通常包括用于安全认证的用户文件，可从已创建好的MRS集群中获取相关内容。 用于程序调测或运行的节点，需要与MRS集群内节点网络互通。 配置并导入样例工程 M
户端使用实践运行wordcount作业： 安装Flink客户端，例如安装目录为“/opt/client”。 初始化环境变量。 source /opt/client/bigdata_env 如果当前集群已启用Kerberos认证，需先配置客户端认证，可参考5。如果当前集群未启用Kerberos认证，则无需执行该步骤。
产生告警的任务名称。 用户名 告警任务的创建用户名称。 对系统的影响 CDL任务失败，任务数据实时集成中断。 可能原因 CDL任务由于参数配置或者其他原因导致运行失败。失败原因可在CDL WebUI的作业列表界面中单击“状态”为“已失败”或者“运行异常”的链接查看，或者在作业运行日志中查看。
Apache 为集群增加标签 创建集群时为集群增加标签 登录MRS管理控制台。 单击“购买集群”，进入购买集群页面。 在购买集群页面，选择“自定义购买”。 参考自定义购买MRS集群配置集群软件配置和硬件配置信息。 勾选“高级配置”右侧的“现在配置”，在标签栏输入新添加标签的键和值。 图1 添加标签
“SS_REST_SERVER”即：ResourceManager IP地址:端口 ResourceManager IP地址：可登录FusionInsight Manager界面，选择“集群 > 服务 > Yarn > 实例”查看任一ResourceManager的业务IP获取。 端口：ResourceMana
前规则有变量参数，需同时配置阈值。 拦截：配置系统对SQL请求满足防御规则后，是否进行拦截处理。开启按钮时，如果当前规则有变量参数，需同时配置阈值。 熔断：配置系统对SQL请求满足防御规则后，是否进行熔断处理。开启按钮时，如果当前规则有变量参数，需同时配置阈值。 说明： 对于规则
quorumpeer”。 查看ZooKeeper各实例是否正常。 是，执行6。 否，执行3。 选中运行状态不为良好的实例，选择“更多 > 重启实例”。 重启实例期间实例不可用，当前实例节点的ZooKeeper业务会执行失败。 查看实例重启后运行状态是否为良好。 是，执行5。 否，执行10。
推荐使用Eclipse工具，请根据指导完成不同语言的开发环境配置。 Hive应用开发环境简介 根据场景开发工程 提供了Java、Python两种不同语言的样例工程，还提供了从建表、数据加载到数据查询的样例工程。 Hive样例程序开发思路 运行程序及查看结果 指导用户将开发好的程序编译提交运行并查看结果。
安全模式下hbase需要用户有相应表甚至列族和列的访问权限，因此首先需要在hbase所在集群上使用hbase管理员用户登录，之后在hbase shell中使用grant命令给提交用户申请相应表的权限，如示例中的WordCount，成功之后再使用提交用户登录并提交拓扑。 拓扑提交成功后请自行登录HBase集群查看。
-f /tpch.sql 在执行SQL语句前，请使用MRS集群管理员用户修改内存大小配置。 登录FusionInsight Manager，选择“集群 > 服务 > Spark2x > 配置”。 单击“全部配置”，并搜索“SPARK_DRIVER_MEMORY”。 修改参数值适当
conf文件为安全模式下的认证文件，需要在FusionInsight Manager中下载principal用户的认证凭证，样例代码中使用的用户为：super，需要修改为准备好的开发用户。 打包项目 通过IDEA自带的Maven工具，打包项目，生成jar包。具体操作请参考在Linux环境中调测Spark应用。
告警”，选中“告警ID”为“19014”的告警，查看“附加信息”中的阈值。 以root用户登录HBase客户端，用户密码为安装前用户自定义，请咨询系统管理员。执行以下命令进入客户端安装目录： cd 客户端安装目录 然后执行以下命令设置环境变量： source bigdata_env 如果
告警”，选中“告警ID”为“19016”的告警，查看“附加信息”中的阈值。 以root用户登录HBase客户端，用户密码为安装前用户自定义，请咨询系统管理员。执行以下命令进入客户端安装目录： cd 客户端安装目录 然后执行以下命令设置环境变量： source bigdata_env 如果
通过Hue管理HBase表 操作场景 用户需要使用图形化界面在集群中创建或查询HBase表时，可以通过Hue完成任务。 如需在Hue WebUI中操作HBase，当前MRS集群中必须部署HBase的Thrift1Server实例。 Thrift1Server实例默认不会安装，用户可在创建自定义类型的
集群中所有DataNode角色实例保存的Block总数为：HDFS Block * 3。集群中每个DataNode实例平均保存的Blocks= HDFS Block * 3/DataNode节点数。 表2 DataNode支持规格 项目 规格 单个DataNode实例支持最大Block数 5
JobHistory2x堆内存使用率统计 (JobHistory2x)”，可查看“阈值”。 重启所有的JobHistory2x实例。 重启实例期间实例不可用，当前实例节点的任务会执行失败。 等待10分钟，观察界面告警是否清除。 是，处理完毕。 否，执行7。 收集故障信息 在FusionInsight
JobHistory2x直接内存使用率统计 (JobHistory2x)”，可查看“阈值”。 重启所有的JobHistory2x实例。 重启实例期间实例不可用，当前实例节点的任务会执行失败。 等待10分钟，观察界面告警是否清除。 是，处理完毕。 否，执行7。 收集故障信息 在FusionInsight
除对应的角色。此时如果支持权限配置的组件状态异常，则会导致删除这个角色对应的资源权限失败。 处理步骤 登录FusionInsight Manager，选择“系统 > 权限 > 角色”。 单击“添加角色”，在“配置资源权限”中单击集群名称，确认可配置资源权限的组件。 选择“集群 >
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
