检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Core常用接口 Spark主要使用到如下这几个类： SparkContext：是Spark的对外接口，负责向调用该类的scala应用提供Spark的各种功能，如连接Spark集群，创建RDD等。 SparkConf：Spark应用配置类，如设置应用名称，执行模式，executor内存等。
Core常用接口 Spark主要使用到如下这几个类： SparkContext：是Spark的对外接口，负责向调用该类的scala应用提供Spark的各种功能，如连接Spark集群，创建RDD等。 SparkConf：Spark应用配置类，如设置应用名称，执行模式，executor内存等。
配置具备表select权限的用户可查看表结构 操作场景 使用Hive建表时，其他用户被授予select权限后，支持通过show create table查看表结构。 操作步骤 登录FusionInsight Manager页面，选择“集群 > 服务 > Hive > 配置 > 全部配置”。
登录MRS集群Manager的用户是什么？ 问： MRS集群创建成功后，登录集群Manager界面的用户是什么？ 答： 登录Manager的系统默认账号为admin，密码为购买集群时用户自己设置的密码。 父主题： 用户认证及权限类
Core常用接口 Spark主要使用到如下这几个类： SparkContext：是Spark的对外接口，负责向调用该类的scala应用提供Spark的各种功能，如连接Spark集群，创建RDD等。 SparkConf：Spark应用配置类，如设置应用名称，执行模式，executor内存等。
Core常用接口 Spark主要使用到如下这几个类： SparkContext：是Spark的对外接口，负责向调用该类的scala应用提供Spark的各种功能，如连接Spark集群，创建RDD等。 SparkConf：Spark应用配置类，如设置应用名称，执行模式，executor内存等。
行度，充分利用集群机器的计算能力，一般并行度设置为集群CPU总和的2-3倍。 操作步骤 并行度可以通过如下三种方式来设置，用户可以根据实际的内存、CPU、数据以及应用程序逻辑的情况调整并行度参数。 在会产生shuffle的操作函数内设置并行度参数，优先级最高。 testRDD.groupByKey(24)
以round-robin的形式将元素分区到下游操作的子集中。 说明： 查看代码和rebalance的方式是一样的。 def broadcast: DataStream[T] 广播每个元素到所有分区。 提供设置eventtime属性的能力 表6 提供设置eventtime属性的能力的相关接口 API 说明
Capacity调度器模式下清除租户非关联队列 操作场景 在Yarn Capacity Scheduler模式下，删除租户的时候，只是把租户队列的容量设置为0，并且把状态设为“STOPPED”，但是队列在Yarn的服务里面仍然残留。由于Yarn的机制，无法动态删除队列，管理员可以执行命令手动清除残留的队列。
fieldIndexes) 从元组中选择了一部分字段子集。 fieldIndexes指的是需要选择的元组中的某几个序列。 说明： 只支持Tuple数据类型的project投影。 提供设置eventtime属性的能力 表7 提供设置eventtime属性的能力的相关接口 API
fieldIndexes) 从元组中选择了一部分字段子集。 fieldIndexes指的是需要选择的元组中的某几个序列。 说明： 只支持Tuple数据类型的project投影。 提供设置eventtime属性的能力 表7 提供设置eventtime属性的能力的相关接口 API
fieldIndexes) 从元组中选择了一部分字段子集。 fieldIndexes指的是需要选择的元组中的某几个序列。 说明： 只支持Tuple数据类型的project投影。 提供设置eventtime属性的能力 表7 提供设置eventtime属性的能力的相关接口 API
HDFS上设置配额导致HBase启动失败 问题现象 HBase启动失败。 原因分析 查看HMaster日志信息（“/var/log/Bigdata/hbase/hm/hbase-omm-xxx.log”），出现如下异常，The DiskSpace quota of /hbase is
除的集群，若需要查看6个月以前删除的集群，请联系华为云支持人员。 失败任务管理：单击可查看“失败”状态的集群创建任务。 表1 集群列表参数 参数 参数说明 名称/ID 集群的名称，创建集群时设置。集群的ID是集群的唯一标识，创建集群时系统自动赋值，不需要用户设置。 ：修改集群名称。
查看MRS集群监控指标 查看MRS集群资源监控指标 查看MRS集群组件监控指标 查看MRS集群节点资源监控指标 配置MRS集群监控指标数据转储 父主题： MRS集群运维
查看Ranger用户权限同步信息 查看Ranger相关权限设置信息，例如查看用户、用户组、Role。 查看Ranger权限信息 使用Ranger管理员用户rangeradmin登录Ranger管理页面，具体操作可参考登录Ranger WebUI界面。 选择“Settings >
csv”，保存的审计日志历史文件数最大为50个。 前提条件 用户已经获取账号对应的Access Key ID（AK）和Secret Access Key（SK）。 用户已经在账号的对象存储服务（OBS）中创建了并行文件系统。 操作步骤 在MRS Manager，单击“系统设置”。 在“维护”下单击“审计日志导出”。
查看Ranger用户权限同步信息 查看Ranger相关权限设置信息，例如查看用户、用户组、Role。 查看Ranger权限信息 使用Ranger管理员用户rangeradmin登录Ranger管理页面，具体操作可参考登录Ranger WebUI界面。 选择“Settings >
Kafka是一个分布式的消息发布-订阅系统。它采用独特的设计提供了类似JMS的特性，主要用于处理活跃的流式数据。 Kafka有很多适用的场景：消息队列、行为跟踪、运维数据监控、日志收集、流处理、事件溯源、持久化日志等。 Kafka有如下几个特点： 高吞吐量 消息持久化到磁盘 分布式系统易扩展
如只勾选“用户组”，该用户组下的用户不会同步，必须勾选“用户组”下对应的用户名称才能同步。 在“IAM用户同步”页面会显示所有的用户组，所有灰色不能选择的用户组和用户则不能进行IAM用户同步。 同步请求下发后，返回MRS控制台在左侧导航栏中选择“操作日志”页面查看同步是否成功，日志相关说明请参考查看MRS云服务操作日志。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
