检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Read”和“Write”权限,OBS目录若不存在则需要提前创建,且不允许带通配符*。 图1 为Hudi用户组赋予OBS路径读和写权限 父主题: MRS集群服务对接OBS示例
SparkHbasetoHbase().hbasetohbase(spark._jsc) # 停止SparkSession spark.stop() 父主题: Spark从HBase读取数据再写入HBase样例程序
SparkHbasetoHbase().hbasetohbase(spark._jsc) # 停止SparkSession spark.stop() 父主题: Spark从HBase读取数据再写入HBase样例程序
SparkHbasetoHbase().hbasetohbase(spark._jsc) # 停止SparkSession spark.stop() 父主题: Spark从HBase读取数据再写入HBase样例程序
HBaseExternalHivetoCarbon /opt/example/HBaseExternalHivetoCarbon-1.0.jar 父主题: Spark同步HBase数据到CarbonData样例程序
LoginUtil.login(userPrincipal, userKeytabPath, krb5ConfPath, hadoopConf); 父主题: 准备Spark应用开发环境
SparkHivetoHbase().hivetohbase(spark._jsc) # 停止SparkSession spark.stop() 父主题: Spark从Hive读取数据再写入HBase样例程序
SparkHivetoHbase().hivetohbase(spark._jsc) # 停止SparkSession spark.stop() 父主题: Spark从Hive读取数据再写入HBase样例程序
序的当前和历史状态,便于存储和检索。 TimelineServer会将数据保存到内存数据库LevelDB中,占用大量内存,安装TimelineServer的节点内存至少需要预留30GB。 父主题: YARN
-tools-1.99.3/loader-tool/job-config/sftp-to-hdfs.xml <root> <!-- 连接数据库的信息 --> <sqoop.connection name="vt_sftp_test" type="sftp-connector"> <connection
API V2 集群管理接口 作业管理接口 弹性伸缩接口 集群HDFS文件接口 SQL接口 委托管理 数据连接管理 版本元数据查询 IAM同步管理接口 标签管理接口
-tools-1.99.3/loader-tool/job-config/sftp-to-hdfs.xml <root> <!-- 连接数据库的信息 --> <sqoop.connection name="vt_sftp_test" type="sftp-connector"> <connection
Linux环境运行成功结果会有如下信息。 Create table success! _c0 0 Delete table success! 父主题: 调测Impala应用
Linux环境运行成功结果会有如下信息。 Create table success! _c0 0 Delete table success! 父主题: 调测Impala应用
使用Oozie 并发提交大量oozie任务时,任务一直没有运行 Oozie调度HiveSQL作业报错处理 在MRS集群外客户端提交不了Oozie任务或两个小时才提交成功
管理MRS集群 MRS集群管理概述 MRS集群Manager简介 访问MRS集群Manager 管理MRS集群 管理MRS集群组件 管理MRS集群节点 管理MRS集群客户端 管理MRS集群作业 管理MRS集群租户 管理MRS集群用户 管理MRS集群元数据 管理MRS集群静态服务资源
安全”。 找到选项“hive.security.whitelist.switch”,选择“OFF”,单击保存并重启HiveServer即可。 父主题: 使用Hive
值(例如设置为二分之一或四分之一的值),但不要超过“yarn.scheduler.maximum-allocation-mb”参数值。 父主题: 集群管理类
waitForCompletion(true) ? 0 : 1); } 样例中所有zkQuorum对象需替换为实际ZooKeeper集群节点信息。 父主题: MapReduce访问多组件样例程序
直接重启耗时约3~5分钟。 滚动重启 单个Impalad节点重启时,运行在该节点上的任务会失败,其它节点的任务不受影响。 滚动重启10个节点耗时约10分钟。 父主题: MRS 3.2.0-LTS.1.10补丁说明