MAPREDUCE服务 MRS-使用Spark BulkLoad工具同步数据到HBase表中:前提条件

时间:2024-12-05 16:02:42

前提条件

  • 集群安装了Spark及Hive服务。
  • 执行数据导入的用户需要同时具有Spark(对应源表的SELECT权限)、HBase权限(对应HBase NameSpace的RWXA权限)和HDFS权限(对应HFile输出目录的读写权限)。
  • 如果集群已启用Kerberos认证(安全模式),需修改Spark“客户端安装目录/Spark/spark/conf/spark-defaults.conf”配置文件中的“spark.yarn.security.credentials.hbase.enabled”参数值为“true”。
support.huaweicloud.com/cmpntguide-lts-mrs/mrs_01_300323.html