MAPREDUCE服务 MRS-在Hue WebUI使用SparkSql编辑器:配置Spark2x

时间:2024-11-25 09:23:37

配置Spark2x

使用SparkSql编辑器之前需要先修改Spark2x配置。

  1. 进入Spark2x的全部配置页面,具体操作请参考修改集群服务配置参数
  2. 设置Spark2x多实例模式,搜索并修改Spark2x服务的以下参数:

    参数名称

    spark.thriftserver.proxy.enabled

    false

    spark.scheduler.allocation.file

    #{conf_dir}/fairscheduler.xml

  3. 进入JD BCS erver2x自定义界面,在“spark.core-site.customized.configs”参数内,添加如下两个自定义项:

    表1 自定义参数

    名称

    hadoop.proxyuser.hue.groups

    *

    hadoop.proxyuser.hue.hosts

    *

  4. 保存配置,重启Spark2x服务。
support.huaweicloud.com/cmpntguide-mrs/mrs_01_2370.html