MAPREDUCE服务 MRS-如何使用PySpark连接MRS Spark?

时间:2024-11-22 11:26:55

如何使用PySpark连接 MRS Spark?

:如何在E CS 服务器上用PySpark连接内网开启Kerberos认证的MRS Spark集群?

:将Spark的“spark-defaults.conf”文件中“spark.yarn.security.credentials.hbase.enabled”修改为“true”,然后使用spark-submit --master yarn --keytab keytabfile --principal principal指定Kerberos认证文件。

support.huaweicloud.com/mrs_faq/mrs_03_1115.html