MAPREDUCE服务 MRS-常用参数:开启Spark进程间的认证机制

时间:2024-06-29 16:25:02

开启Spark进程间的认证机制

目前Spark进程间支持共享密钥方式的认证机制,通过配置spark.authenticate可以控制Spark在通信过程中是否做认证。这种认证方式只是通过简单的握手来确定通信双方享有共同的密钥。

在Spark客户端的“spark-defaults.conf”文件中配置如下参数。

表26 参数说明

参数

描述

默认值

spark.authenticate

在Spark on YARN模式下,将该参数配置成true即可。密钥的生成和分发过程是自动完成的,并且每个应用独占一个密钥。

true

support.huaweicloud.com/cmpntguide-mrs/mrs_01_1931.html