MAPREDUCE服务 MRS-配置Spark Executor退出时执行自定义代码:配置参数

时间:2024-07-02 16:39:36

配置参数

在Spark客户端的“spark-defaults.conf”配置文件中进行设置。

参数

说明

默认值

spark.executor.execute.shutdown.cleaner

配置为true后,支持executor退出时执行自定义代码。

false

spark.executor.execute.shutdown.cleaner.max.timeout

executor执行自定义代码的超时时间。

240s

support.huaweicloud.com/cmpntguide-lts-mrs/mrs_01_24805.html