MAPREDUCE服务 MRS-配置Spark Executor退出时执行自定义代码:配置参数
配置参数
在Spark客户端的“spark-defaults.conf”配置文件中进行设置。
参数 |
说明 |
默认值 |
---|---|---|
spark.executor.execute.shutdown.cleaner |
配置为true后,支持executor退出时执行自定义代码。 |
false |
spark.executor.execute.shutdown.cleaner.max.timeout |
executor执行自定义代码的超时时间。 |
240s |