MAPREDUCE服务 MRS-高危操作一览表:Spark2x高危操作

时间:2024-07-29 09:12:50

Spark2x高危操作

MRS 3.x之前版本,服务名称为Spark。

表17 Spark2x高危操作

操作名称

操作风险

风险等级

规避措施

重大操作观察项目

配置项的修改(spark.yarn.queue)

导致服务启动异常

★★

修改相关配置项时请严格按照提示描述,确保修改后的值有效

观察服务能否正常启动

配置项的修改(spark.driver.extraJavaOptions)

导致服务启动异常

★★

修改相关配置项时请严格按照提示描述,确保修改后的值有效

观察服务能否正常启动

配置项的修改(spark.yarn.cluster.driver.extraJavaOptions)

导致服务启动异常

★★

修改相关配置项时请严格按照提示描述,确保修改后的值有效

观察服务能否正常启动

配置项的修改(spark.eventLog.dir)

导致服务启动异常

★★

修改相关配置项时请严格按照提示描述,确保修改后的值有效

观察服务能否正常启动

配置项的修改(SPARK_DAEMON_JAVA_OPTS)

导致服务启动异常

★★

修改相关配置项时请严格按照提示描述,确保修改后的值有效

观察服务能否正常启动

删除所有JobHistory2x实例

导致历史应用的event log丢失

★★

至少保留一个JobHistory2x实例

观察JobHistory2x中是否可以查看历史应用信息

删除或修改HDFS上的/user/spark2x/jars/8.1.0.1/spark-archive-2x.zip

导致JD BCS erver2x启动异常及业务功能异常

★★★

删除/user/spark2x/jars/8.1.0.1/spark-archive-2x.zip,等待10-15分钟,zip包自动恢复

观察服务能否正常启动

support.huaweicloud.com/usermanual-mrs/mrs_01_0785.html