MAPREDUCE服务 MRS-Flink常用配置参数:State Backend

时间:2024-08-29 09:54:02

State Backend

表8 State Backend参数说明

参数

描述

默认值

是否必选

state.backend.fs.checkpointdir

当backend为filesystem时的路径,路径必须能够被JobManager访问到,本地路径只支持local模式,集群模式下请使用HDFS路径。

hdfs:///flink/checkpoints

state.savepoints.dir

Flink用于恢复和更新作业的保存点存储目录。当触发保存点的时候,保存点元数据信息将会保存到该目录中。

hdfs:///flink/savepoint

安全模式下必配

restart-strategy

默认重启策略,用于未指定重启策略的作业:

  • fixed-delay
  • failure-rate
  • none

none

restart-strategy.fixed-delay.attempts

fixed-delay策略重试次数。

  • 作业中开启了checkpoint,默认值为Integer.MAX_VALUE。
  • 作业中未开启checkpoint,默认值为3。

restart-strategy.fixed-delay.delay

fixed-delay策略重试间隔时间。单位:ms/s/m/h/d。

  • 作业中开启了checkpoint,默认值是10 s。
  • 作业中未开启checkpoint,默认值和配置项akka.ask.timeout的值一致。

restart-strategy.failure-rate.max-failures-per-interval

故障率策略下作业失败前给定时间段内的最大重启次数。

1

restart-strategy.failure-rate.failure-rate-interval

failure-rate策略重试时间。单位:ms/s/m/h/d。

60 s

restart-strategy.failure-rate.delay

failure-rate策略重试间隔时间。单位:ms/s/m/h/d。

默认值和akka.ask.timeout配置值一样。可参考Distributed Coordination (via Akka)

support.huaweicloud.com/cmpntguide-lts-mrs/mrs_01_0592.html