MAPREDUCE服务 MRS-如何限制存储在ZKstore中的应用程序诊断消息的大小:回答
回答
在某些情况下,已经观察到诊断消息可能无限增长。由于诊断消息存储在状态存储中,不建议允许诊断消息无限增长。因此,需要有一个属性参数用于设置诊断消息的最大大小。
如果您需要设置“yarn.app.attempt.diagnostics.limit.kc”参数值,具体操作参考修改集群服务配置参数,进入Yarn“全部配置”页面,在搜索框搜索以下参数。
参数 |
描述 |
默认值 |
---|---|---|
yarn.app.attempt.diagnostics.limit.kc |
定义每次应用连接的诊断消息的数据大小,以千字节为单位(字符数*1024)。当使用ZooKeeper来存储应用程序的行为状态时,需要限制诊断消息的大小,以防止YARN拖垮ZooKeeper。如果将“yarn.resourcemanager.state-store.max-completed-applications”设置为一个较大的数值,则需要减小该属性参数的值以限制存储的总数据大小。 |
64 |
- MapReduce服务_如何使用MapReduce服务_MRS集群客户端安装与使用
- 大数据分析是什么_使用MapReduce_创建MRS服务
- 云日志服务的使用限制_云日志服务_使用限制说明
- RabbitMQ如何保证消息的可靠性_分布式消息系统_分布式消息RabbitMQ-华为云
- OBS对象存储是免费的吗_对象存储服务_对象存储如何使用
- RocketMQ的架构_RocketMQ的消息模式_分布式消息RocketMQ-华为云
- MapReduce服务_什么是MapReduce服务_什么是HBase
- 文件存储与块存储的区别_免费的文件存储_分布式文件存储系统
- 数据备份归档在哪里_数据分析存储系统_大数据存储管理
- 大数据存储_OBS怎么设置_免费的对象存储