检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
该公式中同时计算了网络瞬时输入流量和网络瞬时输出流量,这两个指标值是有统计主从同步的流量的。所以统计的总流量使用量会比正常的业务流量大一些,会发生带宽使用率指标超过100%的情况。
触发限流(流控)的原因和处理建议 Redis产生流控,说明redis在周期内的使用流量超过该实例规格的最大带宽。流控会导致连接被丢弃,从业务角度可能会造成业务的延迟增大,客户端连接异常等问题。 实例规格对应的最大带宽,可以查看实例规格中对应实例类型的“基准/最大带宽”。
通常来说,“网络瞬时输入流量”和“网络瞬时输出流量”快速上升,并持续大于实例最大带宽的80%时,需引起注意,可能流量不足。 需关注的监控指标为带宽使用率如下图。带宽使用率的计算公式:带宽使用率=(网络瞬时输入流量+网络瞬时输出流量)/(2*最大带宽限制) * 100%。
带宽使用率 0~200% 告警阈值:>90% 连续触发次数:2 告警级别:重要 是 可结合网络瞬时输入流量和网络瞬时输出流量,分析业务是读业务和还是写业务导致的流量上涨。 对于单个节点带宽使用率上涨,需要分析是否有存在大key。
网络瞬时输入流量 该指标用于统计瞬时的输入数据流量。 如果是实例级别的网络瞬时输入流量,所有节点输入数据流量汇总后展示。 如果是节点级别,统计的是本节点的输入数据流量。 网络瞬时输出流量 该指标用于统计瞬时的输出数据流量。
业务高峰期(如实例在内存利用率、CPU利用率达到90%以上或写入流量过大)变更规格可能会失败,若变更失败,请在业务低峰期再次尝试变更。
使用memtier_benchmark测试Redis性能 Memtier_benchmark是Redis Labs推出的一款命令行工具,它能够产生多种流量模式,对Redis实例进行基准测试。该工具提供了丰富的自定义选项和报表功能,通过命令行界面就能够轻松地使用。
变更指定实例的带宽 功能介绍 Redis 4.0及之后版本的实例,支持临时扩容缓存实例带宽,用于临时解决业务流量高峰,带宽超限的问题。实例带宽扩容后,带宽为原带宽的2倍。Proxy集群实例带宽上限为10000Mbit/s,达到上限后无法扩容。
网络输入流量检查 说明: 该检查项只针对单机、主备、读写分离实例。 网络输入流量过高,写缓冲区溢出,可能导致规格变更失败。 如提示网络输入流量过高,请在业务低峰期进行变更。 CPU利用率检查 检查五分钟内的节点CPU利用率是否过高(>90%)。
变更指定实例的带宽 功能介绍 Redis 4.0及之后版本的实例,支持临时扩容缓存实例带宽,用于临时解决业务流量高峰,带宽超限的问题。实例带宽扩容后,带宽为原带宽的2倍。Proxy集群实例带宽上限为10000Mbit/s,达到上限后无法扩容。
>=0KB/s Redis实例 1分钟 instantaneous_output_kbps 网络瞬时输出流量 该指标用于统计瞬时的输出流量。 单位:KB/s。
input_kbps String 缓存实例网络入流量,单位:KB/s。 output_kbps String 缓存实例网络出流量,单位:KB/s。
主备读写分离实例适用于写少读多的场景,如果写流量过大,可能导致主从断连,或断连后主从同步失败,导致读请求性能下降。 写流量大的场景请考虑普通主备或集群 。 从节点故障后,需要一定的时间从主节点全量同步数据,同步数据期间,从节点不对外提供服务,此时实例读请求性能会下降。
如需读写流量分流处理,DCS服务提供了针对读写流量分流的读写分离实例类型,通过在中间架设代理节点实现读写流量分发,遇到从节点故障时,自动切流至主节点,对业务应用无感知,且故障感知时间窗口远小于redisson内部的时间窗口。
实例诊断ID说明 表1 cause_ids ID ID类型 ID说明 1 cause 活跃连接数超过{THRESHOLD} 2 cause 瞬时流量过大 3 cause 底层磁盘异常 4 cause 持久化失败 5 cause 内存使用量超过{THRESHOLD} 6 cause
常见的资源占用监控和统计:cpu占用率、物理内存占用、网络输入/输出流量等。 常见的关键内部监控和统计:键个数、键过期个数、容量占用量、pubsub通道个数、pubsub模式个数、keyspace命中、keyspace错过。
开启审计日志后,若写入流量或QPS过大,可能会导致DCS实例出现性能下降以及审计日志的部分丢失。 约束与限制 开启审计日志需要用户账号拥有LTS服务创建日志组和日志流的权限。 新创建的缓存实例,请在实例创建成功10分钟后,再开启审计日志,否则可能会操作失败。
如果热Key主要是读流量较大,则可以在客户端配置读写分离,降低对主节点的影响。还可以增加多个副本以满足读需求,但是备机较多也有相应的影响,DCS主备节点之间使用的是星型复制,即所有的备节点都直接和主节点保持同步,这样能保证备节点之间相互独立,且复制延迟较小。
表3 InstanceStatistic 参数 参数类型 描述 input_kbps String 缓存实例网络入流量,单位:kbit/s。 output_kbps String 缓存实例网络出流量,单位:kbit/s。 instance_id String 实例ID。
过大的Value会引发分片不均、热点Key、实例流量或CPU使用率冲高等问题,还可能导致变更规格和迁移失败。应从设计源头上避免此类问题带来的影响。 设计合理的Key中元素的数量。