分布式缓存服务 DCS-扫描并删除Redis实例的过期Key:自动扫描参数配置

时间:2024-06-19 19:54:53

自动扫描参数配置

在执行过期key扫描时,若您想设置自动扫描,单击“自动扫描”右侧的,弹出“自动扫描设置”页面,进行相应设置后,单击“确定”自动扫描配置完成。

自动扫描配置参数说明如下表1

表1 自动扫描配置参数

配置参数

参数含义

取值范围

默认值

备注

首次扫描时间

设定的第一次扫描时间,须设定在当前时间之后。

取值格式:YYYY/MM/DD hh:mm:ss

-

-

扫描间隔

从首次扫描时间开始,每隔一个间隔时间,便启动一次扫描。

0~43,200,单位:分

1440

  • 如果到达启动时刻,上一次扫描还未结束,则本次轮空。
  • 启动扫描的时机有五分钟冗余量,即超过本次启动时刻,不足五分钟,仍然会启动,不至于轮空。
    说明:

    连续扫描可能使cpu占用率较高,建议根据实例中key总量以及key增长情况来配置,可参考下面性能说明和配置建议。

扫描超时

此参数的目的在于避免不可知原因造成的扫描超时,导致后面的定时任务无法执行。设定此参数,超过超时时间后,返回失败,以便能继续进行下一轮扫描。

1~86,400,单位:分

2880

  • 时间不少于扫描间隔时间的2倍。
  • 可根据每次过期key扫描的时间,以及使用场景所能承受的最大超时时间,设定一个经验值。

迭代扫描key数量

SCAN命令用于迭代当前数据库中的key集合。 COUNT选项的作用就是让用户告知迭代命令, 在每次迭代中应该从数据集里返回多少元素。具体参见scan命令介绍。迭代式扫描可降低一次扫描过多key而造成扫描时间过长,影响redis性能的问题。

10~1,000,单位:个

10

举例:redis中有1000万个key,迭代扫描key数量设为1000,则迭代10000次可完成全库扫描。

性能说明:

  • 数据面底层SCAN扫描间隔5ms,相当于1秒钟扫描200次。迭代扫描key数量设为10/50/100/1000时,每秒钟扫描2000/10000/20000/200000个key。
  • 每秒钟扫描key数量越大,cpu占用率也相应增加。

测试参考:

使用主备实例测试,在有1000万不过期和500万过期的key,过期时间为1-10秒的场景下,完成一次全库扫描,测试数据如下:

以下测试结果仅供参考,不同局点环境和网络波动等客观条件可能产生差异。

  • 自然删除,每秒删除1万条过期key,删除500万过期key,耗时约为8分钟,cpu占用率约为5%。
  • “迭代扫描key数量”设为10,耗时约为 1500万/0.2万/60秒 = 125分,cpu占用率约为8%。
  • “迭代扫描key数量”设为50,耗时约为 1500万/1万/60秒 = 25分, 删除key时cpu占用率约10%。
  • “迭代扫描key数量”设为100,耗时约为 1500万/2万/60秒 = 12.5分, 删除key时cpu占用率约20%。
  • “迭代扫描key数量”设为1000,耗时约为 1500万/20万/60秒 = 1.25分,删除key时cpu占用率约为25%。

建议配置

support.huaweicloud.com/usermanual-dcs/dcs-ug-210330002.html