检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据迁移 Redis数据迁移方案概览 使用DRS服务将GeminiDB Redis迁移到Redis(推荐) 阿里云数据库Redis/Tair到GeminiDB Redis的迁移 腾讯云Redis到GeminiDB Redis的迁移 使用DRS服务将自建Redis或者Redis集群迁移到GeminiDB
Protocal)文件中,最终将行协议文件数据解析并迁移至目标端。 整个迁移过程分为导出和导入阶段两个阶段。 导出阶段会并发解析社区版InfluxDB的tsm文件,并将解析数据写入到内存中。 导入阶段会将读取数据发送至GeminiDB Influx集群。 迁移工具支持自定义迁移时间范围,可在工具运行时指定。
数据迁移 迁移方案概览 通过数据复制服务迁移数据 通过mongoexport和mongoimport工具迁移数据 通过mongodump和mongorestore工具迁移数据 父主题: 用户指南
通过数据复制服务迁移数据 具体迁移操作,请参见实时迁移内容。 父主题: 数据迁移
自建Redis主备、集群实例如何迁移到GeminiDB Redis? 为什么阿里云Redis、腾讯云Redis等云服务不能使用DRS进行数据迁移? 自建主备Redis,迁移到GeminiDB Redis集群,需要考虑哪些因素? 迁移完成后数据量变少了,100GB的数据迁移到GeminiDB
迁移方案概览 GeminiDB Mongo提供了多种数据迁移方案,可满足不同业务场景下的MongoDB数据库迁移。 表1 迁移方案 迁移场景 支持的迁移类型 文档链接 使用导出导入工具迁移MongoDB数据库 全量迁移 通过mongoexport和mongoimport工具迁移数据
数据库端口号。 DB_USER 数据库用户名。 AUTH_DB 存储<DB_USER>信息的数据库,一般为admin。 FILE_PATH 存放根证书的路径。 DB_NAME 需要迁移的数据库名称。 DB_COLLECTION 需要迁移的数据库中的集合。 Backup_directory
--collection <DB_COLLECTION> --out <DB_PATH> 表1 参数说明 参数名称 说明 DB_ADDRESS 数据库地址。 DB_PORT 数据库端口。 AUTH_DB 存储DB_USER信息的数据库,一般为admin。 DB_USER 数据库用户。 DB_NAME
迁移完成后数据量变少了,100GB的数据迁移到GeminiDB Redis只有20-30GB,数据是不是没迁移完? GeminiDB Redis具有4:1超高数据压缩,现网多个用户数据迁移完都符合此规律。用户可以进行数据一致性校验,判断是否迁移完成:比如key的数量、key抽样校验等。
Redis数据源。 全量迁移原理:工具模拟源端Redis的从节点,通过全量同步获取RDB文件,解析后将数据以命令形式发送给目标端GeminiDB Redis。此外,也可将RDB文件作为数据源,方便地导入某时刻的数据快照。 增量迁移原理:全量迁移完成后,工具继续将增量数据以命令形式发送给目标端GeminiDB
是为了下云或者换云,屏蔽了 PSync 协议。 迁移工具 DRS服务:华为云数据复制服务DRS(Data Replication Service)提供数据库零停机的迁移上云体验,支持全量数据迁移和增量数据迁移,为您提供安全稳定高可靠的迁移链路,详情请参考迁移方案概览。 Redis-Shake工
IP。 等待结果 等待数据迁移,若执行日志中出现如下信息,代表全量数据同步完成,此后数据迁移进入增量同步阶段。 pika集群数据迁移 迁移步骤同pika单机数据迁移步骤,为每个pika实例创建一个工作流即可。 pika-migrate迁移工具使用说明 迁移工具部署 Pika-mi
本章节主要介绍RocksDB到GeminiDB Redis接口的迁移方案。 迁移原理 使用自研迁移工具rocksdb-port,和RocksDB部署在相同机器上,准备好配置文件,启动迁移即可自动完成全量与增量的迁移。 全量迁移对RocksDB数据进行快照,然后扫描整个数据库,将数据打包成GeminiDB Redis识别的格式,发送到GeminiDB
阿里云数据库Redis/Tair到GeminiDB Redis的迁移 本章节主要介绍阿里云数据库Redis/Tair到GeminiDB Redis的迁移方案。 迁移原理 使用阿里云的数据迁移工具DTS中的数据迁移功能,该功能支持将阿里云Redis服务的数据迁移至其他Redis服务中,利用该工具避开阿里云
全量迁移,此时对kvrocks打快照,并记录对应的数据版本(seq)。然后解析全量数据文件成redis命令写入GeminiDB Redis。全量迁移完成后进入持续的增量迁移过程,迁移工具循环给Kvrocks发送PSYNC命令,将获取到的增量数据不断转发给GeminiDB Redis,完成增量迁移
DTS预校验 步骤2:停止DTS数据迁移服务 待Redis业务割接后,完成数据迁移任务。 若没有数据同步需求时,需要 DTS迁移任务(该功能会实时收费)。 步骤3:迁移后Redis数据一致性校验 迁移完成后,您可以对Redis数据做一致性校验。 Redis迁移已完成或者已经进入增量状态。
B中新增的数据也会同步到Redis实例中。 图1 迁移原理 使用须知 ssdb-port作为SSDB主节点的从节点,只读取全量和增量数据,无数据受损风险。 由于在源端使用ssdb-port迁移工具,源端SSDB性能会受到一定的影响。 全量迁移和增量迁移可以不停服,数据全部迁入GeminiDB
Redis数据进行检查。 迁移后Redis数据一致性校验 迁移完成后,您可以对Redis数据做一致性校验。 Redis迁移已完成或者已经进入增量状态。 需要ECS实例部署Redis-Full-Check开源工具,并确保与源端、目标端网络互通。 如果迁移任务处于增量状态,由于迁移源端和
迁移后Redis数据一致性校验 迁移完成后,您可以对Redis数据做一致性校验。 使用须知 Redis迁移已完成或者已经进入增量状态。 需要ECS实例部署Redis-Full-Check开源工具,并确保与源端、目标端网络互通。 如果迁移任务处于增量状态,由于迁移源端和目标端间存在
同步状态正向迁移速度太慢 修改redis-shake参数source.rdb.parallel,可调整迁移并发度,默认为0,按db和分片数确定。 父主题: 数据迁移