检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
未启动任务计费说明 DRS任务的启动时间可以根据业务需求,设置为“立即启动”或“稍后启动”。DRS任务是从启动开始计费,当用户选择“稍后启动”时,在设置的启动时间之前DRS不会收取费用。 父主题: 计费相关
修改任务信息 同步任务创建成功后,支持对部分任务基本信息进行修改,以方便区分和识别同步任务。 支持可修改的任务信息如下: 任务名称 描述 SMN主题 时延阈值 任务异常结束天数 任务启动时间 前提条件 已登录数据复制服务控制台。 操作步骤 在“实时同步管理”页面,选择指定的同步任务,单击任务名称。
源数据库expire_logs_days参数检查 MySQL迁移时,可通过设置expire_logs_days参数设置Binlog保留时间。建议将expire_logs_day参数设置在合理的范围,确保恢复时断点处的Binlog尚未过期,以保证任务中断后的顺利恢复。 不通过原因
这一条记录的commit时间,13位Unix时间戳,单位为毫秒。 ts 写入到目标kafka的时间,13位Unix时间戳,单位为毫秒。 clusterTime 与事件关联的oplog条目的时间戳,格式为timestamp:incre(timestamp是10位unix时间戳,单位为秒;incre代表当前命令在同一秒内执行的次序)。
将会自动获取源库最新位点。 图6 设置启动位点 增量同步的启动位点,格式为timestamp:incre(timestamp代表unix时间戳,单位为秒;incre代表当前命令在同一秒内执行的次序)。同步任务从启动位点开始获取源库增量日志(含当前启动位点)。 副本集通过db.getSiblingDB("local")
nlog文件名的后缀,binlog_file_offset为这条binlog记录在binlog文件中的偏移量。 时间戳 这条变更记录写入到binlog文件中时的时间戳。 如果您想查看指定数据库下指定表的数据详情,可以单击指定表操作列的“查看数据详情”。 图3 字段详情 数据详情可参考表2:
注意后缀名为.bak。 图6 设置增量备份文件 建议备份文件名称和数据库名称保持一致(区分大小写),同时加上时间戳和“.bak”后缀,例如:[数据库名]_Incr_[时间戳].bak。 建议将所有的数据库备份在一个bak文件里或者少量的bak文件里,这样可以减少频繁的上传与恢复,
灾备任务时延增高常见原因 RTO增大常见原因 RTO是增量同步期间DRS实例上的事务传输到灾备目标库且回放成功的时间差,RTO值较大说明DRS上需要回放到目标实例的事务有积压。一般有以下几种原因: 灾备任务初始化完成不久,启动灾备任务到当前时间累积的增量数据需要回放。 业务数据库
迁移准备 本小节介绍通过数据复制服务进行备份迁移前的准备工作。在正式使用数据复制服务之前,请先阅读以确保您已完成创建备份迁移任务所需的各项准备工作。 备份文件准备 请参见《数据复制服务备份迁移》中各方案下的“使用须知”章节。 数据库恢复模式设置 仅进行全量备份迁移时,对数据库的恢复模式没有要求。
暂停迁移任务 迁移时不可避免业务高峰期的情况下,如果流速模式仍不能满足需要,DRS提供对迁移中的任务进行暂停功能。 目前以下迁移链路支持暂停功能: 入云 MySQL->MySQL MySQL->GaussDB(for MySQL) MySQL->DDM MySQL分库分表->DDM
每行总列数。 separator 审计日志分割符号。 format 关键列表示的含义,从0开始计数。 timeFormat 日期格式,为空时表示时间戳。 华为云RDS for MySQL quo =" column = 12 separator = , format = threadId:1
源数据库ExpireLogsDays参数检查 MySQL的同步和灾备场景,数据库expire_logs_days参数值为0,可能会导致任务失败。 不通过原因 源库参数expire_logs_days为0时,startup和flush logs等操作会触发binlog清理,从而导致任务失败。
jobs字段数据结构说明 参数 是否必选 参数类型 描述 job_id 是 String 任务ID。 start_time 否 String 任务启动时间,时间戳格式精确到毫秒,例如:1608188903063,取值为空代表立即启动。 响应参数 状态码: 202 表5 响应Body参数 参数 参数类型
修改消费时间点 数据复制服务支持在消费的过程中,随时修改消费时间点,修改的时间点必须在订阅任务的时间范围内。一旦修改完消费时间点,那么下游SDK拉取到的增量数据从修改后的消费时间点开始。 本章节将详细介绍通过数据复制服务管理控制台修改消费时间点的操作步骤。 约束限制 数据订阅任务已启动且任务为“正常”状态。
_INCR_TRANS)。 transfer_status String 任务状态。 process_time String 迁移时间,时间戳。 remaining_time String 预计剩余时间。 progress_map Map<String,ProgressInfo>
MySQL迁移出现数据膨胀怎么办 DRS在全量迁移阶段,为了保证迁移性能和传输的稳定性,采用了行级并行的迁移方式。 当源端数据紧凑情况下,通过DRS迁移到云上RDS for MySQL后,可能会出现数据膨胀现象,使得磁盘空间使用远大于源端。 针对这种情况,客户可选择在目标库中执行以下命令,进行优化整理从而缩小空间。
创建迁移任务 使用流程 一次完整的实时迁移,是通过创建实时迁移任务,以迁移任务作为数据库迁移的导向,依次进行迁移进度观察、迁移日志分析、迁移数据一致性对比等多项操作。通过多项指标和数据的对比分析,可以帮助您确定合适的业务割接时机,实现最小化业务中断的数据库迁移。 一次完整的实时迁移包含如下过程:
务则包含三个阶段)。为了确保迁移各个阶段的平顺,DRS在任务正式启动前,会对任务源数据库、目标数据库中的参数、对象等信息进行自动化的扫描和检测,帮助您提高数据迁移的成功率,常见的预检查项清单如下所示。 概览 根据迁移任务的源数据库类型,查看预检查信息: 源数据库为MySQL的迁移链路预检查一览表:
数据复制服务是否支持某个时间段的数据复制 数据复制服务目前只支持全量、全量+增量的迁移场景。 父主题: 产品咨询
源库CDC数据保留时间是否足够 检查Microsoft SQL Server源库CDC数据保留时间是否足够。源数据库CDC数据保留时间不足1天,会导致增量同步异常。请修改为1440分钟(1天)或以上,建议4320分钟(3天)。 不通过原因 源库CDC数据保留时间太短,不足1天,会导致增量同步异常。