检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
DRS预检查阶段会在源及目标数据库进行一系列查询判断是否符合数据迁移或者同步的前提条件,以便提升任务成功率。当后端检查用时超过页面超时设置时,会显示预检查结果上报超时。 可能原因 源或目标数据库资源不足,执行查询过慢导致超时。 数据库中对象过多,执行用时长导致超时。 选择的对象过多导致查询超时。部分预检查项
DRS迁移索引时目标库临时空间不足。 解决方案 调整目标库临时空间。 如果为RDS for MySQL,可参考以下操作调整临时空间。 参考RDS性能调优中的内容进行空间优化。 优化完成后,查看临时空间是否增长。 是,执行2。 否,在管理控制台右上角,选择“工单 > 新建工单”,联系RDS客服调整目标数据库临时空间。
创建索引,排序查询等。 源数据库的mongod服务和其他服务同时部署在一台机器上,而且没有设置cacheSizeGB的大小,这种情况下,如果因为其他服务消耗掉内存导致不能给wiredTiger引擎保证的内存,则会出现内存溢出的情况。 一般默认情况下,mongod的wiredTig
目标库未提前创建表结构依赖的函数。DRS PostgreSQL->PostgreSQL表级同步场景下,不支持函数和插件对象的同步,所以需要手动在目标库创建表结构依赖的函数。 可登录至目标库RDS for PostgreSQL的相应库(database),执行如下SQL查看对应函数是否存在,其中f_name为对应函数名称:
DRS发送Kafka消息序列化方式是什么 DRS发送到Kafka的数据,key序列化器是org.apache.kafka.common.serialization.StringSerializer,value序列化器是org.apache.kafka.common.serialization
fn_cdc_get_max_lsn(); 查询数据库的当前位点 例如,查询数据库当前LSN位点 图4 查询lsn 根据获取信息,任务的启动位点设置为如下: 图5 设置启动位点 DDS为源 DDS到MongoDB和DDS到Kafka的同步出云任务,支持设置启动位点,在“设置同步”页
复,待实例状态正常后,可手动单击任务“操作”列上的“续传”继续任务。 主备倒换:实例主备切换期间,可能会造成几秒或几分钟的服务闪断,这种情况下,DRS会进行自动重试。若重试仍无法恢复,待实例状态正常后,可手动单击任务“操作”列上的“续传”继续任务。 规格变更:规格变更后,将会重启
操作便捷、简单,实现数据库的迁移和同步“人人都会”。传统场景中,需要专业的技术背景,步骤复杂,技术门槛比较高。 周期短 仅需分钟级就能搭建完成迁移任务,让整个环境搭建“高效快速”。传统场景下需要人工部署,短则几天,长则上周或上月。 低成本 通过服务化迁移,免去了传统的DBA人力成本和硬件
对于表级迁移或同步任务,如果创建DRS任务时,只选中表的数据,由于Online DDL使用的临时表不在选中的列表中,因此不会被DRS同步。可以参考以下使用限制和操作步骤,通过手动在目标库执行DDL的方式,避免源库Online DDL操作导致的源库和目标库表结构不一致,引起的DRS任务失败。 使用限制 本
地主备倒换的效果。 图1 实时灾备倒换 图2 双主灾备原理 防回环同步原理概述(DML) 从源库解析日志时,解析到的数据中可能包含某种标记,包含这种标记的数据是通过DRS写到源库的,应用写入的数据无标记,解析后过滤掉不符合标记条件的数据。 回放数据到目标库时,对要回放的数据打上特殊标记,这个标记会记录到数据库日志中。
创建委托 在“选择策略”页面,根据不同的任务类型,选择对应的授权策略,完成后单击右下角的“下一步”。 自建-自建任务授权策略:DRS FullAccess。 入云或出云任务授权策略:DRS FullAccess、对应源数据库以及目标数据库的ReadOnlyAccess。 以MyS
其中<seqname>为2中查询结果中带schema的序列名,查询结果中的next_new_val为last_value + increment_by * cache_value,考虑了序列值缓存的情况,保证序列值不会重复。 针对每个同步的表关联的序列,参考如下语句在目标库设置新的序列值。 select
败。每个接口所需要的权限,与各个接口所对应的授权项相对应,只有发起请求的用户被授予授权项所对应的策略,该用户才能成功调用该接口。例如,用户要调用接口来查询迁移任务列表,那么这个IAM用户被授予的策略中必须包含允许“drs:migrationJob:list”的授权项,该接口才能调用成功。
登录UGO控制台。 单击左侧导航栏“结构迁移 > 数据库评估”。 在评估数据库页面,单击右上角的“创建项目”。 查看Oracle源数据库准备和授权,源库准备完成后,单击“启动创建”。 进入基本信息页面,完成基本信息的填写。 基本信息填写完成后,“开始测试”高亮显示。 单击“开始测试”。 测试连接成功:“下一步”按钮高亮显示。
参数管理 修改任务参数 查看参数修改历史 父主题: 任务管理
任务再编辑时导出的对象信息,是已经同步的对象信息。 上传文件后校验失败,可单击“查看失败详情”下载错误信息。 Excel中填写的对象名称的大小写须与源库中保持一致。 操作步骤 在实时同步任务的“设置同步”页面,单击“同步对象”处的 “导入对象文件”。 图1 导入对象文件 单击“下载模板”。 在下载的Excel模板中,填写需要导入的对象信息。
对象管理 迁移用户 参数对比列表 查看迁移对象 父主题: 任务管理
任务管理 创建灾备任务 查询灾备进度 查看灾备日志 数据对比(对比灾备项) 任务生命周期
本示例中源数据库为MySQL,使用的华为云RDS实例。 目标数据库引擎 Kafka 本示例中目标数据库为Kafka。 网络类型 VPC网络 本示例中采用“VPC网络”。 以上资源成本仅供参考,资源配置和使用费用详情请参见产品价格详情。您可以通过华为云提供的价格计算器,选择您需要的配置规格,来快速计算出参考价格。
10000 规格的线上运行性能受网络环境、灾备数据库和业务数据库的性能、延迟等因素影响,实际的性能值会有差异,表中性能上限值仅供参考。 DRS规格:DRS为用户提供的不同性能的链路规格,以灾备初始化(不限速)和灾备性能为衡量标准。 性能上限(行/秒):表示每秒同步的事务数,包括BEGIN、COMMIT