检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
可能原因 目标Kafka为多可用区的Kafka实例,在某个可用区故障后,Kafka客户端在生产或消费消息时,可能会报上述错误。 解决方案 检查并修复Kafka分区状态。 然后在任务列表中,单击任务对应操作列的“重置”,重新提交任务。 父主题: Oracle为源实时同步
建议不要对过滤条件涉及的列做DDL操作,可能导致任务异常。 不建议使用非幂等表达式或函数作为数据加工条件,如SYSTIMESTAMP,SYSDATE等,因其每次调用返回的结果可能会有差异,导致达不到预期。 任务再编辑时,已经同步的表不支持修改过滤规则。 Oracle为源同步链路进行数据过滤时,定长字符类型
BSON field name {***} 可能原因 字段中含有不合法的符号,如".","$"等。 处理方法 排查源库数据中含有不合法符号的字段,并修改去掉不合法符号后,在任务列表中,单击任务对应操作列的“续传”,重新提交任务。 父主题: MongoDB->DDS实时迁移
并提供统一的SDK接口,实现下游业务订阅、获取、并消费。 一个完整的数据订阅过程需要通过如下两个阶段来实现: 使用数据复制服务控制台创建数据订阅任务。 数据订阅任务成功后,使用数据复制服务提供的SDK接口,访问数据订阅通道,订阅并消费增量数据。 数据复制服务提供的数据订阅功能在使
先创建双向同步任务,创建完成后,会生成两个子任务,即正向任务和反向任务,此时任务为配置状态。 先配置正向任务,当正向任务进入“增量中”状态并且时延低于60s后,再配置并启动反向任务。 等待反向任务状态到增量中,双向任务任务配置完成。 父主题: 实时同步
不通过原因:PostgreSQL不支持同步多个数据库,或者源数据库存在同名的对象。 处理建议:选择一个数据库进行迁移,或者将选择的数据库映射到同一个库下并保证数据库间无同名对象。 父主题: 数据库对象检查
for MySQL,可参考RDS性能调优中的内容,或联系RDS客服调整目标库空间。 如果为自建或其他云MySQL,请联系数据库运维工程师检查并调整目标数据库空间。 调整完成后,在任务列表中,单击任务对应操作列的“续传”,重新提交任务。 父主题: MySQL->MySQL实时迁移和同步
解决方案 在目标库RDS for PostgreSQL控制台修改session_replication_role参数为replica,并使其生效。 重试DRS任务。 父主题: PostgreSQL->PostgreSQL实时同步
点通过所选择的网络访问和连接即可。 例如,用户需要将A账号的RDS-A实例迁移到B账号的RDS-B,可选择为RDS-A实例申请弹性公网IP并绑定,在B账号创建入云的DRS任务,选择通过公网网络进行迁移。 父主题: 网络及安全
细粒度鉴权 DRS使用统一身份认证服务(IAM)进行精细的权限管理,IAM提供身份认证及访问控制等功能,给不同的用户组授予不同的权限,并采用细粒度的鉴权方式,精细地控制DRS资源的使用范围,帮助用户安全的控制资源的访问。 DRS权限详情可以参考权限管理。 网络隔离 DRS在创
从一个数据源拷贝到其他数据库,并保持一致,实现关键业务的数据实时流动。 实时同步不同于迁移,迁移是以整体数据库搬迁为目的,而实时同步是维持不同业务之间的数据持续性流动。 常用场景:实时分析,报表系统,数仓环境。 特点:实时同步功能聚焦于表和数据,并满足多种灵活性的需求,例如多对一
源库迁移的索引列数量不能超过32列。 不通过提示及处理建议 不通过原因:源库迁移的索引列数量过长,不能超过32列 处理建议:检查迁移的表索引列数量并修改索引。 查看索引列语句参考: SELECT T1.INDNAME ,T1.COLNAMES FROM SYSCAT.INDEXES AS
SQL迁移,系统默认进行三次自动续传,无需人工干预。 当自动重试失败累计一定次数后,任务会显示异常,需要人为根据日志来分析无法继续的原因,并尝试解决阻塞点(例如数据库修改了密码),如果环境无法修复,如所需日志已经淘汰,则使用重置功能可以完全重新开始任务。 父主题: 产品咨询
for MySQL,可参考RDS性能调优中的内容,或联系RDS客服调整目标库空间。 如果为自建或其他云MySQL,请联系数据库运维工程师检查并调整目标数据库空间。 调整完成后,在任务列表中,单击任务对应操作列的“续传”,重新提交任务。 父主题: MySQL->MySQL实时迁移和同步
pg_stat_activity; 解决方案 在目标库RDS for PostgreSQL控制台修改max_connections参数为较大的值,并使其生效,每个DRS任务大约需要100个连接。 父主题: PostgreSQL->PostgreSQL实时同步
录制回放实例创建成功后,在“源库及目标库”页面,填选源库信息、流量文件、目标库信息和任务配置后,单击“目标库信息”处的“测试连接”,测试并确定与目标库连通后,单击“下一步”。 源数据库流量文件选择“华为云API下载”时,源库信息 图6 源库信息 表5 源库信息 参数 描述 流量文件来源
和子网相关信息,同时需要在本地数据中心防火墙或主机配置VPN对端设备。操作步流程图2所示: 图2 操作流程 网络配置流程 创建DRS实例,并获取DRS实例所在子网和私有IP地址。 DRS实例所在子网默认选择与目标库在同一个子网。 图3 迁移实例信息 DRS迁移实例创建成功后,界面会显示DRS迁移实例的私有IP地址。
for MySQL,可参考RDS性能调优中的内容,或联系RDS客服调整目标库空间。 如果为自建或其他云MySQL,请联系数据库运维工程师检查并调整目标数据库空间。 调整完成后,在任务列表中,单击任务对应操作列的“续传”,重新提交任务。 父主题: MySQL->MySQL实时迁移和同步
致。 全量期间源库执行了DDL,导致目标库和源库表结构不一致。 可联系客户确认是否执行DDL。 解决方案 重新创建DRS同步任务进行同步,并确保全量同步期间,源库不执行DDL,且目标库无写入,否则可能导致数据不一致或同步失败。 父主题: PostgreSQL->PostgreSQL实时同步
方案架构 方案优势 采用全量+增量的迁移方式,保证数据迁移过程中业务不中断,数据不丢失。 通过服务化迁移,免去了传统的DBA人力成本和硬件成本,并允许按需购买,减低迁移成本。 仅需分钟级就能搭建完成迁移任务,让整个环境搭建“高效快速”。 父主题: MySQL分库分表迁移到DDM