检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
目标库database的字符集与源库要保持一致。 建议目标库database兼容的数据库的类型与源库保持一致。 目标数据库对象要求: 同步前保证目标库已创建好对应的database。 选择增量同步,同步前保证目标库表结构已经建好,且与源端一致;如果进行了列加工,请保证跟列加工后的表结构保持一致。 选择全量或
选择目标库所在VPC和子网,填写Kafka的IP地址和端口。 单击“测试连接”。 当界面显示“测试成功”时表示连接成功。 单击“下一步”。 选择同步信息、策略、消息格式和对象等,投递到Kafka的消息格式。 本次选择如下。 表1 同步设置 类别 设置 同步Topic策略 集中投递到一个Topic,Topic名称“testTopic”。
目标库database的字符集与源库要保持一致。 建议目标库database兼容的数据库的类型与源库保持一致。 目标数据库对象要求: 同步前保证目标库已创建好对应的database。 选择增量同步,同步前保证目标库表结构已经建好,且与源端一致;如果进行了列加工,请保证跟列加工后的表结构保持一致。 选择全量或
如果同步表存在可空的联合唯一约束,由于在GaussDB和Oracle对含null值的约束范围差异,会导致最终数据不一致或任务失败。例如,同步表包含可空的联合唯一约束UNIQUE(C1,C2),在GaussDB可以同时存在多条数据的c1='1'、c2=null,而在Oracle只能存在一条,再插入导致唯一键冲突。
安全组:增加云数据库安全组入方向规则,放通DRS弹性公网IP作为源地址可以访问云数据库监听端口。 网络ACL:VPC默认没有网络ACL,如果您设置过网络ACL,需要增加入方向规则,允许放通DRS弹性公网IP作为源地址、随机端口作为源端口范围,RDS源数据库的IP作为目的地址、监听端口作为目的端口范围。 配置D
请勿修改源数据库表的主键或者唯一键(主键不存在时),否则可能导致增量数据不一致或任务失败。 请勿修改源数据库中表的replica identity属性,否则可能导致增量数据不一致或任务失败。 请勿在目标库做写入操作,否则可能导致数据不一致。 为保证同步任务正常和数据的一致性,如有以上诉求,建议在业务低峰期时重新创建DRS任务。
如果无主键表中包含LOB、LONG等大字段,增量同步阶段存在大字段数据不一致的可能性。 如果表结构存在DB2SECURITYLABEL字段类型,读取全量阶段数据可能会受DB2 LBAC(基于标签的访问控制)影响,导致源库和目标库数据不一致。 如果源库和目标库字符集不一致,如源库是GBK,目标库是UTF8,由于
按表的主键值hash值投递到不同的Partition:适用于一个表一个Topic的场景。 投送到kafka的数据格式 选择投送到kafka的数据格式。 Avro:可以显示Avro二进制编码,高效获取数据。 JSON:为Json消息格式,方便解释格式,但需要占用更多的空间。 JSON-C:一种能够兼容多个批量,流式计算框架的数据格式。
如果无主键表中包含LOB、LONG等大字段,增量同步阶段存在大字段数据不一致的可能性。 如果表结构存在DB2SECURITYLABEL字段类型,读取全量阶段数据可能会受DB2 LBAC(基于标签的访问控制)影响,导致源库和目标库数据不一致。 如果源库和目标库字符集不一致,如源库是GBK,目标库是UTF8,由于
如果无主键表中包含LOB、LONG等大字段,增量同步阶段存在大字段数据不一致的可能性。 如果表结构存在DB2SECURITYLABEL字段类型,读取全量阶段数据可能会受DB2 LBAC(基于标签的访问控制)影响,导致源库和目标库数据不一致。 如果源库和目标库字符集不一致,如源库是GBK,目标库是UTF8,由于
后,如果在创建任务后有数据写入,这些写入的数据会一直同步至目标库中,直到任务结束。下面我们模拟写入另外的数据。 根据本地的Oracle数据库的IP和地址,通过数据库连接工具连接数据库。 执行如下语句,在源库插入一条数据。 我们插入一条“id”为1的数据。 insert into test_info
系统自动更新为正确的IP地址,需要重试任务可继续进行同步。一般情况下,不建议修改IP地址。 全量同步过程中暂停、任务异常续传,目标Kafka中可能会出现重复数据,请使用Kafka数据中的identifier字段进行去重(同一个shardId)。 增量同步过程中,请勿在Kafka
目标端多的列设置固定默认值,且有唯一约束。源端insert多条数据后,同步到目标端后多的列为固定默认值,不符合目标端要求。 其他使用须知: 实时同步过程中,不保证分布式事务的一致性。 实时同步过程中,不支持对源库添加协调节点或数据节点,否则会导致任务失败或数据不一致。 一般情况下,此链路为Or
不支持DDL语句的同步。否则可能导致数据不一致或任务失败。 请勿修改源库中表的REPLICA IDENTITY值,否则可能导致增量数据不一致或任务失败。 请勿在目标库做写入操作,否则可能导致数据不一致。 为保证同步任务正常和数据的一致性,如有以上诉求,建议在业务低峰期时重新创建DRS任务。
无法创建迁移任务。 多对一场景下,创建迁移任务时,目标库读写设置需要跟已有任务设置为一致。 由于无主键表缺乏行的唯一性标志,网络不稳定时涉及少量重试,表数据存在少量不一致的可能性。 对于表中的物理生成列,如果列是根据一个时间类型生成的,会存在此列数据不一致的可能性。 若源库表开启
目标数据库的时区设置必须与源数据库一致。 目标库中需要同步的数据库(用户)具有RESOURCE权限。 操作须知 若专属计算集群不支持4vCPU/8G或以上规格实例,则无法创建同步任务。 数据类型不兼容时,可能引起同步失败。 对于表中的物理生成列,如果列是根据一个时间类型生成的,会存在此列数据不一致的可能性。
导致执行顺序与真实顺序不相同,造成数据错乱)。因此,灾备前请对同一数据进行单元化设计,确保数据单元(可以为库、表、行)一边接读写流量,另一边只能接只读业务,即双主灾备是整体上双主,但微观上数据单元仍然是一边读写,一边只读。常见场景请参见实时灾备异常场景。 在创建DRS任务之前,如
“自定义”未选择任一DDL类型时,默认不同步DDL。 说明: “增量支持DDL”功能目前仅支持白名单用户,需要提交工单申请才能使用。您可以在管理控制台右上角,选择“工单 > 新建工单”,完成工单提交。 一对一、一对多场景:如果业务上认为源和目标应该使用保持严格一致,那么高危类DD
VPN、专线网络。 DRS任务类型 选择DRS任务类型,可选“单AZ”和“双AZ”。 双AZ:一主一备的经典高可用架构,提高了DRS任务的可靠性。双AZ任务创建后,DRS会同时创建一主一备两个子任务,当主AZ任务发生异常,DRS会自动启动备AZ任务继续进行同步,提高同步任务的可靠
检查。如果不使用SCAN IP,可以使用某一节点的VIP,这种情况下DRS日志解析只会在VIP指定的RAC节点上进行。 由于无主键表缺乏行的唯一性标志,网络不稳定时涉及少量重试,表数据存在少量不一致的可能性。 如果源库和目标库字符集不一致,如源库是ZHS16GBK,目标库是UTF