检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
辑的表。 MySQL->GaussDB(for MySQL)同步,单表的列数超过500时, 对该表添加附加列可能会超过列数上限,会导致任务失败。 如果使用serverName@database@table作为附加列,后续在进行数据对比时,目标端将默认使用该附加列作为行比对、内容比对的隐含过滤条件。
Oracle为源库的迁移、同步场景 表1 源库约束完整性检查 预检查项 源库约束完整性检查。 描述 源库约束完整性检查,若不符合迁移要求,则导致迁移失败。 待确认提示及处理建议 不通过原因:需要迁移的表中含有依赖,但是被依赖的表没有被迁移。 处理建议:在对象选择中添加这些表。 不通过原因:迁移列表中含有不允许迁移的视图。
读写:目标数据库可以读写,但需要避免操作或接入应用后会更改迁移中的数据(注意:无业务的程序常常也有微量的数据操作),进而形成数据冲突、任务故障、且无法修复续传,充分了解要点后可选择此选项。 只读保护优点是避免用户对正在迁移的数据库或表进行DDL或DML误操作,造成数据不一致,可提高迁移完整性和数据一致性。
源库和目标库数据库固定集合一致性检查 预检查项 源库和目标库数据库固定集合一致性检查。 描述 检查源库和目标库数据库固定集合是否一致,若不一致,则导致迁移失败。 不通过提示及处理建议 不通过原因:源数据库的集合是固定集合,但是目标数据库存在和源库固定集合名称相同的集合。 处理建议:为了保证数据的
检查源库Oracle与目标库DDM中间件表结构(包括列数,主键索引)是否对齐。 不通过提示及处理建议 不通过原因:目标库的冗余列(源库中不存在的列)不能存在非空约束,否则会导致数据迁移因为非空约束而阻塞。 处理建议: 检查目标库中的冗余列的非空约束: DESC [table_name]; 修改冗余列的非空约束参考:
根据需要您可以提供的API对数据复制任务进行相关操作。 开发文档 API概述 SDK参考 08 修复 提供数据复制服务常见预检查不通过修复方法,以及任务运行过程中常见失败场景处理方法。 常见预检查项不通过修复方法 源数据库连接是否成功 目标数据库是否连接成功 源数据库用户权限是否足够 目标数据库用户权限是否足够
值的hash值自定义message key,消费者可以并行从各分区获取数据。 按库名-schema-表名自动生成Topic名字: 如果每张表数据量都非常大,建议选择自动生成Topic名字,按库名-schema-表名确定一个Topic。 全部投递到Partition 0 适用于有事
容对比的表可以使用行数对比功能。所以数据级对比功能需要结合业务场景,选用行数对比或者内容对比。 DRS进行内容比对期间不能暂停DRS任务,否则可能导致比对任务失败。 部分数据类型不支持内容对比,详情参考内容对比不支持哪些数据类型。 为避免占用资源,DRS对行对比的时长进行限制,超
当前区域对应的项目,可进行切换。 任务名称 任务名称在4到50位之间,必须以字母开头,可以包含字母、数字、中划线或下划线,不能包含其他的特殊字符。 描述 描述不能超过256位,且不能包含! = < > & ' " \ 特殊字符。 图2 订阅源信息 表4 订阅源信息 参数 描述 实例类型 选择RDS实例。
MySQL)、MySQL->Kafka、MySQL->CSS/ES、MySQL->Oracle的实时同步任务使用。 任务状态为配置中、全量中、增量中、全量失败、增量失败、暂停中的实时同步任务使用。 URI GET /v5/{project_id}/jobs/{job_id}/configurations
目标端产生Binlog日志文件,占用部分磁盘空间,导致目标数据库磁盘空间使用量大于源数据库磁盘空间使用量。 解决方法 磁盘空间使用量的大小不能判断迁移前后数据是否一致,可使用DRS的数据对比功能,对比源数据库和目标数据库迁移前后数据是否一致。 父主题: 产品咨询
当前区域对应的项目,可进行切换。 任务名称 任务名称在4到50位之间,必须以字母开头,可以包含字母、数字、中划线或下划线,不能包含其他的特殊字符。 描述 描述不能超过256位,且不能包含! = < > & ' " \ 特殊字符。 在“创建连接信息”页面的“连接信息”区域,选择数据库引擎和网络
小写存储。当源库和目标数据库的lower_case_table_names参数不一致时,若存在以大写字母形式创建的库或者表,可能会导致任务失败。 不通过原因 源数据库和目标数据库lower_case_table_names参数设置不一致。 处理建议 如果数据库为云上RDS for
DRS导出任务列表 已结束的任务还能重新启动吗 重置任务和重新创建任务有什么区别 DRS支持一键反向功能吗 已经创建的SMN主题为什么选择不了 任务创建成功后是否支持修改SMN主题 DDM为源链路源库分片数量和信息怎么填写 源端MySQL发生主备倒换,DRS任务会丢数据吗 DRS
使用SSL加密方式连接Kafka,需要设置SSL相关配置。 图3 SSL 表2 参数信息 参数 描述 Truststore证书 后缀名为jks的SSL证书,证书文件生成可参考SSL证书。 Truststore证书密码 证书对应的秘钥。 主机名端点识别算法 指定通过服务端证书验证服务端主机名的端点识别算法,选填,不填表示禁用主机名验证。
String 对比任务的状态。 RUNNING-运行中 WAITING_FOR_RUNNING-等待启动中 SUCCESSFUL-完成 FAILED-失败 CANCELLED-已取消 TIMEOUT_INTERRUPT-超时中断 FULL_DOING-全量校验中 INCRE_DOING-增量校验中
查询记录数,默认为1000,limit最多为1000,不能为负数,最小值为1。 offset 否 Integer 索引位置,偏移量从第一条数据偏移offset条数据后开始查询,默认为0(偏移0条数据,表示从第一条数据开始查询),必须为数字,不能为负数。 请求参数 表3 请求Header参数
根据业务需求选择“时段限流”。自定义的时段限流支持最多设置10个定时任务,每个定时任务之间不能存在交叉的时间段,未设定在限速时间段的时间默认为不限速。 流速的大小需要根据业务场景来设置,不能超过9999MB/s。 图2 设置流速模式 不限速 对迁移速度不进行限制,通常会最大化使用
sleep(1000); } 如果返回结果是waiting,则表示当前Balancer正在执行块(chunk)迁移,此时不能执行关闭Balancer的命令,否则可能引起数据不一致。 图1 查看输出结果 如果返回结果是空,则表示当前Balancer没有在进行块(c
写不同的列转为小写,或删除源数据库表中多余的列。 待确认原因:源端表的主键列和目标端表的主键列存在不一致问题。主键列不一致,可能会导致同步失败或者数据不一致。 处理建议:改目标端表的主键,和源端表的主键列保持一致。 参考命令: alter table table_name add