检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
分布式版、GaussDB分布式版->GaussDB主备版、GaussDB分布式版->Kafka的任务进行导入。 修改导入文件时模板时,示例内容需要清除,填写为正确的值。 在填写源和目标库实例时,可以只填必须参数,但需要用户自行保证源和目标库的子网是打通的。 导入模板是结合API和
Agent代理服务。 源数据库若开启客户端配置中的“强制协议加密(Force Protocol Encrypton)”,必须同时开启“信任服务器证书(trust server certificate)”,如下图1所示: 图1 查看客户端属性 源数据库对象要求: 源库中不允许存在被禁用的表的聚簇索引,否则会导致同步失败。
MB]。 可能原因 目标库创建索引时,需要的内存大于数据库配置maintenance_work_mem的大小。 解决方案 参考修改实例参数内容,修改目标数据库RDS for PostgreSQL配置参数maintenance_work_mem至合适值。 等待数据库重启生效后,在DRS任务管理页面单击“续传”继续同步。
device)。 可能原因 目标库空间不足导致目标库写入失败。 解决方案 调整目标库空间。 如果为RDS for MySQL,可参考RDS性能调优中的内容,或联系RDS客服调整目标库空间。 如果为自建或其他云MySQL,请联系数据库运维工程师检查并调整目标数据库空间。 调整完成后,在任务列表
full。 可能原因 目标库空间不足导致目标库写入失败。 解决方案 调整目标库空间。 如果为RDS for MySQL,可参考RDS性能调优中的内容,或联系RDS客服调整目标库空间。 如果为自建或其他云MySQL,请联系数据库运维工程师检查并调整目标数据库空间。 调整完成后,在任务列表
源数据库DDM中间件用户名所对应的密码。 SSL安全连接 通过该功能,用户可以选择是否开启对迁移链路的加密。如果开启该功能,需要用户上传SSL CA根证书。 说明: 最大支持上传500KB的证书文件。 如果不启用SSL安全连接,请自行承担数据安全风险。 数据库实例 根据源库实际的分片数据库,填写对应的数据库信息。
MariaDB作为源端。 商用 录制回放 2024年06月 序号 功能名称 功能描述 阶段 相关文档 1 数据对比。 MongoDB支持数据内容。 商用 数据对比 2 实时同步。 将Cassandra同步到GeminiDB Cassandra。 商用 将Cassandra同步到GeminiDB
表,不同表名之间同步数据等。 图3 多对一实时同步 数据订阅 数据订阅是指获取数据库中关键业务的数据变化信息,这类信息常常是下游业务所需要的。数据订阅将其缓存并提供统一的SDK接口,方便下游业务订阅、获取、并消费,从而实现数据库和下游系统解耦,业务流程解耦。 常用场景:Kafka订阅MySQL增量数据。
已成功创建迁移任务。 操作步骤 在“实时迁移管理”界面,选中指定迁移任务,单击任务名称。 在“迁移日志”页签,查看当前迁移任务的日志,可以根据“级别”筛选查看内容。 图1 查看迁移日志 您可查看到日志对应的时间,级别和描述。 除此以外,DRS支持对接云日志服务(Log Tank Service,简称
目标库为只读状态,可能是目标库空间不足引起。 解决方案 调整目标库空间,恢复目标库为正常状态。 如果为RDS for MySQL,可参考RDS性能调优中的内容,或联系RDS客服调整目标库空间。 如果为自建或其他云MySQL,请联系数据库运维工程师检查并调整目标数据库空间。 调整完成后,在任务列表
CTS的详细介绍和开通配置方法,请参见CTS快速入门。 通过云审计服务,您可以记录数据复制服务的相关操作事件,方便您日后的查询、审计和回溯。具体内容请参见支持审计的关键操作列表。 日志 DRS任务日志记录了数据迁移过程中的信息,包含告警、错误和提示等类型的信息。您可以通过查看日志信息,
s_progress)。 暂不支持同步序列值,如果同步的表中存在关联的序列,可以在任务结束后按照GaussDB分布式版为源任务序列值同步中内容,手动同步序列值。 库名、schema名和表名不可以包含/<.>\\'`|\?和!。列名不可以包含"'和.。 数据库用户权限要求 在使用D
SSL安全连接 通过该功能,用户可以选择是否开启对同步链路的加密。如果开启该功能,需要用户上传SSL根证书。 说明: 最大支持上传500KB的证书文件。 仅支持后缀为cer和pem的证书。 如果不启用SSL安全连接,请自行承担数据安全风险。 目标库的数据库用户名和密码,会被系统加密暂存,直至删除该迁移任务后自动清除。
我的配额”。系统进入“服务配额”页面,单击“申请扩大配额”。 图2 申请扩大配额 在“新建工单”页面,根据您的需求,填写相关参数。其中,“问题描述”项请填写需要调整的内容和申请原因。 图3 新建工单 填写完毕后,勾选协议并单击“提交”。 父主题: 产品咨询
复制表,会导致任务失败。 暂不支持同步序列值,如果同步的表中存在关联的序列,可以在任务结束后按照GaussDB分布式版为源任务序列值同步中内容,手动同步序列值。 库名、schema名和表名不可以包含/<.>\\'`|\?和!。列名不可以包含"'和.。 使用导入对象文件选表的方式时
temp_file_limit (20000000kB)]。 可能原因 在执行SQL时生成的临时表较大,超过了系统中临时表空间的上限。 解决方案 参考修改实例参数内容,修改目标库temp_file_limit参数,适当调大该参数的值,增加临时表空间上限。 等待数据库重启生效后,在DRS任务管理页面单击“
表,不同表名之间同步数据等。 图3 多对一实时同步 数据订阅 数据订阅是指获取数据库中关键业务的数据变化信息,这类信息常常是下游业务所需要的。数据订阅将其缓存并提供统一的SDK接口,方便下游业务订阅、获取、并消费,从而实现数据库和下游系统解耦,业务流程解耦。 常用场景:Kafka订阅MySQL增量数据。
公网场景 使用说明 本实践的资源规划仅作为演示,实际业务场景资源以用户实际需求为准。 本实践端到端的数据为测试数据,仅供参考;更多关于DRS使相关内容请单击这里了解。 父主题: 本地Oracle同步到DDM
华为云RDS for MySQL 支持网络 支持公网网络、VPC网络、VPN、专线网络。 仅支持VPC网络,因未开放全网段路由,所以VPC内容器形态网络暂不支持。 数据格式 Avro、JSON和JSON-C SDK 数据类型 全量+增量数据。 仅增量数据。 同步对象 表数据、表结构。
路径参数 参数 是否必选 参数类型 描述 project_id 是 String 租户在某一Region下的Project ID。 获取方法请参见获取项目ID。 job_id 是 String 任务ID。 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 Content-Type