将PostgreSQL同步到Kafka 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 RDS for PostgreSQL 9.5、9.6、10、11、12、13、14、15、16版本 Kafka 0.11及以上版本 支持的同步对象范围 在使用DRS进行同步时,
将GaussDB集中式版同步到Kafka 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 GaussDB集中式版(版本数据库内核版本为505.2及以下版本,内核版本与数据库发布版本对应关系。) Kafka 0.11及以上版本 支持的同步对象范围 在使用DRS进行同
日的23:59:59。 DRS任务从创建到启动需要一定时长,计费的起点是启动的时间点,而非创建时间。您可以在DRS任务详情页“基本信息”页签查看这两个时间。 例如,如果您在2023/03/08 15:50:04购买并启动了时长为一个月的DRS任务,那么其计费周期为:2023/03/08
终点以结束时间为准。 DRS任务从创建到启动需要一定时长,计费的起点是启动的时间点,而非创建时间。您可以在DRS任务详情页“基本信息”页签查看这两个时间。 例如,您在8:40:00创建了一个按需计费的DRS同步任务,并于8:45:30启动任务,然后在8:55:30将其结束,则计费周期为8:00:00
将GaussDB集中式版同步到Kafka 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 GaussDB集中式版(版本数据库内核版本为505.2及以下版本,内核版本与数据库发布版本对应关系。) Kafka 0.11及以上版本 支持的同步对象范围 在使用DRS进行同
将TaurusDB同步到Kafka 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 TaurusDB企业版、标准版 Kafka 使用建议 DRS任务启动和全量数据同步阶段,请不要在源数据库执行DDL操作,否则可能导致任务异常。 为保证同步前后数据一致性,确保同步期间目标数据库无业务写入。
同步对象依赖和关联的对象也须一起同步,否则可能导致同步失败。 说明: 常见的关联关系:主外键关联表、表继承子表引用父表、表分区子分区表引用分区表、表自增列引用序列等。 目标数据库参数要求: 目标数据库参数max_prepared_transactions须大于源数据库。 目标数据库参数ma
同步对象依赖和关联的对象也须一起同步,否则可能导致同步失败。 说明: 常见的关联关系:视图引用表、视图引用视图、主外键关联表、表继承子表引用父表、表分区子分区表引用分区表、表自增列引用序列等。 目标数据库参数要求: 目标数据库参数max_prepared_transactions须大于源数据库。 目标数据库参数ma
将GaussDB分布式版同步到Kafka 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 GaussDB分布式(版本数据库内核版本为505.2及以下版本,内核版本与数据库发布版本对应关系。。) Kafka 0.11及以上版本 支持的同步对象范围 在使用DRS进行同
将GaussDB分布式版同步到Kafka 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 GaussDB分布式(版本数据库内核版本为505.2及以下版本,内核版本与数据库发布版本对应关系。。) Kafka 0.11及以上版本 支持的同步对象范围 在使用DRS进行同
最小长度:12 最大长度:12 error_msg String 错误描述。 最小长度:1 最大长度:512 请求示例 查询已同步的对象信息。 https://{endpoint}/v5/054ba152d480d55b2f5dc0069e7ddef0/jobs/c7debc9c-8e09
在“实时同步管理”页面任务列表中,选择需要查看数据加工的任务,单击任务名称。 选择“数据加工”页签,查看数据过滤记录。单击右上角的,可刷新数据。 查看列加工 在“实时同步管理”页面任务列表中,选择需要查看的任务,单击任务名称。 选择“同步映射”页签,单击右上角选择列映射,查看列映射记录。单击右上角的,可刷新数据。
的使用建议。 源数据库同步的表如果有AUTO_INCREMENT属性,结束任务时,DRS会自动刷新同步表的序列整型列所对应的GaussDB自增列(sequence)起始值,刷新值为该列的最大值+10000。 操作步骤 本小节以RDS for MySQL到GaussDB(DWS)多
实时同步 实时同步是指在不同的系统之间,将数据通过同步技术从一个数据源拷贝到其他数据库,并保持一致,实现关键业务的数据实时流动。实时同步不同于迁移,迁移是以整体数据库搬迁为目的,而实时同步是维持不同业务之间的数据持续性流动。 目前部分功能仅支持白名单用户使用,需要提交工单申请才能
Server实例管理的参数组中进行修改。 图7 查看本地实例最大并行度值 登录RDS控制台,在实例管理页,单击目标实例名称,进入基本信息页签,切换至“参数修改”,搜索最大并行度(max degree of parallelism)并进行修改。 图8 修改目标RDS for SQL
Server实例管理的参数组中进行修改。 图7 查看本地实例最大并行度值 登录本云实例控制台,在实例管理页,单击目标实例名称,进入基本信息页签,切换至“参数修改”,搜索最大并行度(max degree of parallelism)并进行修改。 图8 修改目标RDS for SQL
当Kafka实例运行状态为“运行中”时,表示实例创建完成。 创建Kafka的Topic 在“Kafka专享版”页面,单击Kafka实例的名称。 选择“Topic管理”页签,单击“创建Topic”。 在弹出的“创建Topic”的对话框中,填写Topic名称和配置信息,单击“确定”,完成创建Topic。 创建DRS同步任务
将GaussDB集中式版同步到PostgreSQL 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 GaussDB集中式版(PG、A兼容模式。版本数据库内核版本为505.2及以下版本,内核版本与数据库发布版本对应关系。) 本地自建数据库(PostgreSQL 9.5、9
Server实例管理的参数组中进行修改。 图9 查看本地实例最大并行度值 登录本云实例控制台,在实例管理页,单击目标实例名称,进入基本信息页签,切换至“参数修改”,搜索最大并行度(max degree of parallelism)并进行修改。 图10 修改目标RDS for SQL
当Kafka实例运行状态为“运行中”时,表示实例创建完成。 创建Kafka的Topic 在“Kafka专享版”页面,单击Kafka实例的名称。 选择“Topic管理”页签,单击“创建Topic”。 在弹出的“创建Topic”的对话框中,填写Topic名称和配置信息,单击“确定”,完成创建Topic。 创建DRS同步任务
您即将访问非华为云网站,请注意账号财产安全