检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
单击“购买云服务器”。 配置弹性云服务器参数。 选择通用计算型s6.xlarge.2 4vCPUs |8GiB规格。 选择镜像和磁盘规格。 单击“下一步:网络配置”。 选择在创建VPC和安全组创建的VPC和安全组。 选择购买弹性公网IP,公网带宽选择“按流量计费”,此示例中,带宽大小选20Mbit/s。
部署架构 本示例中,DRS源数据库为华为云RDS for MySQL,目标端为华为云同Region下的分布式消息服务Kafka,通过VPC网络,将源数据库的增量数据同步到目标端,部署架构可参考图1。 图1 同VPC场景 使用说明 本实践的资源规划仅作为演示,实际业务场景资源以用户实际需求为准。
8:源库为空 9:目标库为空 10:源库和目标库都为空 11:源表不存在 12:目标表不存在 13:原表和目标表都不存在 14:源数据库连接失败 15:目标库数据库连接失败 16:源数据库执行SQL超时 17:目标数据库执行SQL超时 18:源数据库执行SQL错误 19:目标数据库执行SQL错误
MongoDB->DDS MongoDB->GeminiDB Mongo 出云 MySQL->MySQL DDS->MongoDB 如果因为非网络原因导致迁移失败,系统默认进行三次自动续传,若三次续传后仍无法恢复,可手动进行续传。 前提条件 已登录数据复制服务控制台。 已成功创建迁移任务。
MongoDB->GeminiDB Mongo 出云 MySQL->MySQL DDS->MongoDB 约束限制 限速模式指的是限制秒级的流量上限,可能因为网络波动原因导致统计值的降低,实际统计的值可能会低于限速值大小。 限速模式只对全量迁移阶段生效,增量迁移阶段不生效。 增量阶段修改限速后,待任务再次进入全量阶段会生效。
CPU百分比。 dst_delay Long 目标库时延。 dst_io String 目标IO。 dst_normal Boolean 目标库连接状态。 dst_offset String 目标库offSet位点。 dst_rps String 目标RPS。 mem_used_inMB
that the postmaster is accepting TCP/IP connections. 可能原因 访问源库或目标库时建立连接失败。 解决方案 请按照如下思路排查: 检查源库或目标库运行状态是否正常。 检查源库或目标库监听端口是否放通了DRS的IP。 公网模式的D
second 如果存在,需要等待长事务结束之后再进行重试。 如果不存在,可在管理控制台右上角,选择“工单 > 新建工单”,联系DRS客服调大DRS的连接超时参数来解决。 父主题: GaussDB为源实时同步
second 如果存在,需要等待长事务结束之后再进行重试。 如果不存在,可在管理控制台右上角,选择“工单 > 新建工单”,联系DRS客服调大DRS的连接超时参数来解决。 父主题: PostgreSQL->PostgreSQL实时同步
暂停任务时,仅暂停增量数据的回放、或者拉取加回放,在进行数据库割接前,请先结束任务。 勾选“暂停日志抓取”后,该功能会停止一切DRS和源库、目标库的连接,请注意暂停过长可能会因为源端所需日志过期而导致任务无法恢复续传。建议暂停时间不超过24小时,具体时间请排查相应日志配置。 暂停成功后,状态栏显示为“已暂停”。
障时,可以倒换至备AZ的实例,继续提供数据复制服务。 数据加密传输 公网、VPN、专线、VPC自建模式的DRS实例,提供了可选的加密传输的连接方式,给数据复制带来更好的安全性。 数据永久删除 当删除DRS实例时,实例的计算及存储资源将被回收,同时DRS实例上所有的运行数据均被删除
protocol。 PLAINTEXT:无安全认证方式,仅需输入IP和端口进行连接。 SASL_PLAINTEXT:使用SASL机制连接Kafka,需要设置SASL相关配置。 SSL:使用SSL加密方式连接Kafka,需要设置SSL相关配置。 SASL_SSL:使用SASL及SSL
时延 = 源库当前系统时间 - 成功同步到目标库的最新一个事务在源库的提交成功时间。 一个事务同步的完整过程如下: 源端数据库的抽取; 经过网络的传输; 由DRS进行日志解析; 最终在目标数据库上的执行完成。 这样完成了事务从源到目标的同步,时延为该事务最后在目标数据库上执行完成时
道。这些订阅任务订阅的RDS实例均为同一个实例ID。 一个下游SDK不可以订阅消费多个订阅任务。 目前支持VPC网络,但是不支持VPC内的容器网络。 由于源库异常、网络中断等造成的DRS订阅任务异常,需要在数据订阅界面续传订阅任务,详细参考续传订阅任务。 由于订阅任务当前存在较多
增量状态暂停任务时,仅暂停增量数据的回放、或者拉取加回放,在进行数据库割接前,请先结束任务。 勾选“暂停日志抓取”后,该功能会停止一切DRS和源库、目标库的连接,请注意暂停过长可能会因为源端所需日志过期而导致任务无法恢复续传。建议暂停时间不超过24小时,具体时间请排查相应日志配置。 暂停成功后,状态栏显示为“已暂停”。
SDK中指定消费位点。 修改时选择的时间消费点必须在订阅任务的时间范围内。 操作步骤 停止SDK消费进程。 在修改消费位点之前,需要先确保连接这个订阅通道的所有SDK下游都停掉。 在“数据订阅管理”页面,选择需要修改消费时间点的订阅任务,单击“消费时间点”操作列的“修改”按钮。 图1
由于普通用户没有执行execute direct操作的权限,删除流复制槽需要联系GaussDB运维人员执行以下操作。 操作步骤 使用DRS同步任务测试连接时的用户登录GaussDB主备版实例。 执行如下语句,查询同步任务选择的database对象所对应的流复制槽名称。 select slot_name
Redis集群到GeminiDB Redis迁移场景填写,连接源端Redis集群的子任务个数,输入值在1到16之间,且输入值不能大于源端Redis集群的分片个数,请根据源端Redis集群的规模合理选择。建议集群的每4个分片设置1个源端分片个数,即每1个子任务连接源端集群的4个分片。 最小值:1 最大值:16
Redis集群到GeminiDB Redis迁移场景填写,连接源端Redis集群的子任务个数,输入值在1到16之间,且输入值不能大于源端Redis集群的分片个数,请根据源端Redis集群的规模合理选择。建议集群的每4个分片设置1个源端分片个数,即每1个子任务连接源端集群的4个分片。 最小值:1 最大值:16
/mysql/install/mysql-8.0.22/bin/mysqld --defaults-file= /etc/my.cnf & 执行如下命令,连接MySQL。 /mysql/install/mysql-8.0.22/bin/mysql 执行如下命令,创建root用户并授权。 grant