检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
drs:userGuide:list 无。 查询预定义标签 - 查询预定义标签需要配置: tms:resourceTags:list 查询配置日志组 - 查询配置日志组需要配置: lts:groups:get 查询配置日志流 - 查询配置日志流需要配置: lts:topics:get 获取实时同步任务列表
<version>1.0</version> </dependency> 参数配置 数据订阅过程中,部分参数会影响拉取数据的速度和间隔。 在启动SDK之前,您可以根据需要在“subscribe.properties”的配置文件中,对以下参数进行设置: # 获取订阅数据初始延时 MESSAGE_DELAY_TIME
SASL_PLAINTEXT:使用SASL机制连接Kafka,需要设置SASL相关配置。 SSL:使用SSL加密方式连接Kafka,需要设置SSL相关配置。 SASL_SSL:使用SASL及SSL加密认证方式,需要设置SSL及SASL相关参数配置信息。 枚举值: PLAINTEXT SASL_PLAINTEXT
SASL_PLAINTEXT:使用SASL机制连接Kafka,需要设置SASL相关配置。 SSL:使用SSL加密方式连接Kafka,需要设置SSL相关配置。 SASL_SSL:使用SASL及SSL加密认证方式,需要设置SSL及SASL相关参数配置信息。 枚举值: PLAINTEXT SASL_PLAINTEXT
MongoDB抽样方法采用MongoDB提供的$sample命令进行数据抽样:{ $sample: { size: <positive integer N> } }。 其中size为设置的固定值1000,DRS提供的MongoDB抽样对比实际为多次执行$sample命令,直到抽样的数据量达到用户指定的抽样比例。
选择需要同步的DML操作,默认都勾选。 不勾选Delete则不会同步源库增量数据中的Delete语句,可能会导致数据不一致,因此存在数据冲突或任务失败的风险。 分片配置 配置主分片数和分片副本数,主分片数默认为5,分片副本数默认为1。 时区 选择时区后,datetime类型的数据同步到CSS/ES,会带上所选的时区。
ct_mode参数,使其保持一致。 如果为自建的MySQL数据库,可通过命令行方式修改。 通过以下命令查看参数值。 SHOW VARIABLES LIKE "innodb_strict_mode"; 使用命令修改参数。 SET GLOBAL innodb_strict_mode =
并确保相关配置正确后上传SSL证书。 说明: 最大支持上传500KB的证书文件。 如果不启用SSL安全连接,请自行承担数据安全风险。 目标数据库用户名和密码将在回放过程中被加密暂存到DRS实例主机上,待该任务删除后会永久清除。 任务配置 图8 任务配置 表10 任务配置信息 参数
并确保相关配置正确后上传SSL证书。 说明: 最大支持上传500KB的证书文件。 如果不启用SSL安全连接,请自行承担数据安全风险。 目标数据库用户名和密码将在回放过程中被加密暂存到DRS实例主机上,待该任务删除后会永久清除。 任务配置 图7 任务配置 表9 任务配置信息 参数 描述
开通自动续费后,还可以手动续费该DRS任务。手动续费后,自动续费仍然有效,在新的到期时间前的第7天开始扣款。 自动续费的到期前7日自动扣款属于系统默认配置,您也可以根据需要修改此扣款日,如到期前6日、到期前5日等等。 更多关于自动续费的规则介绍请参见自动续费规则说明。 前提条件 请确认包年/包月DRS任务还未到期。
MySQL的迁移为示例,介绍在VPC网络场景下,通过数据复制服务管理控制台配置数据迁移任务的流程,其他存储引擎的配置流程类似。 VPC网络适合云上同Region数据库之间的迁移。 在数据复制服务中,数据库迁移是通过任务的形式完成的,通过创建任务向导,可以完成任务信息配置、任务创建。迁移任务创建成功后,您也可以通
由于影响迁移时长的因素很多,因此没有通用的计算方式能准确的计算迁移耗时,用户可先参考实时同步链路规格说明进行评估。建议用户先使用和待迁移实例相同规格、负载、网络配置、数据模型的环境创建测试任务,以评估迁移时长。 迁移速度提升 全量: 如果受限于跟源库或目标库的网络带宽限制,需要扩大带宽; 源端负载不高的情况下,可以增加读和写的并发数;
数据迁移到华为云RDS for MySQL的操作配置流程。 其他云MySQL迁移到GaussDB(for MySQL) 本实践介绍通过公网网络,使用DRS将其他云的MySQL数据迁移到华为云GaussDB(for MySQL)的配置流程。 其他云MongoDB迁移到DDS 本实践
数据迁移到华为云RDS for MySQL的操作配置流程。 其他云MySQL迁移到GaussDB(for MySQL) 本实践介绍通过公网网络,使用DRS将其他云的MySQL数据迁移到华为云GaussDB(for MySQL)的配置流程。 其他云MongoDB迁移到DDS 本实践
DRS的产品架构以及功能原理如下图所示: 图1 DRS产品架构 架构说明 最小权限设计 采用JDBC连接,无需在用户的源数据库、目标数据库节点部署程序。 任务独立虚拟机运行独享资源,租户之间数据隔离。 采用最小IP资源,在源数据库、目标数据库仅开放DRS数据迁移实例节点IP访问权限,无需增加网段。
MySQL的灾备场景为示例,介绍在公网网络场景下,通过数据复制服务管理控制台配置数据灾备任务的流程,其他存储引擎的配置流程类似。 在数据复制服务中,数据库灾备是通过任务的形式完成的,通过创建任务,可以完成任务信息配置、任务创建。灾备任务创建成功后,您也可以通过数据复制服务管理控制台,对任务进行管理。
目标数据库用户名对应的密码。 目标数据库用户名和密码将在回放过程中被加密暂存到DRS实例主机上,待该任务删除后会永久清除。 任务配置 图7 任务配置 表9 任务配置信息 参数 描述 SQL类型配置 选择回放到目标数据库SQL类型,默认选择SELECT,可选SELECT、INSERT、UPDATE、DELETE、DDL。
目标数据库用户名对应的密码。 目标数据库用户名和密码将在回放过程中被加密暂存到DRS实例主机上,待该任务删除后会永久清除。 任务配置 图8 任务配置 表10 任务配置信息 参数 描述 SQL类型配置 选择回放到目标数据库SQL类型,默认选择SELECT,可选SELECT、INSERT、UPDATE、DELETE、DDL。
目标数据库用户名对应的密码。 目标数据库用户名和密码将在回放过程中被加密暂存到DRS实例主机上,待该任务删除后会永久清除。 任务配置 图8 任务配置 表10 任务配置信息 参数 描述 SQL类型配置 选择回放到目标数据库SQL类型,默认选择SELECT,可选SELECT、INSERT、UPDATE、DELETE、DDL。
目标数据库为PostgreSQL,数据库配置文件pg_hba.conf缺少对数据库账号的配置,建议配置该账号的远程连接权限。 打开配置文件pg_hba.conf,添加如下配置,重启数据库生效。 host all xxx(dbuser) 0.0.0.0/0 method 完成DRS任务之后删除这条配置,重启数据库生效。