检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
需要配置对应实例的读权限,例如数据库为RDS时,需要在项目上配置RDS ReadOnlyAccess权限。 更新数据加工信息 drs:dataTransformation:update 需要配置对应实例的读权限,例如数据库为RDS时,需要在项目上配置RDS ReadOnlyAccess权限。
在源数据库使用系统管理员用户执行以下语句,或重启数据库实例,使修改生效。 select pg_reload_conf(); 方式二:gs_guc修改 云上数据库,进入沙箱需执行以下命令;自建数据库,source gauss_env_file环境变量文件即可 登录数据库实例任一节点,切换至Ruby用户,su
DRS在创建实例时,可以根据业务需要选择实例所在VPC的子网,DRS在创建完实例后会为用户分配此子网的IP地址,用于连接源数据库和目标数据库。DRS实例与华为云上的源数据库或目标数据库同处一个VPC,通过源数据库、目标数据库或DRS自身的安全组,实现网络访问控制,达到网络隔离的效果。 具体内容请参见创建虚拟私有云和子网。
单节点存在高可用风险,在实际使用过程中,建议至少创建2节点。 DDM关联RDS实例 RDS实例名 rds_ddm01 自定义,易理解可识别。 所属Region 测试Region 选择和自己业务区最近的Region,减少网络时延。 数据库版本 MySQL 5.7 - 实例类型 单机 本示例中为单机。 实
MySQL->TaurusDB实时迁移和同步 全量或增量阶段失败报错,关键词“Illegal mix of collations (utf8mb4_0900_ai_ci,IMPLICIT) and (utf8mb4_general_ci,IMPLICIT) for operation”
ECS自建MySQL迁移到TaurusDB 方案概述 前提条件 资源规划 操作流程 实施步骤 父主题: 实时迁移
操作流程 创建RDS for MySQL实例,并且将RDS for MySQL增量同步到Kafka的主要任务流程如图1所示。 图1 流程图 父主题: RDS for MySQL同步到Kafka
RDS for MySQL迁移到DDM 概述 资源规划 操作流程 源端RDS for MySQL准备 目标端DDM准备 创建和配置VPN网络 创建DRS迁移任务 确认迁移执行结果 父主题: 实时迁移
MySQL->CSS/ES实时同步 增量同步失败报错,关键词“write table *** failed: null” 父主题: 失败案例
超大规格:64 int 是 MySQL->MySQL MySQL->PostgreSQL MySQL->GaussDB分布式版 MySQL->GaussDB集中式版 MySQL->GaussDB(DWS) MySQL->TaurusDB MySQL->Kafka MySQL->CSS/ES
数据备份迁移任务的状态和说明,请参见表1。 表1 备份迁移任务状态和说明 状态 说明 恢复中 正在进行备份文件到目标数据库的迁移任务。 成功 备份文件到目标数据库的迁移任务执行成功。 失败 备份文件到目标数据库的迁移任务执行失败。 预检查失败 校验备份文件存在不可用。 已删除的迁移任务在状态列表中不显示。
操作流程 构建MySQL服务器、购买TaurusDB实例,并且将MySQL服务器数据迁移到TaurusDB实例的整个流程的主要任务流如图1所示。 图1 流程图 父主题: ECS自建MySQL迁移到TaurusDB
操作流程 图1 流程图 父主题: 其他云MySQL迁移到TaurusDB
公共接口管理 批量创建任务 批量测试连接 批量测试连接-集群模式 批量修改任务 批量数据库对象选择 批量预检查 批量查询预检查结果 批量设置任务限速 批量获取数据库参数 修改数据库参数 批量启动任务 批量续传/重试 批量暂停任务 批量结束任务或删除任务 批量修改源库/目标库密码 批量设置definer
PostgreSQL->GaussDB(DWS) 表1 数据类型映射关系 数据类型(PostgreSQL) 数据类型(GaussDB(DWS)) 是否支持映射 SMALLINT SMALLINT 支持 INTEGER INTEGER 支持 BIGINT BIGINT 支持 INTEGER
网络情况 源数据库连接是否成功 目标数据库是否连接成功 父主题: 预检查不通过项修复方法
操作流程 创建RDS for MySQL实例,并且将RDS for MySQL数据同步到DDM的主要任务流程如图1所示。 图1 流程图 父主题: RDS for MySQL迁移到DDM
更新指定任务数据加工规则 获取指定任务数据加工规则更新结果 查询数据加工规则 数据过滤规则校验 获取数据过滤校验结果 采集指定数据库表的列信息 获取指定数据库表列信息 父主题: API v5(公测中)
迁移或同步 背景 由于某些MariaDB的版本把SysDB库作为其系统库(类似于MySQL官方版5.7的sys库),所以DRS默认也将SysDB作为所有MariaDB的系统库来处理(等同于MySQL、information_schema、performance_schema等库)。
目标端Kafka准备 创建Kafka实例 创建Topic 父主题: RDS for MySQL同步到Kafka