检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
查看同步映射 实时同步映射关系包括对象选择时的库映射、schema映射、表映射和数据加工时的列映射。当同步映射关系配置成功后,启动实时同步任务即可查看同步映射详情。 前提条件 已登录数据复制服务控制台。 操作步骤 在“实时同步管理”界面,选择指定的同步任务,单击任务名称。 页面跳
查询同步映射列表 功能介绍 查询同步映射列表,实时同步映射关系包括对象选择时的库映射、schema映射、表映射和数据加工时的列映射。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。
数据复制服务在进行迁移或同步时,会根据两种不同的数据库类型进行对应的数据类型映射。 本章节根据不同的数据库引擎,提供对应的数据库映射关系列表,方便您在进行数据库迁移或同步的时候参考。 MySQL->PostgreSQL MySQL->GaussDB MySQL->Oracle MySQL->CSS/ES
查看监控指标 操作场景 云服务平台提供的云监控,可以对数据复制服务的实时迁移、实时同步和实时灾备实例(下文简称实例)的运行状态进行日常监控。您可以通过管理控制台,直观地查看实例的各项监控指标。由于监控数据的获取与传输会花费一定时间,因此,云监控显示的是当前时间5~10分钟前的实例
对等连接建立后,需要在本端VPC、对端VPC分别添加对方子网的路由才能通信,详细操作可参考添加VPC对等连接路由。 在添加对等路由时,建议添加网段路由信息。如果添加点对点路由,DRS任务重建后实例IP会发生改变,此时需要重新添加路由,否则会导致网络不通。 创建DRS实例,并获取DRS实例私有IP地址。
对等连接建立后,需要在本端VPC、对端VPC分别添加对方子网的路由才能通信,详细操作可参考添加VPC对等连接路由。 在添加对等路由时,建议添加网段路由信息。如果添加点对点路由,DRS任务重建后实例IP会发生改变,此时需要重新添加路由,否则会导致网络不通。 创建DRS实例,并获取DRS实例私有IP地址。
败时,请先联系目标库运维工程师根据源数据库表结构和日志报错信息在目标库创建对应的表,然后单击任务对应操作列的“续传”,重新提交任务。 查看读写数据性能。单击“监控图表”查看读写数据性能,该图表展示了实时读取源库和写入目标库数据的速率,其单位为MB/s。 图3 性能监控 父主题: 任务管理
设置流速模式后,单击“下一步”。 图3 设置流速模式 查看预检查100%通过,单击“下一步”。 设置参数后,单击“下一步”。 图4 设置参数 单击“启动任务”。 图5 启动任务 查看任务状态为“灾备中”。 对于灾备中的任务,您可通过数据对比功能查看灾备前后数据是否一致。 父主题: 搭建容灾关系
序异常。 排查方法 订阅SDK接口排查:查看SDK接口中参数填写是否准确,详细可查看SDK接口介绍。 网络排查:目前数据订阅仅支持VPC网络,但是不支持VPC内的容器网络。如果客户订阅端运行在容器环境中,因DRS安全原因,未开启全网段路由,因此可能会网络不通无法获取数据。 父主题:
MySQL->GaussDB MySQL->GaussDB B、MYSQL和PG兼容性模式 表1 数据类型映射关系 数据类型(MySQL) 数据类型(GaussDB) 是否支持映射 CHAR CHARACTER 支持,如果源库该类型的字段含有占用超过一个字节的字符,需适当增加目标库该字段的长度。
对等连接建立后,需要在本端VPC、对端VPC分别添加对方子网的路由才能通信,详细操作可参考添加VPC对等连接路由。 在添加对等路由时,建议添加网段路由信息。如果添加点对点路由,DRS任务重建后实例IP会发生改变,此时需要重新添加路由,否则会导致网络不通。 父主题: 网络及安全
在全量同步过程中,DRS展示同步进度和明细,您可以查看具体同步对象的进度,当“对象数目”和“已迁移数目”相等时,表示该对象已经同步完成,可通过“查看详情”查看每个对象的同步进度。增量同步中,“进度明细”将不再显示,您可以使用“同步对比”页签查看一致性情况。 在增量同步过程中,DRS展示增
模板中的对象信息需按照Excel中的格式进行填写,填写的数据库对象名称(例如库名、schema名、表名)不允许包含“<”,“>”,"."和“"”,不支持以空格开头或结尾的对象,且大小写敏感。 配置中的任务,可使用“表级同步”,“库级同步”或“文件导入”三种方式,每次切换新的方式后,当前选择或者导入的数据库对象被清空,需重新选择或导入。
DRS导出任务列表 DRS支持查询和导出详细的任务信息列表,包括任务名称、ID、状态、网络类型、源库和目标库IP地址或域名、端口、告警配置等信息,方便客户从不同维度查看和管理任务。在任务管理界面,选择查询条件,单击右侧的,导出当前的查询结果。 图1 导出任务查询结果 父主题: 通用操作
需要迁移或同步的表,当整模式迁移或同步为false时需要填写。 详情请参见表15。 表15 tables字段数据结构说明 参数 参数类型 描述 sync_type String 该表在实时同步场景下的类型。取值: config:仅当该表作为数据过滤高级设置的关联表时,需要填写,此
处理建议:返回同步设置中,重新选择其他表进行同步,或者修改表映射名称 不通过原因:需要同步的映射表在目标库中不存在。 处理建议:勾选同步表结构以创建库表,或者在目标库中创建对应的表结构,若已创建,请检查规定的映射名称是否正确。 PostgreSQL->PostgreSQL表级同步场景 表5 目标数据库是否存在与源数据库同名的对象
进度,也查看具体迁移对象的迁移进度。当全量迁移进度显示为100%,表示全量迁移已经完成。 查看迁移明细:迁移明细中,您可以查看具体迁移对象的迁移进度,当“对象数目”和“已迁移对象”相等时,表示该对象已经迁移完成,可通过“查看详情”查看每个对象的迁移进度。仅白名单用户该支持功能,您可以通过提交工单的方式进行申请使用。
支持公网网络、VPC网络、VPN、专线网络。 仅支持VPC网络,因未开放全网段路由,所以VPC内容器形态网络暂不支持。 数据格式 Avro、JSON和JSON-C SDK 数据类型 全量+增量数据。 仅增量数据。 同步对象 表数据、表结构。 数据更新和结构更新。 稳定性 有任务告警、监控,任务异常自动重试。
对于需要降权处理的用户和不支持迁移的用户,在备注列的查看详情中会提示具体的原因,您需要单击对应用户备注列的“查看”,确认详情后才可进行下一步操作。如果存在多个需要查看备注详情的用户,您也可以单击“确认所有备注”按钮,一键查看备注信息。 图5 查看备注信息 数据库用户已存在是不支持迁移到目标
据持续性流动,除了可以实现实例级多对一同步(如图3,财务系统、订单系统到报表系统的数据同步)外,还可以通过对象名映射功能,实现库级或者表级数据多对一同步(如图3,财务系统、订单系统中表B的数据到报表系统表B的数据同步)。 图3 多对一实时同步 实例级多对一任务操作流程 创建任务时