检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
RDS for MySQL同步到Kafka 概述 资源和成本规划 操作流程 创建VPC和安全组 源端RDS for MySQL准备 目标端Kafka准备 创建DRS同步任务 确认同步任务执行结果 父主题: 实时同步
修改流速模式 流速模式支持限速和不限速,默认为不限速。DRS提供创建任务后修改流速模式功能,目前仅以下实时灾备链路支持该功能。 MySQL->MySQL MySQL->TaurusDB DDM->DDM TaurusDB->TaurusDB 约束限制 限速模式指的是限制秒级的流量
修改任务信息 回放任务创建成功后,支持对部分任务基本信息进行修改,以方便区分和识别回放任务。 支持可修改的任务信息如下: 任务名称 描述 SMN主题 任务异常结束天数 任务启动时间 前提条件 已登录数据复制服务控制台。 操作步骤 在“录制回放管理”页面,选择指定的回放任务,单击任务名称。
结束回放任务 录制回放完成后,可选择结束回放任务。如下状态下的任务可以结束: 创建中 配置 等待启动 启动中 启动失败 解析中 回放中 回放失败 回放完成 对于“配置”状态的任务,配置失败的任务无法结束。 任务结束后无法重新启动。 操作步骤 在“录制回放管理”页面的任务列表中,选择要结束的任务,单击“结束”。
删除回放任务 对于已结束或者配置失败的录制回放任务,您可选择删除回放任务。被删除后的任务将不会再出现在任务列表中,请谨慎操作。 前提条件 已登录数据复制服务控制台。 删除任务 在“录制回放管理”页面的任务列表中,选择要删除的任务,单击“删除”。 单击“是”,提交删除任务。 批量删除
暂停回放任务 DRS提供对回放中的任务进行暂停功能。 前提条件 已登录数据复制服务控制台。 暂停任务 在“录制回放管理”页面的任务列表中,选择要暂停的任务,单击“操作 > 暂停”。 在弹出的“暂停任务”对话框中,单击“是”。 暂停成功后,状态栏显示为“已暂停”。 父主题: 任务生命周期
解析失败,提示OBS连接失败 操作场景 客户创建入云录制回放任务时,通过AK/SK获取OBS桶内流量文件,任务解析流量文件失败,提示OBS连接失败。 图1 解析失败 问题分析 针对该情况分析,可能存在如下原因。 AK、SK、桶名或终端节点等信息填写错误。 没有对应OBS桶文件的读取权限。
双AZ任务倒换 DRS实时同步任务在创建时可选择任务类型为“双AZ”或“单AZ”。双AZ任务为一主一备的经典高可用架构,在任务创建后,DRS会同时创建一主一备两个子任务,当主AZ任务发生异常,DRS会自动启动备AZ任务继续进行同步,提高同步任务的可靠性。 DRS目前支持以下链路在创建时进行任务类型的选择:
跳跃续传同步任务 实时同步中可能因外部因素需要暂时停止同步,用户在解决问题后,可以通过跳跃续传功能跳过暂停时间段的数据继续同步。目前仅DDM->Oracle的增量同步阶段,支持跳跃续传功能。 前提条件 已登录数据复制服务控制台。 任务状态为暂停。 操作步骤 在“实时同步管理”页面
双向同步任务倒换 双向同步中,为了防止DDL回环,只有正向任务支持DDL,反向不支持DDL。针对该特点,DRS提供修改任务方向功能,用户可使用此功能调换任务角色,实现反向的DDL。 约束限制 仅支持双向同步任务进行方向转换。 正向、反向任务均为暂停状态时,才能进行方向转换。 方向转换后,需要续传任务使转换生效。
创建用户并授权使用DRS 如果您需要对您所拥有的DRS进行精细的权限管理,您可以通过企业管理或统一身份认证服务(Identity and Access Management,简称IAM)实现。 通过企业管理实现的具体操作,请您参考项目管理。 通过IAM实现的具体操作,您可以: 根
操作流程 创建RDS for MySQL实例,并且将RDS for MySQL增量同步到Kafka的主要任务流程如图1所示。 图1 流程图 父主题: RDS for MySQL同步到Kafka
删除迁移任务 对于已结束或者配置失败的任务,您可选择删除迁移任务。被删除后的任务将不会再出现在任务列表中,请谨慎操作。 前提条件 已登录数据复制服务控制台。 已结束或者配置失败的迁移任务。 删除任务 在“实时迁移管理”页面的迁移列表中,选择需要删除的任务,单击操作列“删除”按钮。
续传迁移任务 迁移中可能因外部因素导致迁移暂时故障,用户根据迁移日志信息解决问题后,可以通过续传功能继续迁移,常见场景如存储空间不足。 对于以下状态的任务,可以通过续传功能继续迁移任务。 迁移失败 已暂停 目前以下迁移链路支持续传功能: 入云 MySQL->MySQL MySQL->TaurusDB
修改流速模式 流速模式支持限速和不限速,默认为不限速。DRS提供创建任务后修改流速模式功能,目前仅以下实时迁移链路支持该功能。 入云 MySQL->MySQL MySQL->TaurusDB MySQL->DDM MySQL分库分表->DDM MongoDB->DDS MongoDB->GeminiDB
注册华为账号并开通华为云 在使用华为云服务之前您需要注册华为账号并开通华为云。通过此账号,只需为使用的服务付费,即可使用所有华为云服务。 进入华为云官网,参考注册华为账号并开通华为云指导及界面提示信息,完成账号注册。 注册成功后即可自动登录华为云,您需要完成“实名认证”才可以正常
查看任务详情 录制回放任务的配置信息,包括任务信息、连接信息、对象信息和任务控制信息,在任务创建启动后,均可在任务基本信息页面查看 。 前提条件 已登录数据复制服务控制台。 操作步骤 任务列表中,仅展示当前登录用户所创建的全部任务,同一租户下的不同用户之间的任务不可见。 在“录制
修改同步模式 DRS支持在任务创建后修改同步任务模式。 约束限制 至少同时支持全量+增量和单增量两种模式的任务支持修改任务模式。 支持单增量到全量+增量、全量+增量到单增量的修改方式。 支持状态为配置中、增量中、增量失败的任务进行修改。 任务启动后,不支持再编辑的任务不支持修改。
删除同步任务 对于已结束或者配置失败的实时同步任务,您可选择删除同步任务。被删除后的任务将不会再出现在任务列表中,请谨慎操作。 前提条件 已登录数据复制服务控制台。 删除任务 在“实时同步管理”页面的任务列表中,选择要删除的任务,单击“删除”。 单击“是”,提交删除任务。 批量删除
续传同步任务 实时同步中可能因外部因素导致同步暂时故障,用户根据同步日志信息解决问题后,可以通过续传功能继续同步,常见场景如存储空间不足。 对于以下状态的任务,可以通过续传功能继续同步任务。 同步失败 已暂停 如果因为非网络原因导致同步失败,系统默认进行三次自动续传,若三次续传后仍无法恢复,可手动进行续传。