检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
概述 对象存储迁移服务(OMS)的原理主要基于数据复制、同步和传输技术的综合运用,旨在帮助用户高效、安全地将其他云服务商对象存储服务中的数据在线迁移至华为云OBS。 父主题: 迁移工作原理
迁移流程 对象存储迁移服务 OMS的迁移工作原理图,如图1所示。 图1 迁移工作原理图 迁移工作流程说明: OMS服务请求获取一定数量的源端对象列表。 源端响应对象列表。 OMS服务请求获取源端对象元数据。 源端响应对象元数据。 OMS服务请求获取目的端对象元数据。 目的端响应对象元数据。
和其他服务的关系 对象存储迁移服务与其他服务的关系如表1所示。 表1 与其他服务的关系 相关服务 交互功能 位置 对象存储服务(Object Storage Service,OBS) 将源端对象数据迁移至华为云创建的OBS桶中。 创建单个迁移任务 创建迁移任务组 数据加密服务(Data
个人数据保护机制 为了确保您的个人数据(源端AK、源端SK、源端CDN密钥、目的端AK、目的端SK)不被未经过认证、授权的实体或者个人获取,对象存储迁移服务系统通过加密存储个人数据、控制个人数据访问权限以及记录操作日志等方法防止个人数据泄露,保证您的个人数据安全。 收集范围 对象存储迁移服务收集的个人数据如表1所示:
数据迁移 根据迁移配置,华为云OMS服务会开始从源端存储系统拉取数据。同时,服务会确保数据的完整性和一致性,避免在迁移过程中出现数据丢失或损坏的情况。服务还支持断点续传功能,当迁移过程中出现网络中断或其他异常情况时,服务可以从断点处恢复传输,确保数据的完整性和迁移的连续性。 父主题:
迁移任务组 适用场景 适用于单个桶数据量大于3 TB或对象个数大于500万的对象迁移场景,迁移任务组将源端待迁移对象智能分解到多个迁移任务中并行迁移。 支持的源端云服务商和数据类型 迁移任务支持的源端云服务商和数据类型包括: 华为云 亚马逊云(中国) 阿里云 微软云 腾讯云 谷歌云
数据识别与准备 在迁移开始前,华为云OMS服务会先对源端存储系统中的数据进行识别,包括对象大小、最后修改时间以及位置等关键信息。基于这些信息,服务会为用户生成一个对应的迁移任务配置,确保迁移过程的高效性和准确性。 父主题: 迁移工作原理
身份认证与访问控制 身份认证 用户访问OMS的方式包括:OMS控制台、API、SDK,无论哪种访问方式,其本质都是通过OMS提供的REST风格的API接口进行请求。 OMS的接口支持认证请求,经过认证的请求需要包含一个签名值,该签名值以请求者的访问密钥(AK/SK)作为加密因子,
什么是对象存储迁移服务 对象存储迁移服务(Object Storage Migration Service,OMS)是一种线上数据迁移服务,帮助您将其他云服务商对象存储服务中的数据在线迁移至华为云的对象存储服务(Object Storage Service,OBS)中。 目前支持
支持迁移单桶数据,不支持批量桶迁移。 如果涉及到多桶数据迁移,推荐使用华为云迁移中心MgC,创建存储迁移工作流进行批量桶迁移。 父主题: 产品咨询
OMS不支持同步源端删除操作。 您可以通过脚本列举目的端对象,基于列举结果排查源端删除对象是否存在。若源端删除对象存在于列举结果中,请自行删除。 父主题: 产品咨询
迁移对象。 输入的指定时间不能大于迁移任务开始执行时间,否则会导致迁移对象数量为0。 具体请参见创建迁移任务和创建迁移任务组。 父主题: 产品咨询
OMS如何迁移指定文件后缀的文件? OMS不支持迁移指定文件后缀的文件。 OMS支持指定对象前缀的文件,具体请参见创建迁移任务和创建迁移任务组。 父主题: 产品咨询
iled_object_lists/时间戳.failed_list.txt。 失败对象列表错误码详细说明参见查看失败对象列表。 父主题: 产品咨询
failed_object_lists/同步子任务名称/时间戳.failed_list.txt。 失败对象列表错误码详细说明参见查看失败对象列表。 父主题: 产品咨询
OMS同步任务不支持指定时间段。 OMS同步任务是通过函数工作流触发同步任务,当源端对象新增/修改时,OMS会做及时同步,因此没有设计指定时间段同步。 父主题: 产品咨询
0万个,推荐您创建迁移任务组进行迁移。系统会根据桶内对象的存量和数量分布,自动划分为多个迁移任务,提高迁移效率、减少迁移时间。 父主题: 产品咨询
数据安全与完整性保障 数据安全与完整性保障详细参考数据保护技术。 父主题: 迁移工作原理
批量移动示例中prefix表示源端对象前缀,工具会按前缀去匹配要移动的源端对象。 有关obsutil工具的更多命令说明,请参见移动对象。 父主题: 产品咨询
业务割接方案最佳实践 使用“回源配置方案”迁移增量对象数据 使用“源端/目的端双写方案”方案迁移增量对象数据 使用"多次同步方案"迁移增量对象数据