检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
OMS是否支持批量桶迁移? 目前OMS单个任务(迁移任务/迁移任务组)仅支持迁移单桶数据,不支持批量桶迁移。 如果涉及到多桶数据迁移,推荐使用华为云迁移中心MgC,创建存储迁移工作流进行批量桶迁移。 父主题: 产品咨询
迁移任务组 适用场景 适用于单个桶数据量大于3 TB或对象个数大于500万的对象迁移场景,迁移任务组将源端待迁移对象智能分解到多个迁移任务中并行迁移。 支持的源端云服务商和数据类型 迁移任务支持的源端云服务商和数据类型包括: 华为云 亚马逊云(中国) 阿里云 微软云 腾讯云 谷歌云
概述 对象存储迁移服务(OMS)的原理主要基于数据复制、同步和传输技术的综合运用,旨在帮助用户高效、安全地将其他云服务商对象存储服务中的数据在线迁移至华为云OBS。 父主题: 迁移工作原理
解冻归档数据 默认“否”。不建议开启,迁移数据中有归档数据时,优先选择使用OBS的解冻工具将数据解冻后再进行迁移。具体操作参见恢复归档存储对象。 选择“否”,迁移数据中有归档数据时,则直接判定该对象迁移失败并跳过,继续迁移其余数据。 选择“是”,迁移数据中有归档数据时,会自动解冻归档类型数据并迁移。
创建华为云的访问密钥(AK/SK)并授权 目的端华为云:参见创建访问密钥(AK/SK)和目的端桶权限获取创建AK/SK并添加权限。 创建目的端桶 创建用于存放迁移数据的桶,具体操作参见创建桶。 创建URL列表文件并上传至OBS桶 创建迁移任务:将待迁移的文件URL和目的端对象名称写入URL列表文件,并将
迁移网络模型 对象存储迁移服务(OMS)的网络模型设计考虑了数据的传输效率、安全性和可靠性。OMS支持大文件分片、大量数据的快速迁移。同时,它还支持断点续传功能,即使在迁移过程中遇到网络中断等异常情况,也能从断点处继续传输,确保数据的完整性和迁移的连续性。 图1 网络模型图 场景一:跨Region/跨云迁移
迁移任务与迁移任务组的适用场景是什么? 迁移任务 适用于单个桶数据量不超过3 TB或对象个数不超过500万的对象存储迁移场景,通过创建对象存储迁移任务,可将对象数据进行快速迁移。创建方式参见创建迁移任务。 迁移任务组 适用于单个桶数据量大于3 TB或对象个数大于500万的对象迁移场景,迁
在“对象列表文件”区域内单击“选择”,选择用户指定的对象列表文件,单击“确定”。 输入对象前缀 在“添加对象数据”区域内输入对象数据名称或者名称前缀,系统会自动匹配出数据。您可以单击,从这些匹配到的迁移数据列表中删除不需要迁移的数据。 说明: 添加对象前缀时,如果对象文件在桶的根目录下,则直接添加前缀;如果对
“无法访问对象,请检查并确保:对象存在且具有访问权限”。 问题分析 出现该问题可能是因为对象文件不在源端桶的根目录下,存在目录路径。 解决方案 当对象文件存在目录路径,添加对象前缀时,需要在对象前缀前添加对象文件所在的目录路径。格式为:桶名/文件夹/对象前缀。 父主题: 异常恢复
出现该问题可能是以下原因: 由于在迁移过程中删除了目的端oms创建的文件,导致任务异常。 源端桶/目的端桶权限不足,无法读取/下载文件,导致任务迁移失败。 解决方案 如果因为迁移执行过程中删除了OMS在目的端创建的文件,导致迁移任务失败。请重新创建迁移任务/迁移任务组进行迁移。 请参考如何获取源端桶权
使用前必读 欢迎使用对象存储迁移服务(Object Storage Migration Service)。对象存储迁移服务是一种线上数据迁移服务,帮助用户把对象存储数据从其他云服务商的公有云轻松、平滑地迁移到华为云。 您可以使用本文档提供的API对对象存储迁移服务进行相关操作,如创建、删除
接目的端桶”。 桶名 存放迁移数据的华为云OBS桶。 单击“下一步”,设置任务参数。具体选项参见表4。 表4 任务参数 参数 说明 元数据迁移方式 忽略元数据:OMS只迁移源端ContentType元数据。 保留元数据:OMS会迁移支持范围内的元数据。支持中文字符、英文字符、数字
败,重试迁移依然校验失败,并且目的端对象最后修改时间一直保持不变。 问题分析 出现该问题可能是因为并行系统存在元数据mtime(可以设置最后修改时间),如果存在元数据mtime则目的端最后修改时间被固定,因此导致校验失败,该问题并不影响对象的正常迁移,您可以忽略该问题。 父主题:
同步任务用于源端变更对象主动同步的场景,通过在源端对象存储服务配置事件触发器,当出现对象新增或修改时,通过函数工作流服务,主动调用OMS服务的数据同步接口,及时将数据同步到华为云OBS侧。 目前只支持华北-北京四、华东-上海一地区。 支持的源端云服务商 同步任务支持迁移的源端云服务提供商包括:
、最低存储时间、最低存储单元、数据可靠性、数据可用性等。根据以上依据,华为云OBS提供了以下四种存储类型: 标准存储 访问时延低和吞吐量高,因而适用于有大量热点文件(平均一个月多次)或小文件(小于1MB),且需要频繁访问数据的业务场景,例如:大数据、移动应用、热点视频、社交图片等场景。
按条件过滤源端对象:支持迁移指定时间后的源端对象。 多任务创建 对于大容量、大规模的对象迁移,对象存储迁移服务提供了创建迁移任务组功能,能够自动划分并创建迁移任务,最大化利用服务的并发性能。 支持以组的方式对迁移任务进行管理。 高效传输 并行迁移 支持多对象并行迁移。 解冻归档数据 对于归档类型的对象存储,支持自动解冻该对象后进行迁移。
失败对象超过10万个的场景,建议基于已有失败对象列表,分析处理后重新迁移。 解冻归档数据 默认“否”。 选择“否”,迁移数据中有归档数据时,则直接判定该对象迁移失败并跳过,继续迁移其余数据。 选择“是”,迁移数据中有归档数据时,会自动解冻归档类型数据并迁移。 发送通知 默认“否”,选择是否使用SMN消息通知功能,该功能可以通知您迁移任务的结果。
在什么条件下使用基于评估创建迁移任务? 如果桶内数据容量超过3TB,数量超过500万个,推荐您创建迁移任务组进行迁移。系统会根据桶内对象的存量和数量分布,自动划分为多个迁移任务,提高迁移效率、减少迁移时间。 父主题: 产品咨询
数是否一致,并通过对象列表确认新增对象。如果扫描结果不一致,可通过对象列表确认新增对象;如果扫描结果一致,即OMS对源端扫描有问题。 解决方案:如果源端有新增对象,可通过增量迁移将新增对象迁移到目的端桶。如果源端扫描有问题,请提交工单。 源端对象大小>目的端对象大小 可能原因: 源端存在碎片文件。
AILURE 自动解冻归档数据失败 尝试手动解冻归档数据再迁移,迁移完成后进行归档。 说明: 解冻方式请参照迁移失败后提示“无法读取归档类型数据,请解冻数据后进行迁移”该如何处理? MIGRATE_SRC_ARCHIVE_OBJ_FAILURE 归档数据未解冻迁移失败 重新创建迁