检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
文件夹进行的任何手动操作都可能导致迁移流程中断或失败。 适用场景 适用于单个桶数据量不超过3 TB或对象个数不超过500万的对象存储迁移场景,通过创建对象存储迁移任务,可将对象数据进行快速迁移。 如果单个桶数据量大于3 TB或对象个数大于500万,建议您创建迁移任务组来进行迁移。
链导致无法正常读取。 如果能正常访问,请参考2进行下一步排查 。 检查CDN获取的HTTP头中的Content-Length和Last-Modified与源端元数据中值对比。 如图1、图2所示,如果Content-Length与元数据大小不一致,优先排查源端CDN是否配置图片压缩,确认后解除相关配置,重新迁移即可。
①全量迁移:将T1时间点之前的源端存量数据全量迁移到华为云(此时客户业务系统还会继续往源端桶新增业务数据)。 ②业务验证:验证迁移数据 + 验证华为侧数据业务(数据读取和写入)。 T2时间:启动首次增量数据迁移、评估数据增量速度。 ③增量迁移:将T1~T2时间段生成的新增数据迁移到华为云。
高级选项 表3 高级选项参数说明 参数 说明 元数据迁移方式 选择是否迁移元数据。 选择“忽略元数据”,OMS只迁移源端Content-Type、Content-Encoding元数据。 选择“保留元数据”,OMS会迁移支持范围内的元数据。 须知: 仅支持中文字符、英文字符、数字和中
数据安全与完整性保障 数据安全与完整性保障详细参考数据保护技术。 父主题: 迁移工作原理
能够自动划分并创建迁移任务,最大化利用服务的并发性能。 支持以组的方式对迁移任务进行管理。 高效传输 并行迁移 支持多对象并行迁移。 解冻归档数据 对于归档类型的对象存储,支持自动解冻该对象后进行迁移。 自定义域名迁移 支持使用源端桶自定义域名迁移。 记录失败对象 支持记录迁移失败对象,以及重传这些失败对象。
使用"多次同步方案"迁移增量对象数据 操作场景 本章节指导用户使用"多次同步方案"迁移增量对象数据。 主要迁移步骤如下所示: 使用OMS完成源端数据的全量迁移。 多次增量迁移数据,减少源端和目的端数据差异。 多次增量迁移后,确认一个能够接受的增量迁移时间窗,停止源端业务,启动最后
OMS根据源端厂商对象存储服务和华为云对象存储服务接口及协议,进行认证和一致性校验,涉及MD5、SHA1、CRC64以及基于MD5的HMAC算法的使用,存在因源端发生hash碰撞,导致要迁移的数据和实际迁移的数据不一致的风险,为确保数据一致性,可以在迁移后再次对源端、目的端数据进行完整的内容校验。 父主题: 安全
否则后续将无法选择对象列表文件。 在“对象列表文件”区域内单击“选择”,选择用户指定的对象列表文件,单击“确定”。 输入对象前缀 在“添加对象数据”区域内输入对象数据名称或者名称前缀,系统会自动匹配出数据。您可以单击,从这些匹配到的迁移数据列表中删除不需要迁移的数据。 说明:
概述 对于OMS不适用的数据迁移场景(约束与限制),华为云另外提供了迁移中心MgC进行数据迁移,您可以根据具体迁移场景选择迁移方式。 表1 存储迁移工具 迁移工具 迁移网络 支持迁移的源端存储类型 支持特性 迁移中心MgC 公网/专线 华为云 OBS 阿里云 OSS 百度云 BOS
OMS保证迁移数据一致性的校验策略是什么? 在迁移过程中,每迁移完一个对象,会对该对象进行一致性校验,如果不一致则会将该对象记录到失败对象列表中。OMS会累积记录迁移失败对象个数,可以通过任务详情查看具体的迁移数据统计。 校验策略为该对象是否同时满足以下条件,不满足则校验失败,并记录到失败对象列表中。
单击确定,文件将处于恢复过程中。当存储类型变为标准存储时,说明解冻完成。 文件解冻将产生数据取回费用。 US3CLI工具解冻 US3CLI工具支持Windows、Linux和macOS等操作系统,您可以根据实际情况下载和安装合适的版本。 本文以Windows系统为例进行介绍。 下载US3CLI命令行工具。
OMS是否支持批量桶迁移? 目前OMS单个任务(迁移任务/迁移任务组)仅支持迁移单桶数据,不支持批量桶迁移。 如果涉及到多桶数据迁移,推荐使用华为云迁移中心MgC,创建存储迁移工作流进行批量桶迁移。 父主题: 产品咨询
用于指导您快速实现对象存储数据迁移。 表1 OMS最佳实践一览表 最佳实践 使用场景 优势 使用“回源配置方案”迁移增量对象数据 大批量数据迁移场景使用,优先选择此方案。此方案受OBS限制,具体的约束请见数据回源。 业务零中断,增量迁移间未同步的数据通过回源配置保证用户无感知。
请前往迁移中心MgC,并使用其提供的存储迁移工作流进行迁移。迁移中心 MgC支持多种云平台对象存储、文件存储服务的迁移,同时也支持自建网络文件服务的迁移。 迁移方式二 创建迁移任务或迁移任务组时,选择源端数据源为“HTTP/HTTPS数据源”,如图1所示。 图1 选择HTTP/HTTPS数据源 选择创建“迁移任
迁移任务 适用场景 适用于单个桶数据量不超过3 TB或对象个数不超过500万的对象存储迁移场景,通过创建对象存储迁移任务,可将对象数据进行快速迁移。 支持的源端云服务商和数据类型 迁移任务支持的源端云服务商和数据类型包括: 华为云 亚马逊云(中国) 阿里云 微软云 腾讯云 谷歌云
尝试手动解冻归档数据再迁移,迁移完成后进行归档。 说明: 解冻方式请参照迁移失败后提示“无法读取归档类型数据,请解冻数据后进行迁移”该如何处理? MIGRATE_SRC_ARCHIVE_OBJ_FAILURE 归档数据未解冻迁移失败 重新创建迁移任务,并打开自动解冻。如存在大量归档数据可以先手动解冻再迁移。
本教程介绍如何在华为云对象存储 OBS 之间进行跨账号、跨地域、以及同地域内的数据迁移。 华为云对象存储迁移服务(Object Storage Migration Service,OMS)是一种线上数据迁移服务,可以帮助您将其他云服务商对象存储服务中的数据在线迁移至华为云的对象存储服务(Object
当目的端已存在的对象(对象名、大小相同,且创建时间在源端之后),OMS不会进行迁移,计为忽略对象。 同步对象容量(本月) 统计本月截止目前已成功同步对象的总量大小。 对象列表 OMS会将同步成功对象、失败对象、忽略对象记录为对应的列表,存放于目的桶中,可通过OBS获取这些列表进行同步对象数量及名称校验。具体信息请查看表2。
查询指定ID的同步任务统计数据 功能介绍 查询指定ID同步任务的接收同步请求对象数、同步成功对象数、同步失败对象数、同步跳过对象数、同步成功对象容量统计数据(目前只支持华北-北京四、华东-上海一地区)。 调用方法 请参见如何调用API。 URI GET /v2/{project_