检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
功能特性 迁移任务 迁移任务组 同步任务
产品功能 对象选择 选择源端对象:支持多种对象选择方式,包括文件/文件夹、对象列表、指定对象前缀。 按条件过滤源端对象:支持迁移指定时间后的源端对象。 多任务创建 对于大容量、大规模的对象迁移,对象存储迁移服务提供了创建迁移任务组功能,能够自动划分并创建迁移任务,最大化利用服务的并发性能。
修订记录 发布日期 修订记录 2024-05-07 第十五次正式发布。 新增阿里云OSS配置同步请求 新增腾讯云COS配置同步请求 2024-03-22 第十四次正式发布。 新增自动检查并重启失败的迁移任务 新增青云QingStor迁移至华为云OBS教程 新增谷歌云storage迁移至华为云OBS教程
迁移网络模型 对象存储迁移服务(OMS)的网络模型设计考虑了数据的传输效率、安全性和可靠性。OMS支持大文件分片、大量数据的快速迁移。同时,它还支持断点续传功能,即使在迁移过程中遇到网络中断等异常情况,也能从断点处继续传输,确保数据的完整性和迁移的连续性。 图1 网络模型图 场景一:跨Region/跨云迁移
授权 源端金山云: 如果您使用管理员账号(即主账号)进行迁移,请登录金山云控制台,在界面顶部导航栏单击用户名,选择Access Keys,查看或新建访问密钥。 如果您需要使用子用户进行迁移,请参考如下步骤创建子用户,生成AK/SK,并为子用户添加金山云对象存储只读权限(KS3ReadOnlyAccess)。
归档数据迁移方案 本节介绍各云服务商存在归档数据时,如何解冻并迁移到华为云OBS。 华为云OBS 阿里云OSS 腾讯云COS 百度云BOS 七牛云Kodo 金山云KS3 优刻得US3 亚马逊云S3 微软云Blob
概述 对象存储迁移服务(OMS)的原理主要基于数据复制、同步和传输技术的综合运用,旨在帮助用户高效、安全地将其他云服务商对象存储服务中的数据在线迁移至华为云OBS。 父主题: 迁移工作原理
如何调用API 构造请求 认证鉴权 返回结果
创建任务 功能介绍 调用该接口添加迁移任务。创建任务成功后,任务会被自动启动,不需要额外调用启动任务命令。 注意事项: 单个租户在过去24小时内最多可创建200个迁移任务。 单个租户名下处于“等待中”状态的迁移任务达到50个时不可再创建任务。 URI POST /v1/{proj
源端百度云: 如果您使用管理员账号(即主账号)进行迁移,请登录百度云管理控制台,在界面顶部导航栏单击用户名,选择安全认证 > Access Key,查看或新建访问密钥。 如果您需要使用子用户进行迁移,请参考如下步骤创建子用户,生成AK/SK,并为子用户添加只读访问BOS的权限(BOSLIS
权 源端优刻得: 如果您使用管理员账号(即主账号)进行迁移,请登录优刻得控制台,在界面顶部导航栏单击用户名,选择账号管理 > API密钥,查看或新建访问密钥。 如果您需要使用子用户进行迁移,请参考如下步骤创建子用户,生成AK/SK,并为子用户添加对象存储 (UFile) 只读权限
迁移限制 OMS将对象数据迁移到并行文件系统有哪些限制? 迁移并行文件系统内的对象数据有哪些限制? 创建迁移任务时提示“您选择的目的端桶所在区域与控制台Region不一致,请选择所在区域为xxx的桶或切换控制台Region为xxx”该如何处理? 源端云服务商不在OMS支持范围,该如何迁移?
其他迁移场景 概述 迁移中心MgC
修订记录 发布日期 修订记录 2024-03-22 第二十三次正式发布。 新增迁移工作原理 新增迁移网络模型 2023-10-17 第二十二次正式发布。 更新计费说明中的API请求次数。 2023-06-20 第二十一次正式发布。 约束与限制新增“迁移范围”、“迁移速度”、“归档数据”限制说明。
约束与限制 OMS迁移任务限制如表1所示。 表1 OMS迁移任务限制 类别 限制 多版本对象迁移 OMS默认只迁移源端多版本对象中的最新版本,不支持迁移历史版本的对象存储数据。 目的端桶存储类别 目的端桶的存储类别只能为标准存储或者低频访问存储。迁移完成后,可以自行修改桶的存储类别。
风险提示 OMS根据源端厂商对象存储服务和华为云对象存储服务接口及协议,进行认证和一致性校验,涉及MD5、SHA1、CRC64以及基于MD5的HMAC算法的使用,存在因源端发生hash碰撞,导致要迁移的数据和实际迁移的数据不一致的风险,为确保数据一致性,可以在迁移后再次对源端、目的端数据进行完整的内容校验。
状态码 状态码如表1所示。 表1 状态码 状态码 描述 说明 200 OK 请求被成功处理。 201 Created 创建类的请求完全成功。 202 Accepted 已经接受请求,但未处理完成。 204 No Content 请求完全成功,同时HTTP响应不包含响应体。 在响应
迁移时长 我如何能知道迁移任务的速度? 为什么显示已传输量在增加,但是迁移进度没有增加? 为什么有时候迁移速度会很慢? 跨区域迁移时,迁移速率慢且失败对象较多,如何处理?
停止任务 功能介绍 当任务正在运行中时,调用该接口停止任务。 URI PUT /v1/{project_id}/objectstorage/task/{task_id} 参数说明请参见表1。 表1 参数说明 参数 是否必选 描述 project_id 是 项目ID。 task_id
单击下一步。在设置权限页面,选择直接附加策略,选中AmazonS3ReadOnlyAccess策略。 单击下一步。查看和创建页面,确认创建用户信息。 单击创建用户。创建完成后单击用户名,选择安全凭证,单击创建访问密钥。 查看访问密钥AK和秘密访问密钥SK。也可以下载.csv文件进行保存。 AWS S3在中国区时,只能迁移至中国大陆的Region。