检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
设置“选择目的端”区域的参数,参见表2。 表2 设置目的端参数 参数 设置 访问密钥 填写目的端华为云的访问密钥(AK)。 私有访问密钥 填写目的端华为云的私有访问密钥(SK)。 填写访问密钥和私有访问密钥后,请单击“列举目的端桶”。 桶名 选择存放迁移数据的华为云OBS桶。 单击“下一步”,进入“设置任务参数”页面,如图5所示。
问题描述 使用OMS服务进行跨区域迁移,例如:从中国-香港区域(非中国大陆区域)迁移至华北-北京四区域(中国大陆区域),网络速率较慢,出现严重的网络丢包问题,从而导致失败对象数较多。 解决方案 方法一:请尝试多次重试迁移任务,如仍然无法解决,请使用方法二。 方法二:使用OBS提供的跨
0159 由于源端对象存储访问频率过高,受源端限制导致任务失败,解决方法请参见:源端对象存储访问频率过高导致迁移失败怎么办?。 TRF.0160 无法读取归档类型数据,请解冻数据后进行迁移。 TRF.0301 选定的对象列表文件属于归档数据无法获取,请手动解冻后再进行迁移。 父主题:
第六次正式发布。 在对象存储迁移流程中,增加流程各环节的内容链接。 删除“创建访问密钥(AK/SK)”和“创建桶”两节。 在创建单个迁移任务中,调整选择服务区域的步骤顺序。 在创建单个迁移任务中,“源端参数”增加“解冻归档数据”。 2019-04-17 第五次正式发布。 在对象存储迁移流程中,更新表述。
src_ak 否 String 源端节点AK(最大长度100个字符)。URL列表迁移任务不需要填写此参数。 最小长度:1 最大长度:100 src_sk 否 String 源端节点SK(最大长度100个字符)。URL列表迁移任务不需要填写此参数。 最小长度:1 最大长度:100 json_auth_file
迁移流程 对象存储迁移服务 OMS的迁移工作原理图,如图1所示。 图1 迁移工作原理图 迁移工作流程说明: OMS服务请求获取一定数量的源端对象列表。 源端响应对象列表。 OMS服务请求获取源端对象元数据。 源端响应对象元数据。 OMS服务请求获取目的端对象元数据。 目的端响应对象元数据。
--parallel用于指定批量激活并发数,默认值为10。 更多详情,请参见优刻得对象存储US3CLI命令行工具中的restore相关内容。 解冻完成后,请参考优刻得US3迁移至华为云OBS教程,将数据迁移到华为云OBS。 父主题: 归档数据迁移方案
适用于单个桶数据量大于3 TB或对象个数大于500万的对象迁移场景,迁移任务组将源端待迁移对象智能分解到多个迁移任务中并行迁移。以组的方式进行管理,包括进度查询,暂停恢复,失败重启等。 迁移任务组相较于迁移任务,提供更快的迁移速度和可靠性,便于灵活识别异常对象并快速恢复。 创建迁移任务组
example.com/v3/projects" } } 从控制台获取项目ID 从控制台获取项目ID的步骤如下: 登录管理控制台。 鼠标悬停在右上角的用户名,选择下拉列表中的“我的凭证”。 在“API凭证”页面的项目列表中查看项目ID。 图1 查看项目ID 父主题: 附录
归档数据迁移方案 本节介绍各云服务商存在归档数据时,如何解冻并迁移到华为云OBS。 华为云OBS 阿里云OSS 腾讯云COS 百度云BOS 七牛云Kodo 金山云KS3 优刻得US3 亚马逊云S3 微软云Blob
String 目的端存储类型设置,当且仅当目的端为华为云OBS时需要,默认为标准存储 STANDARD:华为云OBS标准存储 IA:华为云OBS低频存储 ARCHIVE:华为云OBS归档存储 DEEP_ARCHIVE:华为云OBS深度归档存储 SRC_STORAGE_MAPPING:
启动迁移任务前需要获取Token,启动迁移任务后,需要查询任务状态详情,失败或暂停中的任务才能被启动。 涉及接口 获取IAM用户Token(使用密码):用于鉴权认证。 启动迁移任务:通过源端和目的端的AK和SK启动失败或者暂停的迁移任务。 查询指定ID的任务详情:根据迁移任务ID查询任务详情,确定迁移任务是否启动成功。
删除任务 功能介绍 调用该接口删除迁移任务。 正在运行的任务不允许删除,如果删除会返回失败。 URI DELETE /v1/{project_id}/objectstorage/task/{task_id} 参数说明请参见表1。 表1 参数说明 参数 是否必选 描述 project_id
启动任务 功能介绍 任务暂停或失败后,调用该接口以启动任务。 URI PUT /v1/{project_id}/objectstorage/task/{task_id} 参数说明请参见表1。 表1 参数说明 参数 是否必选 描述 project_id 是 项目ID。 task_id
迁移工作原理 概述 迁移流程 数据识别与准备 数据迁移 数据安全与完整性保障
历史API 查询API版本 创建任务 删除任务 启动任务 停止任务 修改流量控制策略 查询某个租户的所有任务 查询某个租户的任务总数 查询指定ID的任务 查询租户配额数据
子任务失败的原因可能不同,可逐个查看任务失败原因。然后参考迁移任务执行失败怎么办?进行失败原因排查。 图1 迁移失败 迁移任务组的目的桶存储类型为非标准存储时,也会导致迁移失败。这时,可以在OBS中,将目的桶存储类型修改为标准存储后,再创建迁移任务组。 迁移任务组会将列表文件临时
OMS是否支持批量桶迁移? 目前OMS单个任务(迁移任务/迁移任务组)仅支持迁移单桶数据,不支持批量桶迁移。 如果涉及到多桶数据迁移,推荐使用华为云迁移中心MgC,创建存储迁移工作流进行批量桶迁移。 父主题: 产品咨询
查询API版本信息 查询API版本信息列表 查询指定API版本信息 父主题: API v2(推荐)
源端桶的名称。 cloud_type String 源端云服务商。 表4 list_file数据结构 参数 参数类型 描述 obs_bucket String 存放对象列表文件的OBS桶名。 list_file_key String 对象列表文件对象名。 表5 dst_node数据结构说明 参数