检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
绝对路径。 bucket String 源端桶的名称。 cloud_type String 源端云服务商。 表4 list_file数据结构 参数 参数类型 描述 obs_bucket String 存放对象列表文件的OBS桶名。 list_file_key String 对象列表文件对象名。
迁移任务管理 查询迁移任务列表 查询指定ID的任务详情 创建迁移任务 暂停迁移任务 启动迁移任务 删除迁移任务 更新任务带宽策略 批量更新任务 父主题: API v2(推荐)
OMS是否支持批量桶迁移? 目前OMS单个任务(迁移任务/迁移任务组)仅支持迁移单桶数据,不支持批量桶迁移。 如果涉及到多桶数据迁移,推荐使用华为云迁移中心MgC,创建存储迁移工作流进行批量桶迁移。 父主题: 产品咨询
场景描述 本章节指导用户通过API暂停并删除迁移任务。API的调用方法请参见如何调用API。 删除迁移任务前,需要获取Token并暂停迁移任务,暂停迁移任务后,需查询任务状态详情,当迁移任务暂停后,才能删除迁移任务。 涉及接口 获取IAM用户Token(使用密码):用于鉴权认证。
src_ak 否 String 源端节点AK(最大长度100个字符)。URL列表迁移任务不需要填写此参数。 最小长度:1 最大长度:100 src_sk 否 String 源端节点SK(最大长度100个字符)。URL列表迁移任务不需要填写此参数。 最小长度:1 最大长度:100 json_auth_file
如何查看同步任务中迁移了哪些对象? 本文介绍如何查看同步任务的详细信息和获取迁移对象列表的方法。 目前只支持华北-北京四地区。 登录管理控制台。 在左侧服务列表中,选择“对象存储迁移服务 OMS”,进入对象存储迁移服务页面。 在导航树单击同步任务,进入同步任务界面。 单击需要查看的同步任务ID,右侧弹出同步任务详
选择目的端桶Region 单击控制台左侧“服务列表”,选择“迁移 > 对象存储迁移服务 OMS”,进入“对象存储迁移服务”页面。 您也可以在搜索框中输入“OMS”,快速查找“对象存储迁移服务 OMS”,如图2所示。 图2 选择对象存储迁移服务 在左侧导航树,选择“迁移任务组”,切换到“迁移任务组”页面。
FULL_OVERWRITE dst_storage_policy String 目的端存储类型设置,当且仅当目的端为华为云OBS时需要,默认为标准存储 STANDARD:华为云OBS标准存储 IA:华为云OBS低频存储 ARCHIVE:华为云OBS归档存储 DEEP_ARCHIVE:华为云OBS深度归档存储
创建同步事件 功能介绍 源端有对象需要进行同步时,调用该接口创建一个同步事件,系统将根据同步事件中包含的对象名称进行同步(目前只支持华北-北京四、华东-上海一地区)。 调用方法 请参见如何调用API。 URI POST /v2/{project_id}/sync-tasks/{sync_task_id}/events
获取指定id的taskgroup信息 删除指定id的迁移任务组 暂停指定id的迁移任务组 恢复指定id的迁移任务组 对已经失败的指定id迁移任务组进行重启 更新指定id的迁移任务组的流控策略 父主题: API v2(推荐)
适用于单个桶数据量大于3 TB或对象个数大于500万的对象迁移场景,迁移任务组将源端待迁移对象智能分解到多个迁移任务中并行迁移。 支持的源端云服务商和数据类型 迁移任务支持的源端云服务商和数据类型包括: 华为云 亚马逊云(中国) 阿里云 微软云 腾讯云 谷歌云 七牛云 青云 百度云 金山云 优刻得 HTTP/HTTPS数据源
各云服务商配置同步请求教程 阿里云OSS配置同步请求 腾讯云COS配置同步请求
迁移并行文件系统内的对象数据有哪些限制? 当待迁移对象所属文件层级过深时,建议通过创建迁移任务组进行迁移。如果通过创建迁移任务进行迁移,可能出现列举对象超时,导致列举中断。 父主题: 迁移限制
文件,导致任务迁移失败。 解决方案 如果因为迁移执行过程中删除了OMS在目的端创建的文件,导致迁移任务失败。请重新创建迁移任务/迁移任务组进行迁移。 请参考如何获取源端桶权限和目的端桶权限?配置源端桶/目的端桶权限后重试任务。 父主题: 异常恢复
开启后,如果遇到归档类型数据,会自动解冻再进行迁移。 缺省值:false dst_storage_policy 否 String 目的端存储类型设置,当且仅当目的端为华为云OBS时需要,默认为标准存储 STANDARD:华为云OBS标准存储 IA:华为云OBS低频存储 ARCHIVE:华为云OBS归档存储 D
停止任务 功能介绍 当任务正在运行中时,调用该接口停止任务。 URI PUT /v1/{project_id}/objectstorage/task/{task_id} 参数说明请参见表1。 表1 参数说明 参数 是否必选 描述 project_id 是 项目ID。 task_id
在业务代码中自动检测并调用API重新启动迁移任务/迁移任务组。 使用函数工作流自动检查并重启失败的迁移任务。 本方案指导用户使用函数工作流检查指定任务id的迁移任务,若该任务迁移失败则自动重启。 该方案只提供参考,需要根据实际情况做出调整,函数工作流的使用方式请参见函数工作流 FunctionGraph。
我如何能知道迁移任务的速度? 一般情况,对象存储服务的迁移速度的参考值是10-20TB每天。由于迁移速度受源端对象个数、大小以及公网传输距离影响,建议用户创建一个实际数据的迁移任务来测试实际迁移速度,实际最大迁移速度为单个任务平均速度的5倍(单个Region内并发任务数最大为5)。
URE,错误描述信息为-1-OBSClientUploadError。 问题分析 该问题可能是由于对象迁移过程中网络波动导致的迁移任务失败。 解决方案 方案一:手动重启迁移任务。 方案二:在业务代码中实现自动检查任务+重启失败任务列表。 方案三:使用函数工作流自动检查任务+重启失
调用OMS同步接口,将源端变化对象传递给对象存储迁移服务 OMS,从而完成源端同步迁移。 配置方式 基于源端云服务商的对象存储服务和函数工作流服务,通过配置源端云服务商的对象存储服务和函数工作流服务来触发新增、修改对象的同步请求。 操作步骤 登录阿里云函数计算控制台,在左侧导航栏,单击函数。