检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
我如何能知道迁移任务的速度? 一般情况,对象存储服务的迁移速度的参考值是10-20TB每天。由于迁移速度受源端对象个数、大小以及公网传输距离影响,建议用户创建一个实际数据的迁移任务来测试实际迁移速度,实际最大迁移速度为单个任务平均速度的5倍(单个Region内并发任务数最大为5)。
在什么条件下使用基于评估创建迁移任务? 如果桶内数据容量超过3TB,数量超过500万个,推荐您创建迁移任务组进行迁移。系统会根据桶内对象的存量和数量分布,自动划分为多个迁移任务,提高迁移效率、减少迁移时间。 父主题: 产品咨询
obs://src_bucket/prefix obs://dsc_bucket/dsc_path -f -r,批量移动对象。 批量移动示例中prefix表示源端对象前缀,工具会按前缀去匹配要移动的源端对象。 有关obsutil工具的更多命令说明,请参见移动对象。 父主题: 产品咨询
width-policy 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID。 最小长度:1 最大长度:1024 task_id 是 String 任务ID。 最小长度:1 最大长度:1024 请求参数 表2 请求Header参数 参数
/v2/{project_id}/objectstorage/data-center 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID 最小长度:1 最大长度:1024 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token
时,list_file为必选参数。 表9 ListFile 参数 参数类型 描述 list_file_key String 对象列表文件或URL列表文件对象名。 最小长度:1 最大长度:1024 obs_bucket String 存放对象列表文件的OBS桶名。 请确保与目的端桶处于同一区域,否则将导致任务创建失败。
多次增量迁移后,确认一个能够接受的增量迁移时间窗,停止源端业务,启动最后一次增量迁移,迁移完成后启动目的端写业务。 用户通过业务侧自动识别增量对象列表,然后使用OMS指定对象列表迁移方式,能快速完成增量数据识别+ 迁移。 父主题: 业务割接方案最佳实践
ListFile object 列表文件配置,当task_type为LIST或URL_LIST时,list_file为必选参数。 表5 ListFile 参数 是否必选 参数类型 描述 list_file_key 是 String 对象列表文件或URL列表文件对象名。 最小长度:1 最大长度:1024
/v2/{project_id}/objectstorage/buckets/prefix 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID 最小长度:1 最大长度:1024 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token
OMS在对象上传到OBS后,会对比该对象的加密状态与任务是否开启KMS加密的状态是否一致,如果不一致则判定该对象迁移失败。如果迁移失败,在失败对象列表中发现失败原因是KMS状态错误,请通过以下步骤重启失败的迁移任务。 确认目的端桶的基础配置中是开启了默认加密,如果需要此功能,请重新创建相同
/v2/{project_id}/objectstorage/buckets/regions 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID 最小长度:1 最大长度:1024 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token
ync_task_id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID 最小长度:1 最大长度:1024 sync_task_id 是 String 同步任务ID。 最小长度:0 最大长度:255 表2 Query参数 参数 是否必选
场景三 迁移失败,失败对象列表中失败原因为:“403” 获取失败对象列表方法:单击迁移失败任务名称,右侧弹出任务详情,单击“失败对象列表路径”链接,如图4所示,进入OBS服务下载失败对象列表.txt文件。 图4 失败对象列表路径 问题原因: “403”表示OMS服务无权限访问CDN域名。
取桶位置,列举对象,获取对象元数据,获取对象内容。 登录华为云,在右上角单击“控制台”。 在控制台页面,鼠标移动至右上方的账号名,在下拉列表中选择“统一身份认证”。 在“统一身份认证服务”导航树,单击“权限管理>权限”,进入权限页面。 单击右上角“创建自定义策略”,进入创建自定义策略页面。
在迁移过程中,每迁移完一个对象,会对该对象进行一致性校验,如果不一致则会将该对象记录到失败对象列表中。OMS会累积记录迁移失败对象个数,可以通过任务详情查看具体的迁移数据统计。 校验策略为该对象是否同时满足以下条件,不满足则校验失败,并记录到失败对象列表中。 目的端对象的加密状态与任务是否开启KMS加密的状态一致,
迁移完成后,不会删除目的端桶的已有数据。 存在同名对象,会根据创建任务/任务组时,高级选项中的同名对象覆盖方式来执行覆盖规则。规则说明参见表1。 表1 同名对象覆盖规则说明 覆盖规则 说明 大小/最后修改时间对比覆盖 对于源端和目的端存在的同名对象,如果对象大小相同,则保留最后修改时
式参见目的端桶权限获取。 已在OBS服务中创建桶。 操作步骤 登录管理控制台。 单击管理控制台左上角的,在下拉框中选择区域。 单击“服务列表”,选择“迁移 > 对象存储迁移服务”。 进入“对象存储迁移服务”页面。 使用OMS迁移源端全量数据,如果迁移数据量大于3TB,或者迁移对象
源端对象存储访问频率过高导致迁移失败怎么办? 为保证较高的迁移速率,迁移任务执行过程中,对象存储迁移服务会以较高频率调用源端对象存储API。由于某些源端对象存储对访问频率进行了限制,当访问频率过高时就会导致迁移任务失败。 解决办法: 联系源端云服务提供商,修改源端对象存储对访问频率的限制值以满足迁移的要求。
s/{group_id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id 最小长度:1 最大长度:1024 group_id 是 String 任务组id 最小长度:1 最大长度:1024 请求参数 表2 请求Header参数 参数
跨区域迁移时,迁移速率慢且失败对象较多,如何处理? 问题描述 使用OMS服务进行跨区域迁移,例如:从中国-香港区域(非中国大陆区域)迁移至华北-北京四区域(中国大陆区域),网络速率较慢,出现严重的网络丢包问题,从而导致失败对象数较多。 解决方案 方法一:请尝试多次重试迁移任务,如仍然无法解决,请使用方法二。