检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用前必读 欢迎使用对象存储迁移服务(Object Storage Migration Service)。对象存储迁移服务是一种线上数据迁移服务,帮助用户把对象存储数据从其他云服务商的公有云轻松、平滑地迁移到华为云。 您可以使用本文档提供的API对对象存储迁移服务进行相关操作,如
数据识别与准备 在迁移开始前,华为云OMS服务会先对源端存储系统中的数据进行识别,包括对象大小、最后修改时间以及位置等关键信息。基于这些信息,服务会为用户生成一个对应的迁移任务配置,确保迁移过程的高效性和准确性。 父主题: 迁移工作原理
数据迁移 根据迁移配置,华为云OMS服务会开始从源端存储系统拉取数据。同时,服务会确保数据的完整性和一致性,避免在迁移过程中出现数据丢失或损坏的情况。服务还支持断点续传功能,当迁移过程中出现网络中断或其他异常情况时,服务可以从断点处恢复传输,确保数据的完整性和迁移的连续性。 父主题:
如何获取源端桶权限和目的端桶权限? 源端桶权限获取 以华为云OBS源端桶为例,如果源端桶为其他云服务商,请联系对应的云服务商工程师。 源端桶对应账户需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容。 源端权限获取方式分为两种,可任选一种方式获取。 基于系统策略获取OBS
创建用户并使用OMS 如果您需要对您所拥有的OMS进行精细的权限管理,您可以使用统一身份认证服务(Identity and Access Management,简称IAM),通过IAM,您可以: 根据企业的业务组织,在您的华为云账号中,给企业中不同职能部门的员工创建IAM用户,让员工拥有唯一安全凭证,并使用OMS。
迁移流程 对象存储迁移服务 OMS的迁移工作原理图,如图1所示。 图1 迁移工作原理图 迁移工作流程说明: OMS服务请求获取一定数量的源端对象列表。 源端响应对象列表。 OMS服务请求获取源端对象元数据。 源端响应对象元数据。 OMS服务请求获取目的端对象元数据。 目的端响应对象元数据。
have read and write permissions for the file. 任务参数校验失败。 请确保对象列表文件存在且可以正常获取(具有读写权限)。 200 TRF.0014 Invalid object list file. Ensure the object list
迁移限制 OMS将对象数据迁移到并行文件系统有哪些限制? 迁移并行文件系统内的对象数据有哪些限制? 创建迁移任务时提示“您选择的目的端桶所在区域与控制台Region不一致,请选择所在区域为xxx的桶或切换控制台Region为xxx”该如何处理? 源端云服务商不在OMS支持范围,该如何迁移?
我如何能知道迁移任务的速度? 一般情况,对象存储服务的迁移速度的参考值是10-20TB每天。由于迁移速度受源端对象个数、大小以及公网传输距离影响,建议用户创建一个实际数据的迁移任务来测试实际迁移速度,实际最大迁移速度为单个任务平均速度的5倍(单个Region内并发任务数最大为5)。
阿里云OSS配置同步请求 背景信息 创建同步任务后,您需要在源端配置同步请求,以确保源端云服务商的对象存储服务可以针对源端新增、修改对象实时调用OMS同步接口(例如,通过消息通知或函数计算服务方式),以完成对源端新增、修改对象数据的同步迁移。 配置条件 实时获取源端新增、修改对象名称。
SMN消息发送配置。 enable_metadata_migration 否 Boolean 是否启用元数据迁移,默认否。不启用时,为保证迁移任务正常运行,仍将为您迁移ContentType元数据。 缺省值:false enable_restore 否 Boolean 是否自动解冻归档数据,默认否。
跨区域迁移时,迁移速率慢且失败对象较多,如何处理? 问题描述 使用OMS服务进行跨区域迁移,例如:从中国-香港区域(非中国大陆区域)迁移至华北-北京四区域(中国大陆区域),网络速率较慢,出现严重的网络丢包问题,从而导致失败对象数较多。 解决方案 方法一:请尝试多次重试迁移任务,如仍然无法解决,请使用方法二。
使用“回源配置方案”迁移增量对象数据 本节指导用户使用回源配置方案迁移增量对象数据。 优势 此方案优势在于: 业务零中断,增量迁移间未同步的数据通过回源配置保证用户无感知。 可靠性高,割接前可提前验证,迁移后可校验。 操作流程 “回源配置方案”迁移增量对象数据流程图,如图1所示。
如何查看迁移任务中迁移了哪些对象? 本文介绍如何查看迁移任务的详细信息和获取迁移对象列表的方法。 登录管理控制台。 在左侧服务列表中,选择“对象存储迁移服务 OMS”,进入对象存储迁移服务页面。 默认显示迁移任务界面,单击任务名称,右侧弹出任务详情,如图1所示。可查看对象总数、已
自动检查并重启失败的迁移任务 方案概述 通过API调用启动迁移任务/迁移任务组后,由于网络波动或其他原因导致迁移任务失败,需要重新启动迁移任务/迁移任务组,可以通过以下方式重新启动: 手动调用API重新启动迁移任务/迁移任务组。 在业务代码中自动检测并调用API重新启动迁移任务/迁移任务组。
设置“保存到指定前缀”参数 功能介绍 “保存到指定前缀”参数功能包括: 目的端增加前缀 目的端增加前缀是指在创建迁移任务/迁移任务组时,设置“保存到指定前缀”参数,设置后源端对象迁移到目的端,会在对象名前增加设置的前缀。 例如: 源端迁移对象文件为:oms_a.txt、oms_b
如何查看迁移任务组中迁移了哪些对象? 本文介绍如何查看迁移任务组的详细信息和获取迁移对象列表的方法。 登录管理控制台。 在左侧服务列表中,选择“对象存储迁移服务 OMS”,进入对象存储迁移服务页面。 在导航树单击迁移任务组,进入迁移任务组界面。 单击需要查看的迁移任务组ID,右侧
创建迁移任务组 本节介绍创建迁移任务组的操作步骤。 OMS默认会将等待超过30天未调度的任务自动设置为失败,并且会自动清除该任务的AK/SK。为防止大量任务阻塞在等待中,请控制创建任务的频率。 如果单个对象大小超过500G,建议您通过提交工单的方式,开通并发分片白名单配置,提升迁移速率。
腾讯云COS配置同步请求 背景信息 创建同步任务后,您需要在源端配置同步请求,以确保源端云服务商的对象存储服务可以针对源端新增、修改对象实时调用OMS同步接口(例如,通过消息通知或函数计算服务方式),以完成对源端新增、修改对象数据的同步迁移。 配置条件 实时获取源端新增、修改对象名称。
腾讯云COS 腾讯云对象存储COS,可通过控制台解冻归档对象,也可通过coscmd工具来解冻归档对象,支持批量解冻。 控制台解冻 登录腾讯云对象存储控制台。 在左侧导航栏中,单击存储桶列表,进入存储桶列表页面。 找到对象所在的存储桶,单击其存储桶名称,进入存储桶管理页面。 在左侧