检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
业务割接方案最佳实践 使用“回源配置方案”迁移增量对象数据 使用“源端/目的端双写方案”方案迁移增量对象数据 使用"多次同步方案"迁移增量对象数据
单击“服务列表”,选择“迁移 > 对象存储迁移服务”。 进入“对象存储迁移服务”页面。 如果迁移数据量大于3TB,或者迁移对象数多于500万,建议参考创建迁移任务组。 少量数据建议参考创建迁移任务。 多次增量迁移后,确认一个能够接受的增量迁移时间窗,停止源端业务,启动最后一次增量迁移,迁移完成后启动目的端写业务。
迁移对源端数据是否有影响?源端数据改变对迁移结果有什么影响? 迁移对源端数据无影响 迁移过程中不会对源端数据进行修改。 迁移时不会对源端的对象进行锁定。 迁移完成后,不会删除源端的数据。 迁移可能会对用户业务产生影响 迁移过程中如果速度过快,可能对源端计费(CDN)或业务造成一定
OMS是否支持批量桶迁移? 目前OMS单个任务(迁移任务/迁移任务组)仅支持迁移单桶数据,不支持批量桶迁移。 如果涉及到多桶数据迁移,推荐使用华为云迁移中心MgC,创建存储迁移工作流进行批量桶迁移。 父主题: 产品咨询
示例1:创建迁移任务 场景描述 本章节指导用户通过API创建迁移任务。API的调用方法请参见如何调用API。 创建迁移任务时,支持的任务类型有:URL列表迁移、对象前缀迁移、对象列表迁移、文件/文件夹迁移。本节我们以创建文件/文件夹迁移任务为例,介绍如何创建迁移任务。 涉及接口
数据保护技术 OMS通过以下方式,保障数据迁移的安全性和完整性。 完整性校验:数据迁移完成后,默认通过对象大小/最后修改时间完成数据的完整性校验。详细介绍请参见一致性校验策略。 个人数据加密保护:为了确保您个人数据的安全性,OMS系统通过加密存储个人数据、控制个人数据访问权限以及
是否自动解冻归档数据,(由于对象存储解冻需要源端存储等待一定时间,开启自动解冻会对迁移速度有较大影响,建议先完成归档存储数据解冻后再启动迁移)。开启后,如果遇到归档类型数据,会自动解冻再进行迁移;如果遇到归档类型的对象直接跳过相应对象,系统默认对象迁移失败并记录相关信息到失败对象列表中。 error_reason
指定是否启用CDN迁移支持,若包含此字段则为支持,否则为不支持,启用CDN迁移支持后,迁移时将从CDN域名获取源端对象。 migrate_since Long 迁移指定时间(时间戳,毫秒),表示仅迁移在指定时间之后修改的源端待迁移对象。默认为0,表示不设置迁移指定时间。 最小值:0
解决方案:如果源端有新增对象,可通过增量迁移将新增对象迁移到目的端桶。如果源端扫描有问题,请提交工单。 源端对象大小>目的端对象大小 可能原因: 源端存在碎片文件。 OMS无法迁移碎片文件。 源端存在多版本对象。 OMS默认只迁移最新版本对象,暂不支持迁移多版本对象,需要客户手动搬迁。 源端云服务商与华为云对象统计规则不一致。
用户在界面输入,用于鉴权认证 否 是,使用HTTP/HTTPS数据源时为非必须 迁移任务、迁移任务组:在任务执行完成(无论成功/失败)或用户暂停后,系统自动清除。 同步任务:创建后默认保留,用户停止任务后,系统自动清除。 源端SK(Secret Key) 用户在界面输入,用于鉴权认证 否
迁移工作原理 概述 迁移流程 数据识别与准备 数据迁移 数据安全与完整性保障
示例2:启动迁移任务 场景描述 本章节指导用户通过API启动迁移任务。API的调用方法请参见如何调用API。 启动迁移任务前需要获取Token,启动迁移任务后,需要查询任务状态详情,失败或暂停中的任务才能被启动。 涉及接口 获取IAM用户Token(使用密码):用于鉴权认证。 启
为什么显示已传输量在增加,但是迁移进度没有增加? OMS对于不同的迁移方式计算迁移进度的方式不同: 文件/文件夹/对象前缀迁移:按照已传输容量计算迁移进度。 对象/URL列表迁移:按照已传输对象数量计算进度。 如果选择的是通过对象/URL列表方式迁移,可能会出现已传输量在增加,但是迁移进度没有增加的情况。
获取IAM用户Token(使用密码):用于鉴权认证。 暂停迁移任务:根据迁移任务ID暂停迁移任务。 查询指定ID的任务详情:根据迁移任务ID查询任务详情,确定迁移任务是否暂停成功。 删除迁移任务:根据迁移任务ID删除迁移任务。 操作步骤 获取IAM用户Token。 接口相关信息 URI格式:POST /v3/auth/tokens
OMS如何迁移指定时间的文件? OMS支持迁移指定修改时间后的对象,您可以在创建迁移任务/迁移任务组时,设置迁移指定时间后的对象,使用时间过滤源端待迁移对象。 选择“否”,不过滤源端待迁移对象。 选择“是”,设置迁移指定时间后,OMS服务仅迁移在指定时间之后修改的源端待迁移对象。
效。 由于华为云各服务之间存在业务交互关系,对象存储迁移服务的角色依赖其他服务的角色来实现功能。因此给用户对象存储迁移服务的角色时,需要同时授予依赖服务的角色,对象存储迁移服务的权限才能生效。 对象存储迁移服务 (OMS)的所有系统角色,参见表1。 表1 OMS系统权限 角色名称
OMS根据源端厂商对象存储服务和华为云对象存储服务接口及协议,进行认证和一致性校验,涉及MD5、SHA1、CRC64以及基于MD5的HMAC算法的使用,存在因源端发生hash碰撞,导致要迁移的数据和实际迁移的数据不一致的风险,为确保数据一致性,可以在迁移后再次对源端、目的端数据进行完整的内容校验。
迁移任务组执行失败怎么处理? 如果迁移任务组执行失败,请通过以下步骤尝试解决。 在任务组列表页面,单击迁移失败的任务组的任务数,进入迁移任务界面,页面中显示了当前迁移任务组包含的子任务。 通常,一个迁移任务组包含了多个子任务,每个子任务失败的原因可能不同,可逐个查看任务失败原因。
如何迁移根目录下的数据? 有两种方式可选择并迁移根目录下的数据: 文件/文件夹方式 在创建任务时,迁移方式选择“选择文件/文件夹”。 单击“选择”,在弹窗中勾选自己需要迁移的数据(默认展示根目录下的数据)并确认选择。 配置需要的高级参数并创建任务,即可迁移已选择的根目录数据。 对象前缀方式
迁移任务组 适用于单个桶数据量大于3 TB或对象个数大于500万的对象迁移场景,迁移任务组将源端待迁移对象智能分解到多个迁移任务中并行迁移。以组的方式进行管理,包括进度查询,暂停恢复,失败重启等。 迁移任务组相较于迁移任务,提供更快的迁移速度和可靠性,便于灵活识别异常对象并快速恢复。