检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
华为云对象存储迁移服务(Object Storage Migration Service,OMS)是一种线上数据迁移服务,可以帮助您将其他云服务商对象存储服务中的数据在线迁移至华为云的对象存储服务(Object Storage Service,OBS)中,也可以在对象存储 OBS
目的端桶存储类型为归档存储,迁移到目的端桶的数据存储类型是什么类型? 迁移任务与迁移任务组的适用场景是什么? 是否支持同步源端删除操作? OMS保证迁移数据一致性的校验策略是什么? 迁移完成后,为什么目的端桶对象个数/大小与源端桶对象个数/大小不一致?
安全 身份认证与访问控制 数据保护技术 风险提示 审计与日志
适用场景 适用于单个桶数据量不超过3 TB或对象个数不超过500万的对象存储迁移场景,通过创建对象存储迁移任务,可将对象数据进行快速迁移。 如果单个桶数据量大于3 TB或对象个数大于500万,建议您创建迁移任务组来进行迁移。
客户需要在源端云服务提供商的函数工作流服务中,创建OMS数据同步函数,然后在对象存储服务中设置基于函数工作流服务的事件通知,从而完成源端对象存储服务,函数工作流服务以及OMS服务之间的数据链调用配置。
迁移任务 适用于单个桶数据量不超过3 TB或对象个数不超过500万的对象存储迁移场景,通过创建对象存储迁移任务,可将对象数据进行快速迁移。 对客户开放迁移任务API,客户可根据自身业务诉求进行定制化开发,例如周期性定时创建同步任务。 创建迁移任务 查看迁移任务 管理迁移任务
迁移工作原理 概述 迁移流程 数据识别与准备 数据迁移 数据安全与完整性保障
目的端桶需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容,上传对象,列举已上传段,取回归档存储对象。获取方式参见目的端桶权限获取。 已在OBS服务中创建桶。 您过去24小时内已创建的迁移任务未满1000000个。
新增使用“源端/目的端双写方案”方案迁移增量对象数据。 新增使用"多次同步方案"迁移增量对象数据。 新增迁移归档存储数据。 2019-08-31 第一次正式发布。
对象列表文件的元数据中不能设置“ContentEncoding”,否则会导致迁移失败。 对象列表文件如果是归档数据,迁移前需要先手动恢复,对象存储迁移服务才能访问和获取。 选择元数据迁移方式。 选择“忽略元数据”,OMS只迁移源端ContentType元数据。
源端对象存储访问频率过高导致迁移失败怎么办? 迁移任务执行失败怎么办? 迁移任务组执行失败怎么处理? SMN消息通知功能无法正常使用怎么办? 如何解决KMS状态错误导致的迁移任务失败? 迁移失败后提示“无法读取归档类型数据,请解冻数据后进行迁移”该如何处理?
表1 OMS迁移任务限制 类别 限制 多版本对象迁移 OMS默认只迁移源端多版本对象中的最新版本,不支持迁移历史版本的对象存储数据。 目的端桶存储类别 目的端桶的存储类别只能为标准存储或者低频访问存储。迁移完成后,可以自行修改桶的存储类别。
历史API 查询API版本 创建任务 删除任务 启动任务 停止任务 修改流量控制策略 查询某个租户的所有任务 查询某个租户的任务总数 查询指定ID的任务 查询租户配额数据
源端桶对应账户需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容。获取方式参见源端桶权限获取。 目的端桶权限获取 目的端桶需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容,上传对象,列举已上传段,取回归档存储对象。
解冻归档数据 对于归档类型的对象存储,支持自动解冻该对象后进行迁移。 自定义域名迁移 支持使用源端桶自定义域名迁移。 记录失败对象 支持记录迁移失败对象,以及重传这些失败对象。 流量控制 支持对不同时段设置最大流量带宽。
开启后,如果有迁移失败对象,会在目的端存储失败对象信息。 表3 src_node数据结构 参数 是否必选 参数类型 描述 region 是 String 源端桶所处的区域。 ak 是 String 源端桶的AK(最大长度100个字符)。
迁移限制 OMS将对象数据迁移到并行文件系统有哪些限制? 迁移并行文件系统内的对象数据有哪些限制? 创建迁移任务时提示“您选择的目的端桶所在区域与控制台Region不一致,请选择所在区域为xxx的桶或切换控制台Region为xxx”该如何处理?
新增OMS保证迁移数据一致性的校验策略是什么?章节。 2021-03-31 第十三次正式发布。 新增迁移任务与迁移任务组的适用场景是什么?章节。 新增目的端桶存储类型为归档存储,迁移到目的端桶的数据存储类型是什么类型?章节。 优化迁移任务执行失败怎么办?章节。
业务割接方案最佳实践 使用“回源配置方案”迁移增量对象数据 使用“源端/目的端双写方案”方案迁移增量对象数据 使用"多次同步方案"迁移增量对象数据
如果桶内数据容量超过3TB,数量超过500万个,推荐您创建迁移任务组进行迁移。系统会根据桶内对象的存量和数量分布,自动划分为多个迁移任务,提高迁移效率、减少迁移时间。 父主题: 产品咨询