检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
最佳实践汇总 本文汇总了基于对象存储迁移服务(Object Storage Migration Service,OMS)常见应用场景的操作实践,每个实践我们提供详细的方案描述和操作指导,用于指导您快速实现对象存储数据迁移。 表1 OMS最佳实践一览表 最佳实践 使用场景 优势 使用“回源配置方案”迁移增量对象数据
同步任务 适用场景 同步任务用于源端变更对象主动同步的场景,通过在源端对象存储服务配置事件触发器,当出现对象新增或修改时,通过函数工作流服务,主动调用OMS服务的数据同步接口,及时将数据同步到华为云OBS侧。 目前只支持华北-北京四、华东-上海一地区。 支持的源端云服务商 同步任务支持迁移的源端云服务提供商包括:
OMS将对象数据迁移到并行文件系统有以下限制: 若对象名以/结尾,则对象大小必须为0,否则不支持迁移。 对象名中不能出现连续/,例如:test//test。 在同一层级中,文件和文件夹的名称不能相同。 父主题: 各云服务商迁移教程
务的合法合规性负责。 您理解上述信息均是为您提供服务之必需。如您选择不提供或不同意我们收集、使用以上这些信息,将导致您无法正常使用我们的产品(或服务),我们将无法为您服务。 如您有任何疑问,可通过提交工单的方式联系我们。
解决方案:如果源端有新增对象,可通过增量迁移将新增对象迁移到目的端桶。如果源端扫描有问题,请提交工单。 源端对象大小>目的端对象大小 可能原因: 源端存在碎片文件。 OMS无法迁移碎片文件。 源端存在多版本对象。 OMS默认只迁移最新版本对象,暂不支持迁移多版本对象,需要客户手动搬迁。 源端云服务商与华为云对象统计规则不一致。
当迁移的对象数量较少(小于50个)且大小很大时,由于只会有一个线程迁移单个对象,对象数又较少,导致迁移的并发低,所以迁移速度会较慢。 这种情况请耐心等待,无法提升迁移的速度。 大对象会进行分片上传,上传完成一个分片才会对该分片的迁移量计入速度计算,速度计算结果是不太准确的,可能导致不同时间段速率忽高忽低的情况。
希望他们拥有对象存储迁移服务(OMS)的使用权限,但是不希望他们拥有删除其他服务(如ECS)等高危操作的权限,那么您可以使用IAM为开发人员创建用户,通过授予仅能使用OMS,但是不允许删除ECS的权限,控制他们对OMS资源的使用范围。 如果华为云账号已经能满足您的要求,不需要创建
域的OBS桶指定目录(文件夹)下。指定目录(文件夹)只能存放URL列表文件。 请确保URL列表文件所在桶与目的端桶处于同一区域,否则后续将无法选择对象列表文件。 请确保URL列表文件中的URL可通过HEAD和GET请求正常访问。 父主题: HTTP/HTTPS 数据源迁移至华为云OBS教程
bandwidth_policy 否 JSONArray 配置流量控制策略。数组中一个元素对应一个时段的最大带宽,最多允许5个时段,且时段不能重叠。具体参见表3。 表3 bandwidth_policy数据结构 参数 是否必选 参数类型 描述 start 是 String 流量控
钥”窗口。 在创建窗口中,输入您想要为 API 密钥设置的名称,例如“我的API密钥”。 创建窗口中,不填写IP白名单,否则将造成迁移节点无法访问源端对象存储服务API。 单击“提交”按钮后,系统会生成一个新的 API 密钥对,包括 API 密钥 ID 和 API 私钥。同时,会
导致迁移速度缓慢,影响您的整体迁移进度。 在OBS桶中仅开启归档数据直读功能,仅支持直接下载归档存储数据,并未修改相应存储类型,因此OMS无法正常直接下载对象。 归档存储开启直读,和使用OMS自动恢复归档存储,源端对象存储服务都会收取相应费用,详见产品价格详情。 迁移归档数据时,
什么是对象存储迁移服务 对象存储迁移服务(Object Storage Migration Service,OMS)是一种线上数据迁移服务,帮助您将其他云服务商对象存储服务中的数据在线迁移至华为云的对象存储服务(Object Storage Service,OBS)中。 目前支持
修订记录 发布日期 修订记录 2024-03-22 第二十三次正式发布。 新增迁移工作原理 新增迁移网络模型 2023-10-17 第二十二次正式发布。 更新计费说明中的API请求次数。 2023-06-20 第二十一次正式发布。 约束与限制新增“迁移范围”、“迁移速度”、“归档数据”限制说明。
of BandwidthPolicyDto objects 配置流量控制策略。数组中一个元素对应一个时段的最大带宽,最多允许5个时段,且时段不能重叠。 数组长度:0 - 5 表4 BandwidthPolicyDto 参数 是否必选 参数类型 描述 end 是 String 流量控
of BandwidthPolicyDto objects 配置流量控制策略。数组中一个元素对应一个时段的最大带宽,最多允许5个时段,且时段不能重叠。 数组长度:0 - 5 表4 BandwidthPolicyDto 参数 是否必选 参数类型 描述 end 是 String 流量控
存储类型介绍 各云厂商的对象存储服务针对用户业务对存储性能、成本的不同诉求,将对象的存储级别进行了区分,区分的普遍依据是对象的访问频度、访问时延、最低存储时间、最低存储单元、数据可靠性、数据可用性等。根据以上依据,华为云OBS提供了以下四种存储类型: 标准存储 访问时延低和吞吐量