检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Service,OMS)常见应用场景的操作实践,每个实践我们提供详细的方案描述和操作指导,用于指导您快速实现对象存储数据迁移。 表1 OMS最佳实践一览表 最佳实践 使用场景 优势 使用“回源配置方案”迁移增量对象数据 大批量数据迁移场景使用,优先选择此方案。此方案受OBS限制,具体的约束请见数据回源。
象同名时,通过对比源端和目的端对象大小和最后修改时间,判断是否覆盖目的端,需满足源端/目的端对象的加密状态一致。源端与目的端同名对象大小不相同,或目的端对象的最后修改时间晚于源端对象的最后修改时间(源端较新),覆盖目的端。 CRC64_COMPARISON_OVERWRITE:C
如何查看同步任务中迁移了哪些对象? 本文介绍如何查看同步任务的详细信息和获取迁移对象列表的方法。 目前只支持华北-北京四地区。 登录管理控制台。 在左侧服务列表中,选择“对象存储迁移服务 OMS”,进入对象存储迁移服务页面。 在导航树单击同步任务,进入同步任务界面。 单击需要查看的同步任务ID,右侧弹出同步任务
同步任务用于源端变更对象主动同步的场景,通过在源端对象存储服务配置事件触发器,当出现对象新增或修改时,通过函数工作流服务,主动调用OMS服务的数据同步接口,及时将数据同步到华为云OBS侧。 目前只支持华北-北京四、华东-上海一地区。 支持的源端云服务商 同步任务支持迁移的源端云服务提供商包括:
使用OMS完成源端数据的全量迁移。 多次增量迁移数据,减少源端和目的端数据差异。 多次增量迁移后,确认一个能够接受的增量迁移时间窗,停止源端业务,启动最后一次增量迁移,迁移完成后启动目的端写业务。 迁移过程中,对象存储迁移服务会调用源端云服务提供商的对象存储服务接口,所产生的费用都遵从源端云服务提供商的计费规则并由其向您收取。
对象名称写入URL列表文件,并将生成的URL列表文件存放在与目的端桶处于同一区域的OBS桶中。 创建迁移任务组:将待迁移的文件URL和目的端对象名称写入URL列表文件,并将生成的URL列表文件存放在与目的端桶处于同一区域的OBS桶指定目录(文件夹)下。指定目录(文件夹)只能存放URL列表文件。
--parallel 10 以上示例中的“bucket”需要替换为实际的存储空间名。 以上示例中的“test”需要替换为实际的文件/文件夹。 --parallel用于指定批量激活并发数,默认值为10。 更多详情,请参见优刻得对象存储US3CLI命令行工具中的restore相关内容。 解冻
Change the object names or the path for storing it. 用于存储迁移对象的路径太长。 请更改要迁移的对象的名称或路径。 200 TRF.0061 There is a problem with the destination object
示例3:暂停并删除迁移任务 场景描述 本章节指导用户通过API暂停并删除迁移任务。API的调用方法请参见如何调用API。 删除迁移任务前,需要获取Token并暂停迁移任务,暂停迁移任务后,需查询任务状态详情,当迁移任务暂停后,才能删除迁移任务。 涉及接口 获取IAM用户Token(使用密码):用于鉴权认证。
本地XML格式文件,用于保存冷归档类型文件的解冻参数。 --encoding-type 对prefix名称进行编码,取值为url。 如果不指定该选项,则表示prefix未经过编码。 --payer 请求的支付方式。 如果希望访问指定路径下的资源产生的流量、请求次数等费用由请求者支付,请将此选项的值设置为requester。
青云 百度云 金山云 优刻得 HTTP/HTTPS数据源 支持的功能 功能 说明 创建迁移任务 创建对象存储任务,对您的对象数据实施迁移。 查看迁移任务 创建迁移任务后,您可以随时查看迁移的进度以及详情,以确定任务的执行状态是否正常。 管理迁移任务 创建迁移任务后,您可以对迁移任务执行暂停/恢复、重启、删除等操作。
基于源端云服务商的对象存储服务和函数工作流服务,通过配置源端云服务商的对象存储服务和函数工作流服务来触发新增、修改对象的同步请求。 操作步骤 登录腾讯云函数服务 Serverless 控制台,在左侧导航栏,单击函数服务。 在页面上方选择地域,单击新建,进入新建页面。 创建的函数需要与源端桶在同一区域。
源端同步请求配置方式 基于源端云服务提供商的对象存储服务和函数工作流服务:通过配置源端云服务提供商的对象存储服务和函数工作流服务来触发新增、修改对象的同步请求。 客户需要在源端云服务提供商的函数工作流服务中,创建OMS数据同步函数,然后在对象存储服务中设置基于函数工作流服务的事件通知,从而完成源端对
先迁源端A桶:/xxxx/xxx/file0001.txt 后迁源端B桶:/xxxx/xxx/file0001.txt,华为云H桶中后一个迁移的对象会覆盖迁移前一个被迁移的对象,即H桶中最终只保留源端B桶:/xxxx/xxx/file0001.txt这个对象。 父主题: 产品咨询
密钥设置的名称,例如“我的API密钥”。 创建窗口中,不填写IP白名单,否则将造成迁移节点无法访问源端对象存储服务API。 单击“提交”按钮后,系统会生成一个新的 API 密钥对,包括 API 密钥 ID 和 API 私钥。同时,会弹出一个下载链接,用于下载包含这些信息的 access_key
百度云 金山云 优刻得 HTTP/HTTPS数据源 支持的功能 功能 说明 创建迁移任务组 将一个迁移任务智能拆分为多个迁移任务,并以组的方式进行管理。 查看迁移任务组 创建迁移任务组后,您可以随时查看迁移的进度以及详情,以确定任务组的执行状态是否正常。 管理迁移任务组 创建迁移任务组
概述 对于OMS不适用的数据迁移场景(约束与限制),华为云另外提供了迁移中心MgC进行数据迁移,您可以根据具体迁移场景选择迁移方式。 表1 存储迁移工具 迁移工具 迁移网络 支持迁移的源端存储类型 支持特性 迁移中心MgC 公网/专线 华为云 OBS 阿里云 OSS 百度云 BOS
出现该问题可能是以下原因: 由于在迁移过程中删除了目的端oms创建的文件,导致任务异常。 源端桶/目的端桶权限不足,无法读取/下载文件,导致任务迁移失败。 解决方案 如果因为迁移执行过程中删除了OMS在目的端创建的文件,导致迁移任务失败。请重新创建迁移任务/迁移任务组进行迁移。
使用OMS完成源端数据的全量迁移。迁移过程中OMS会自动识别源端和目的端的同名对象并按条件进行覆盖,具体覆盖策略请参考迁移是否会影响目的端桶的已有数据。 OMS全量迁移结束后+业务验证OK后将业务切换到华为云并停止业务向源端写数据。 迁移过程中,对象存储迁移服务会调用源端云服务提供商的对象存储
并确保:对象存在且具有访问权限”。 问题分析 出现该问题可能是因为对象文件不在源端桶的根目录下,存在目录路径。 解决方案 当对象文件存在目录路径,添加对象前缀时,需要在对象前缀前添加对象文件所在的目录路径。格式为:桶名/文件夹/对象前缀。 父主题: 异常恢复