检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
如果一直有数据写入OBS的情况下,使用OMS服务如何保证数据一致性? OMS保证迁移数据一致性的校验策略是什么? 迁移是否会影响目的端桶的已有数据 迁移限制 OMS将对象数据迁移到并行文件系统有哪些限制? 源端云服务商不在OMS支持范围,该如何迁移? 迁移时长 我如何能知道迁移任务的速度? 问题处理
同步任务用于源端变更对象主动同步的场景,通过在源端对象存储服务配置事件触发器,当出现对象新增或修改时,通过函数工作流服务,主动调用OMS服务的数据同步接口,及时将数据同步到华为云OBS侧。 目前只支持华北-北京四、华东-上海一地区。 支持的源端云服务商 同步任务支持迁移的源端云服务提供商包括:
返回结果 状态码 请求发送以后,您会收到响应,包含状态码、响应消息头和消息体。 状态码是一组从1xx到5xx的数字代码,状态码表示了请求响应的状态,完整的状态码列表请参见状态码。 对于管理员创建IAM用户接口,如果调用后返回状态码为“201”,则表示请求成功。 响应消息头 对应请
使用OMS完成源端数据的全量迁移。 多次增量迁移数据,减少源端和目的端数据差异。 多次增量迁移后,确认一个能够接受的增量迁移时间窗,停止源端业务,启动最后一次增量迁移,迁移完成后启动目的端写业务。 迁移过程中,对象存储迁移服务会调用源端云服务提供商的对象存储服务接口,所产生的费用都遵从源端云服务提供商的计费规则并由其向您收取。
对象名称写入URL列表文件,并将生成的URL列表文件存放在与目的端桶处于同一区域的OBS桶中。 创建迁移任务组:将待迁移的文件URL和目的端对象名称写入URL列表文件,并将生成的URL列表文件存放在与目的端桶处于同一区域的OBS桶指定目录(文件夹)下。指定目录(文件夹)只能存放URL列表文件。
务商对象存储服务中的数据在线迁移至华为云的对象存储服务(Object Storage Service,OBS)中。 目前支持亚马逊云(中国)、阿里云、微软云、百度云、华为云、金山云、优刻得、青云、七牛云、腾讯云、谷歌云平台的对象存储数据迁移。 对象存储迁移服务的典型应用场景有:
百度云 金山云 优刻得 HTTP/HTTPS数据源 支持的功能 功能 说明 创建迁移任务组 将一个迁移任务智能拆分为多个迁移任务,并以组的方式进行管理。 查看迁移任务组 创建迁移任务组后,您可以随时查看迁移的进度以及详情,以确定任务组的执行状态是否正常。 管理迁移任务组 创建迁移任务组
本地XML格式文件,用于保存冷归档类型文件的解冻参数。 --encoding-type 对prefix名称进行编码,取值为url。 如果不指定该选项,则表示prefix未经过编码。 --payer 请求的支付方式。 如果希望访问指定路径下的资源产生的流量、请求次数等费用由请求者支付,请将此选项的值设置为requester。
并确保:对象存在且具有访问权限”。 问题分析 出现该问题可能是因为对象文件不在源端桶的根目录下,存在目录路径。 解决方案 当对象文件存在目录路径,添加对象前缀时,需要在对象前缀前添加对象文件所在的目录路径。格式为:桶名/文件夹/对象前缀。 父主题: 异常恢复
迁移中心(Migration Center,MgC)是华为云一站式迁移和现代化平台,承载华为云迁移方法论和最佳实践,该平台提供强大的应用发现能力和资源评估能力,并且通过向导式的迁移流程,帮助您轻松将应用资源迁移到华为云。 支持特性 支持专线迁移。 支持集群扩容。 支持迁移前评估。 支持批量桶迁移。
配置方式 基于源端云服务商的对象存储服务和函数工作流服务,通过配置源端云服务商的对象存储服务和函数工作流服务来触发新增、修改对象的同步请求。 操作步骤 登录阿里云函数计算控制台,在左侧导航栏,单击函数。 在顶部菜单栏,选择地域,然后在函数页面,单击创建函数。 创建的函数需要与源端桶在同一区域。
是否必选 参数类型 描述 X-Auth-Token 是 String IAM Token认证,需要确认Token中包含的Project ID与请求URI中修改资源的Project ID匹配。 最小长度:1 最大长度:16384 表3 请求Body参数 参数 是否必选 参数类型 描述
删除同步任务 功能介绍 调用该接口删除同步任务。 正在同步的任务不允许删除,如果删除会返回失败;若要删除,请先行暂停任务。 调用方法 请参见如何调用API。 URI DELETE /v2/{project_id}/sync-tasks/{sync_task_id} 表1 路径参数
青云 百度云 金山云 优刻得 HTTP/HTTPS数据源 支持的功能 功能 说明 创建迁移任务 创建对象存储任务,对您的对象数据实施迁移。 查看迁移任务 创建迁移任务后,您可以随时查看迁移的进度以及详情,以确定任务的执行状态是否正常。 管理迁移任务 创建迁移任务后,您可以对迁移任务执行暂停/恢复、重启、删除等操作。
密钥设置的名称,例如“我的API密钥”。 创建窗口中,不填写IP白名单,否则将造成迁移节点无法访问源端对象存储服务API。 单击“提交”按钮后,系统会生成一个新的 API 密钥对,包括 API 密钥 ID 和 API 私钥。同时,会弹出一个下载链接,用于下载包含这些信息的 access_key
移任务时,在“源端配置选项”区域,元数据迁移方式选择了“保留元数据”。增量迁移时,如果源端对象仅元数据信息发生变化,对象的内容、大小并没有改变,则仅迁移改变的元数据信息,不会迁移对象内容。因此,迁移完成后,出现迁移进度显示为0%,已传输容量为0,属于正常情况。 父主题: 产品咨询
先迁源端A桶:/xxxx/xxx/file0001.txt 后迁源端B桶:/xxxx/xxx/file0001.txt,华为云H桶中后一个迁移的对象会覆盖迁移前一个被迁移的对象,即H桶中最终只保留源端B桶:/xxxx/xxx/file0001.txt这个对象。 父主题: 产品咨询
源端响应对象元数据。 OMS服务请求获取目的端对象元数据。 目的端响应对象元数据。 通过元数据校验数据的完整性和一致性。 重复步骤3~16,完成步骤1中获取的全部对象迁移工作。 重复步骤1~17,完成迁移任务中的全部对象迁移工作。 父主题: 迁移工作原理
出现该问题可能是以下原因: 由于在迁移过程中删除了目的端oms创建的文件,导致任务异常。 源端桶/目的端桶权限不足,无法读取/下载文件,导致任务迁移失败。 解决方案 如果因为迁移执行过程中删除了OMS在目的端创建的文件,导致迁移任务失败。请重新创建迁移任务/迁移任务组进行迁移。
使用OMS完成源端数据的全量迁移。迁移过程中OMS会自动识别源端和目的端的同名对象并按条件进行覆盖,具体覆盖策略请参考迁移是否会影响目的端桶的已有数据。 OMS全量迁移结束后+业务验证OK后将业务切换到华为云并停止业务向源端写数据。 迁移过程中,对象存储迁移服务会调用源端云服务提供商的对象存储