检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
txt文件,查看忽略对象列表。 说明: 忽略对象列表路径说明:oms/task/任务名称/skip_object_lists/时间戳.skip_list.txt。 失败对象数大于0 在任务详情中找到“失败对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看失败对象列表。
ListFile object 列表文件配置,当task_type为list或url_list时,list_file为必选参数。 表6 ListFile 参数 参数类型 描述 list_file_key String 对象列表文件或URL列表文件对象名。 最小长度:1 最大长度:1024
代表待迁移的文件夹,非“/”结尾的字符串代表待迁移的文件。); 任务类型为前缀迁移任务时,表示待迁移前缀。 整桶迁移时,此参数设置为[""]。 最小长度:0 最大长度:1024 数组长度:0 - 500 list_file 否 ListFile object 列表文件配置,当ta
迁移任务组的目的桶存储类型为非标准存储时,也会导致迁移失败。这时,可以在OBS中,将目的桶存储类型修改为标准存储后,再创建迁移任务组。 迁移任务组会将列表文件临时存放在目的桶的oms/路径下,如果目的桶为非标准存储,迁移节点将无法正常读取该路径下的列表文件,导致迁移失败。 父主题: 异常恢复
查看迁移记录,并获取对象列表。 如果... 那么... 已迁移对象数大于0 在任务详情中找到“成功对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看成功对象列表。 说明: 成功对象列表路径说明:oms/task_group/任务组ID/success_object_lists/任务名称/时间戳
迁移过程中,会生成迁移记录如成功对象、失败对象、忽略对象等列表文件,存放在您的目的桶中。 获取对象列表的方法请参见下表。 如果... 那么... 已迁移对象数大于0 在任务详情中找到“成功对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看成功对象列表。 说明: 成功对象列表路
、HTTP/HTTPS数据源迁移。 逻辑架构图 图1 存储迁移逻辑架构图 迁移流程实施 准备工作 创建目的端对象桶或者弹性文件系统。 评估集群 根据源端文件数量,自行评估集群大小及规格,将用于工作流中新建集群。 开始配置工作流 基于存储迁移工作流模板配置更加详细的参数,帮助您完成迁移工作。
数计算服务方式),以完成对源端新增、修改对象数据的同步迁移。 源端同步请求配置条件 实时获取源端新增、修改对象名称。 调用OMS同步接口,将源端变化对象传递给对象存储迁移服务,从而完成源端同步迁移。 源端同步请求配置方式 基于源端云服务提供商的对象存储服务和函数工作流服务:通过配
自动识别源端和目的端的同名对象并按条件进行覆盖,具体覆盖策略请参考迁移是否会影响目的端桶的已有数据。 OMS全量迁移结束后+业务验证OK后将业务切换到华为云并停止业务向源端写数据。 迁移过程中,对象存储迁移服务会调用源端云服务提供商的对象存储服务接口,所产生的费用都遵从源端云服务提供商的计费规则并由其向您收取。
导致迁移时间较长,推荐您提前进行解冻操作,待解冻完成后再创建迁移任务。 七牛云对象存储Kodo,可通过控制台解冻归档文件,也可通过调用Object接口解冻归档文件。具体操作请参见七牛云Kodo归档数据迁移方案。 若您源端有解冻中的数据,待解冻完成后再进行迁移,否则这些数据会迁移失败。
长导致迁移时间较长,推荐您提前进行解冻操作,待解冻完成后再创建迁移任务。百度云BOS提供了RestoreObject来解冻归档文件,目前仅支持解冻指定文件,不支持批量解冻。具体操作请参见百度云BOS归档数据迁移方案相关文档。 若您源端有解冻中的数据,待解冻完成后再进行迁移,否则这些数据会迁移失败。
迁移阿里云数据时,对象名称中包含“/”的对象均迁移失败,其余对象迁移成功 输入对象前缀时,提示“无法访问对象,请检查并确保:对象存在且具有访问权限” 迁移并行文件系统对象时,一致性校验失败如何处理? 无法下载桶对象,OMS也无法迁移 迁移任务失败,传输中断问题该怎么解决?
T1时间:启动全量迁移、华为侧业务验证。 ①全量迁移:将T1时间点之前的源端存量数据全量迁移到华为云(此时客户业务系统还会继续往源端桶新增业务数据)。 ②业务验证:验证迁移数据 + 验证华为侧数据业务(数据读取和写入)。 T2时间:启动首次增量数据迁移、评估数据增量速度。 ③增量迁移:将T1~T2时间段生成的新增数据迁移到华为云。
云、七牛云、腾讯云、谷歌云平台的对象存储数据迁移。 对象存储迁移服务的典型应用场景有: 对象数据搬迁:将典型Web应用搬迁到华为云上时,把用户的对象存储数据搬迁到华为云中。 云上容灾:出于灾备,把用户对象存储数据复制到华为云中。 对象数据恢复:利用其他云服务提供商备份的数据,恢复用户在华为云丢失的对象存储数据。
登录阿里云OSS控制台。 在左侧导航树,单击“Bucket列表”,进入Bucket列表页面。 单击待迁移的Bucket桶名称,默认进入Bucket桶的“文件管理”页面。 在左侧导航树,单击基础设置>静态页面,进入静态页面区域。 在静态页面区域,单击“设置”按钮。 删除“默认首页”填写的参数,子目录首页选择不开通,单击“保存”。
OMS迁移大对象时,会通过分片传输保证可靠性,并在迁移完成后对比大小和修改时间。如果存在迁移中修改某个特定分片,且满足如下条件: 1. 修改后文件大小一致 ; 2. 源端对象最后修改时间早于目的端对象最后修改时间。 最终会导致数据不一致。 删除数据: 源端的删除操作OMS不会同步到目的端,需要对删除的对象单独处理。
如迁移用户未加入用户组,请进行如下操作。 创建用户组,并给用户组授权自定义策略,详细步骤参见创建用户组并授权。 将用户添加到用户组,用户将拥有用户组相应的权限(即自定义策略),详细步骤请参见用户组添加用户。 迁移用户的“访问方式”必须同时勾选“编程访问”和“管理控制台访问”。 授权后需等待15-30分钟才可生效。
ListFile object 列表文件配置,当task_type为list或url_list时,list_file为必选参数。 表8 ListFile 参数 参数类型 描述 list_file_key String 对象列表文件或URL列表文件对象名。 最小长度:1 最大长度:1024
OMS迁移,解冻时间长导致迁移时间较长,推荐您提前进行解冻操作,待解冻完成后再创建迁移任务。阿里云OSS提供了ossutil工具来解冻归档文件,支持解冻指定前缀的归档类型对象。具体操作请参见阿里云OSS归档数据迁移方案。 若您源端有解冻中的数据,待解冻完成后再进行迁移,否则这些数据会迁移失败。
迁移任务组 适用场景 适用于单个桶数据量大于3 TB或对象个数大于500万的对象迁移场景,迁移任务组将源端待迁移对象智能分解到多个迁移任务中并行迁移。 支持的源端云服务商和数据类型 迁移任务支持的源端云服务商和数据类型包括: 华为云 亚马逊云(中国) 阿里云 微软云 腾讯云 谷歌云