检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
华为云并行文件系统迁移教程 并行文件系统(Parallel File System)是对象存储提供的一种经过优化的高性能文件语义系统,提供毫秒级别访问时延,TB/s级别带宽和百万级别的IOPS。 作为对象存储的子产品,并行文件系统的迁移方法与对象存储迁移方法一致。 创建迁移任务可参见创建迁移任务。
迁移任务失败,传输中断问题该怎么解决? 问题描述 迁移任务执行失败,失败对象列表中失败原因为:UPLOAD_DST_OBJ_FAILURE,错误描述信息为-1-OBSClientUploadError。 问题分析 该问题可能是由于对象迁移过程中网络波动导致的迁移任务失败。 解决方案 方案一:手动重启迁移任务。
将文件对象写入OMS服务所支持Region内的对象存储服务OBS桶中。 场景二:Region内迁移 OMS服务通过内部网络从源端对象存储服务读取文件对象,并将文件对象写入OMS服务所支持Region内的对象存储服务OBS桶中。
跳转到OBS控制台,下载相应的txt文件,查看忽略对象列表。 说明: 忽略对象列表路径说明:oms/task/任务名称/skip_object_lists/时间戳.skip_list.txt。 失败对象数大于0 在任务详情中找到“失败对象列表路径”,单击路径链接跳转到OBS控制台
目的端选择参数 参数 说明 目的端访问密钥(Access Key) 华为云的访问密钥(AK)。最大长度是100个字符。 目的端私有访问密钥(Secret Access Key) 华为云的私有访问密钥(SK),与AK相匹配。最大长度是100个字符。 输入访问密钥和私有访问密钥后,请单击“列举目的端桶”。
举对象,获取对象元数据,获取对象内容。获取方式参见源端桶权限获取。 目的端桶需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容,上传对象,列举已上传段,取回归档存储对象。获取方式参见目的端桶权限获取。 已在OBS服务中创建桶。 操作步骤 登录管理控制台。
Object接口解冻归档对象,更多详情,请参见金山云对象存储Restore Object接口相关文档。 解冻完成后,请参考金山云KS3迁移至华为云OBS教程,将数据迁移到华为云OBS。 父主题: 归档数据迁移方案
迁移成功,但是迁移进度显示为0%;总容量有数据,但是已传输容量显示为0。 问题分析 该现象一般出现在增量迁移场景。创建增量迁移任务时,在“源端配置选项”区域,元数据迁移方式选择了“保留元数据”。增量迁移时,如果源端对象仅元数据信息发生变化,对象的内容、大小并没有改变,则仅迁移改变的元数据信息,不会迁移对象内容
过在源端对象存储服务配置事件触发器,当出现对象新增或修改时,通过函数工作流服务,主动调用OMS服务的数据同步接口,及时将数据同步到华为云OBS侧。 目前只支持华北-北京四、华东-上海一地区。 支持的源端云服务商 同步任务支持迁移的源端云服务提供商包括: 华为云 亚马逊云(中国) 阿里云
endpoint:填写Bucket所在地域的Endpoint。您也可以增加http://或https://指定ossutil访问OSS使用的协议,默认使用HTTP协议。例如:使用HTTPS协议访问深圳的Bucket,设置为:https://oss-cn-shenzhen.aliyuncs.com。
数据保护技术 OMS通过以下方式,保障数据迁移的安全性和完整性。 完整性校验:数据迁移完成后,默认通过对象大小/最后修改时间完成数据的完整性校验。详细介绍请参见一致性校验策略。 个人数据加密保护:为了确保您个人数据的安全性,OMS系统通过加密存储个人数据、控制个人数据访问权限以及记录操作日
源端响应对象元数据。 OMS服务请求获取目的端对象元数据。 目的端响应对象元数据。 根据对象元数据判断对象是否需要迁移。 若迁移任务配置“同名对象覆盖方式”选择“不覆盖”或者“全覆盖”,则步骤5~7跳过。 OMS服务请求获取源端对象数据。 源端响应对象数据。 OMS服务将对象数据写入目的端。
高频常见问题 产品咨询 迁移对源端数据是否有影响?源端数据改变对迁移结果有什么影响? 迁移完成后,如何修改已迁移对象路径? 如果一直有数据写入OBS的情况下,使用OMS服务如何保证数据一致性? OMS保证迁移数据一致性的校验策略是什么? 迁移是否会影响目的端桶的已有数据 迁移限制 OM
0天。 更多详情,请参见百度云BOS RestoreObject接口相关文档。 解冻完成后,请参考百度云BOS迁移至华为云OBS教程,将数据迁移到华为云OBS。 父主题: 归档数据迁移方案
获取对象列表的方法请参见下表。 如果... 那么... 已迁移对象数大于0 在任务详情中找到“成功对象列表路径”,单击路径链接跳转到OBS控制台,下载相应的txt文件,查看成功对象列表。 说明: 成功对象列表路径说明:oms/task_group/任务组ID/success_
举对象,获取对象元数据,获取对象内容。获取方式参见源端桶权限获取。 目的端桶需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容,上传对象,列举已上传段,取回归档存储对象。获取方式参见目的端桶权限获取。 已在OBS服务中创建桶。 操作步骤 登录管理控制台。
跳转到OBS控制台,下载相应的txt文件,查看忽略对象列表。 说明: 忽略对象列表路径说明:oms/task/任务名称/skip_object_lists/时间戳.skip_list.txt。 失败对象数大于0 在任务详情中找到“失败对象列表路径”,单击路径链接跳转到OBS控制台
象迁移完成后,都会对比源端和目的端是否一致。相比于迁移大对象,迁移同样大小的数据量,会有更多的列举对象和对比对象操作带来的时间消耗。 解决方式:通过创建迁移任务组,将源端待迁移对象智能拆分到多个迁移任务中并行迁移,提升迁移速度。 迁移数量较少的大对象 当迁移的对象数量较少(小于5
任务组的迁移速度可以在“迁移任务组”界面上查看实时的任务组迁移速度。 若您在创建迁移任务时选择使用SMN消息通知功能,迁移任务结果也将通过电子邮件、短信以及自定义URL等方式发送给您。 界面的迁移速度的统计会有一些延迟,仅供参考。 父主题: 迁移时长
迁移过程中,不会修改目的端桶的已有数据。 迁移完成后,不会删除目的端桶的已有数据。 存在同名对象,会根据创建任务/任务组时,高级选项中的同名对象覆盖方式来执行覆盖规则。规则说明参见表1。 表1 同名对象覆盖规则说明 覆盖规则 说明 大小/最后修改时间对比覆盖 对于源端和目的端存在的同名对象