检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据保护技术 OMS通过以下方式,保障数据迁移的安全性和完整性。 完整性校验:数据迁移完成后,默认通过对象大小/最后修改时间完成数据的完整性校验。详细介绍请参见一致性校验策略。 个人数据加密保护:为了确保您个人数据的安全性,OMS系统通过加密存储个人数据、控制个人数据访问权限以及
用户在界面输入,用于鉴权认证 否 是 存储方式 对象存储迁移服务通过加密算法对以下用户个人敏感数据进行加密存储: 源端AK/SK 源端CDN秘钥 目的端AK/SK 访问权限控制 用户个人数据通过加密后存储在对象存储迁移服务数据库中,数据库的访问需要通过白名单的认证与授权。 API接口限制
如果一直有数据写入OBS的情况下,使用OMS服务如何保证数据一致性? 该问题可分为以下两种情况来说明: 如何保证增量数据如何迁移过来? 参见增量迁移对象数据。 源端数据有更新,如何同步过来? 需要重新全量迁移,OMS会自动识别更新后对象进行覆盖,具体覆盖条件请参考迁移是否会影响目的端桶的已有数据。
归档数据迁移方案 本节介绍各云服务商存在归档数据时,如何解冻并迁移到华为云OBS。 华为云OBS 阿里云OSS 腾讯云COS 百度云BOS 七牛云Kodo 金山云KS3 优刻得US3 亚马逊云S3 微软云Blob
数据迁移 根据迁移配置,华为云OMS服务会开始从源端存储系统拉取数据。同时,服务会确保数据的完整性和一致性,避免在迁移过程中出现数据丢失或损坏的情况。服务还支持断点续传功能,当迁移过程中出现网络中断或其他异常情况时,服务可以从断点处恢复传输,确保数据的完整性和迁移的连续性。 父主题:
选择“是”,设置迁移指定时间后,OMS服务仅迁移在指定时间之后修改的源端待迁移对象。 设置“目的端配置选项”区域参数。 服务端加密。目的端为并行文件系统(PFS)时,不支持KMS加密。 不勾选“KMS”,迁移后对象均不加密。 勾选“KMS”,所有对象在迁移到OBS桶后都将被加密存储。 使用KMS服务端加密可能会降低迁移速率10%左右。
获取创建AK/SK并添加权限。 创建目的端桶 创建用于存放迁移数据的桶,具体操作参见创建桶。 解冻源端归档数据 当源端对象存储有数据处于归档状态,请参考归档数据迁移方案进行迁移。
均不支持。 服务端加密 如果勾选“KMS”,所有数据在迁移到OBS服务后都将被加密存储。 说明: 使用KMS服务端加密可能会降低迁移速率10%左右。 当前区域支持KMS加密时,此参数才可用。 解冻归档数据 归档类型的对象存储要实现迁移,必须预先解冻。当您的源端云服务提供商支持自动解冻归档类型数据时,可以勾选此选项。
数据识别与准备 在迁移开始前,华为云OMS服务会先对源端存储系统中的数据进行识别,包括对象大小、最后修改时间以及位置等关键信息。基于这些信息,服务会为用户生成一个对应的迁移任务配置,确保迁移过程的高效性和准确性。 父主题: 迁移工作原理
本教程讲解了如何将优刻得对象存储(US3)上的数据迁移到华为云对象存储 OBS。 华为云对象存储迁移服务(Object Storage Migration Service,OMS)是一种线上数据迁移服务,可以帮助您将其他云服务商对象存储服务中的数据在线迁移至华为云的对象存储服务(Object
创建目的端桶 创建用于存放迁移数据的桶,具体操作参见创建桶。 创建URL列表文件并上传至OBS桶 创建迁移任务:将待迁移的文件URL和目的端对象名称写入URL列表文件,并将生成的URL列表文件存放在与目的端桶处于同一区域的OBS桶中。 创建迁移任务组:将待迁移的文件URL和目的端对
解冻归档数据 默认“否”。不建议开启,迁移数据中有归档数据时,优先选择使用OBS的解冻工具将数据解冻后再进行迁移。具体操作参见恢复归档存储对象。 选择“否”,迁移数据中有归档数据时,则直接判定该对象迁移失败并跳过,继续迁移其余数据。 选择“是”,迁移数据中有归档数据时,会自动解冻归档类型数据并迁移。
选择“是”,设置迁移指定时间后,OMS服务仅迁移在指定时间之后修改的源端待迁移对象。 设置“目的端配置选项”区域参数。 服务端加密。目的端为并行文件系统(PFS)时,不支持KMS加密。 不勾选“KMS”,迁移后对象均不加密。 勾选“KMS”,所有对象在迁移到OBS桶后都将被加密存储。 使用KMS服务端加密可能会降低迁移速率10%左右。
①全量迁移:将T1时间点之前的源端存量数据全量迁移到华为云(此时客户业务系统还会继续往源端桶新增业务数据)。 ②业务验证:验证迁移数据 + 验证华为侧数据业务(数据读取和写入)。 T2时间:启动首次增量数据迁移、评估数据增量速度。 ③增量迁移:将T1~T2时间段生成的新增数据迁移到华为云。
查询租户配额数据 功能介绍 查询指定Domain的配额数据。 URI GET /v1/{domain_id}/objectstorage/quotas 参数说明请参见表1。 表1 参数说明 参数 是否必选 描述 domain_id 是 租户ID。 请求消息 请求参数 无。 响应消息
nt-Length和Last-Modified与源端元数据中值对比。 如图1、图2所示,如果Content-Length与元数据大小不一致,优先排查源端CDN是否配置图片压缩,确认后解除相关配置,重新迁移即可。 图1 元数据 图2 CDN配置图片压缩后 如果源端最后修改时间晚于C
可以通过华为云对象存储服务提供的客户端工具OBS Browser+来移动迁移的数据。 请参见下载OBS Browser+获取工具。 登录工具,选中要移动的数据(单个或多个目录或文件),单击“移动”。 进入存储数据的桶,单击“粘贴”即可把之前选中的数据移动过来,原来桶中的数据已不存在。 对象较多
迁移。 登录管理控制台。 单击“服务列表”,选择“迁移 > 对象存储迁移服务”。 进入“对象存储迁移服务”页面。 如果迁移数据量大于3TB,或者迁移对象数多于500万,建议参考创建迁移任务组。 少量数据建议参考创建迁移任务。 需开启“解冻归档数据”功能,遇到用户遗漏的归档对象,OMS支持自动恢复。
OMS保证迁移数据一致性的校验策略是什么? 在迁移过程中,每迁移完一个对象,会对该对象进行一致性校验,如果不一致则会将该对象记录到失败对象列表中。OMS会累积记录迁移失败对象个数,可以通过任务详情查看具体的迁移数据统计。 校验策略为该对象是否同时满足以下条件,不满足则校验失败,并记录到失败对象列表中。
设置“目的端配置选项”区域参数。 服务端加密。目的端为并行文件系统(PFS)时,不支持KMS加密。 不勾选“KMS”,迁移后对象均不加密。 勾选“KMS”,所有对象在迁移到OBS桶后都将被加密存储。 使用KMS服务端加密可能会降低迁移速率10%左右。 当前区域支持KMS加密时,此参数才可用。 保存到指定前缀。