检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
华为云并行文件系统迁移教程 并行文件系统(Parallel File System)是对象存储提供的一种经过优化的高性能文件语义系统,提供毫秒级别访问时延,TB/s级别带宽和百万级别的IOPS。 作为对象存储的子产品,并行文件系统的迁移方法与对象存储迁移方法一致。 创建迁移任务可参见创建迁移任务。
创建源端和目的端的访问密钥(AK/SK)并授权 源端:源端为华为云OBS桶,检查对应账号是否有AK/SK以及列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容等权限。如果没有,请参见创建访问密钥(AK/SK)和源端桶权限获取创建AK/SK并添加权限。 目的端:请参见创建访问密钥(A
为云,还需要完成实名认证。 创建源端和目的端的访问密钥(AK/SK)并授权 源端: 如果源端为华为云OBS桶,检查对应账号是否有AK/SK以及列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容等权限。如果没有,请参见创建访问密钥(AK/SK)和源端桶权限获取创建AK/SK并添加权限。
据的完整性校验。详细介绍请参见一致性校验策略。 个人数据加密保护:为了确保您个人数据的安全性,OMS系统通过加密存储个人数据、控制个人数据访问权限以及记录操作日志等方法,防止个人数据泄露,保证您的个人数据安全。详细介绍请参见个人数据保护机制。 父主题: 安全
使用对象存储迁移服务前,请参考本节介绍完成准备工作。 注册华为账号 使用华为云之前,需要注册华为账号并开通华为云,还需要完成实名认证。 创建华为云的访问密钥(AK/SK)并授权 目的端华为云:参见创建访问密钥(AK/SK)和目的端桶权限获取创建AK/SK并添加权限。 创建目的端桶 创建用于存放迁移数据的桶,具体操作参见创建桶。
已在OBS服务中创建桶。 操作步骤 使用工具或在控制台恢复源端归档存储,建议恢复时间设置较长。 源端为其他云服务厂商时,具体解冻方式以源端云服务商为准。 源端为华为云时,使用obsutil恢复归档存储对象后重新迁移。 登录管理控制台。 单击“服务列表”,选择“迁移 > 对象存储迁移服务”。 进入“对象存储迁移服务”页面。
批量操作还原归档的对象。 以下提供通过AWS S3控制台恢复归档对象的简单指引,更多操作请参见恢复已归档的对象。 Amazon S3控制台 登录到AWS控制台。 在左侧导航窗格中,选择“存储桶”。 在桶列表中,选择想要还原对象所在桶的名称。 在对象列表中,选择要还原的一个或多个对象,选择“操作>启动还原”。
安全 身份认证与访问控制 数据保护技术 风险提示 审计与日志
使用“回源配置方案”迁移增量对象数据 本节指导用户使用回源配置方案迁移增量对象数据。 优势 此方案优势在于: 业务零中断,增量迁移间未同步的数据通过回源配置保证用户无感知。 可靠性高,割接前可提前验证,迁移后可校验。 操作流程 “回源配置方案”迁移增量对象数据流程图,如图1所示。
校验策略为该对象是否同时满足以下条件,不满足则校验失败,并记录到失败对象列表中。 目的端对象的加密状态与任务是否开启KMS加密的状态一致,状态不一致的处理方法请参见:如何解决KMS状态错误导致的迁移任务失败? 源端与目的端对象的大小一致。 目的端对象的最后修改时间不早于源端对象的最后修改时间。 父主题: 产品咨询
大批量数据迁移场景使用,优先选择此方案。此方案受OBS限制,具体的约束请见数据回源。 业务零中断,增量迁移间未同步的数据通过回源配置保证用户无感知。 可靠性高:割接前用户业务校验充分,增量迁移时全量扫描校验确保数据无遗漏。 使用“源端/目的端双写方案”方案迁移增量对象数据 适用大批量数据迁移且
在创建单个迁移任务中,确认迁移信息步骤增加任务状态及ID说明。 2019-04-29 第六次正式发布。 在对象存储迁移流程中,增加流程各环节的内容链接。 删除“创建访问密钥(AK/SK)”和“创建桶”两节。 在创建单个迁移任务中,调整选择服务区域的步骤顺序。 在创建单个迁移任务中,“源端参数”增加“解冻归档数据”。
迁移任务 适用于单个桶数据量不超过3 TB或对象个数不超过500万的对象存储迁移场景,通过创建对象存储迁移任务,可将对象数据进行快速迁移。 对客户开放迁移任务API,客户可根据自身业务诉求进行定制化开发,例如周期性定时创建同步任务。 创建迁移任务 查看迁移任务 管理迁移任务
权限管理 创建用户并使用OMS
查看审计日志 通过云审计服务,您可以记录与对象存储迁移服务相关的操作事件,如下列各表所示。 您可以查看这些操作,以评估对服务的影响,具体请参见查看追踪事件。 在云审计的事件查询条件中,“事件来源”选择“OMS”。 表1 云审计服务支持的对象存储迁移服务资源类型列表 资源名称 资源类型
同步任务 创建同步任务 源端配置同步请求 监控同步任务状态
更新创建迁移任务组操作步骤。 2022-08-27 第十六次正式发布。 更新创建迁移任务组中的前提条件。 2022-07-28 第十五次正式发布。 更新创建用户并使用OMS。 2021-06-21 第十四次正式发布。 优化同步任务章节。 2021-03-24 第十三次正式发布。 优化源端配置同步请求章节。
迁移任务组 适用于单个桶数据量大于3 TB或对象个数大于500万的对象迁移场景,迁移任务组将源端待迁移对象智能分解到多个迁移任务中并行迁移。以组的方式进行管理,包括进度查询,暂停恢复,失败重启等。 迁移任务组相较于迁移任务,提供更快的迁移速度和可靠性,便于灵活识别异常对象并快速恢复。
移。 自定义域名迁移 支持使用源端桶自定义域名迁移。 记录失败对象 支持记录迁移失败对象,以及重传这些失败对象。 流量控制 支持对不同时段设置最大流量带宽。 断点续传 如果出现短暂的网络中断,支持手动重启迁移任务,从中断的位置继续开始迁移任务,已迁移完成的数据无需重新迁移。 结果通知
使用“源端/目的端双写方案”方案迁移增量对象数据 操作场景 本章节指导用户使用“源端/目的端双写方案”方案迁移增量对象数据。此方案优势在于可以确保业务零中断。 主要迁移步骤如下所示: 用户在全量迁移前,需配置业务同时向源端和目的端写数据,保证增量数据在两端都存在。 使用OMS完成