存储迁移-华为云

迁移中心 MGC-NAS到NAS迁移和割接方案:操作流程

操作流程操作步骤说明准备工作注册华为账号、开通华为云，并为账户充值。获取账号迁移权限。获取目的端账号的AK/SK。在MgC控制台创建迁移项目在MgC控制台创建迁移集群。创建目的端弹性文件系统。步骤一：创建全量迁移工作流使用MgC存储迁移工作流完成源端数据的全量迁移。步骤二：创建增量迁移工作流在全量迁移完成后，再创建增量迁移工作流，进行多次增量数据迁移，以减少数据差异。步骤三：灰度切流（可选）在条件允许的情况下，建议进行灰度切流，即部分业务切换到目的端，以验证业务的连续性和数据一致性。步骤四：业务割接在多次增量迁移后，确定一个可接受的最后一次增量迁移时间窗，用于最终的业务割接。

迁移中心 MGC 存储迁移相关最佳实践

迁移中心 MGC-NAS到NAS迁移和割接方案:准备工作

准备工作华为账号准备使用MgC之前，您需要拥有一个华为账号或一个可用于访问MgC的 IAM 用户，并获取账号/IAM用户的访问密钥（AK/SK）。获取方法请参考准备工作。创建应用迁移项目在MgC控制台为本次迁移创建独立的项目，方法请参见项目管理。创建集群为本次迁移创建独立的迁移集群，方法请参见创建集群。创建弹性文件系统在目的端创建相应的弹性文件系统，用于迁移后的数据存储和管理，方法请参见创建弹性文件系统。

迁移中心 MGC 存储迁移相关最佳实践

迁移中心 MGC-如何解决迁移集群创建失败问题:解决方法

解决方法单击集群状态列的“创建失败”，出现对应的原因和详情，请根据具体的错误信息进行处理。部分常见的错误原因参见下表。如无法自行解决，请联系对应云服务技术支持人员或提交工单。原因描述处理方法 Ecs.0319 check capacity: capacity is not enough. 用户ecs配额不足申请扩大容量，增加配额。更多信息查询：弹性云服务器 E CS 错误码 Vpc.0702 query privateIps error. 参数错误请根据实际返回的Error Message检查传入的参数值是否合法。更多信息查询：虚拟私有云 VPC错误码

迁移中心 MGC 存储迁移

迁移中心 MGC-存储迁移的约束与限制有哪些？

存储迁移的约束与限制有哪些？使用迁移中心进行存储迁移的约束与限制参见表1和表2。表1 存储迁移通用约束与限制类别约束与限制多版本对象迁移默认只迁移源端多版本对象中的最新版本，不支持迁移历史版本的对象存储数据。目的端桶存储类别目的端桶的存储类别只能为标准存储或者低频访问存储。迁移完成后，可以自行修改桶的存储类别。迁移对象对象名称不能包含特殊字符。单个对象大小不能超过：500 MB x 10000 = 4.76837158203125 TB，否则可能会导致迁移失败。迁移网络支持公网、内网和专线迁移。软链接不支持源端路径为软链接路径的迁移。如果源端包含软链接，请进行如下处理：填写实际的文件路径。迁移完成后，手动在目的端创建相应的软链接。不支持软链接的迁移：NAS_SMB的迁移、NAS_NFS到OBS的迁移。 NAS_NFS到NAS_NFS的迁移，如果源端存在软链接，请启用“迁移元数据”功能。否则，迁移时会直接跳过该文件。阿里云 OSS到NAS_NFS的迁移，如果源端存在软链接，请启用“迁移元数据”功能。否则，迁移后软链接会变成普通文件，从而失去链接功能。须知：如果迁移对象中包含软链接，在迁移过程中，可能会因为软链接指向的对象尚未完全迁移到目的端导致校验失败，进而使任务失败。对于这种情况，请等待软链接指向的对象完全迁移到目的端后重试任务。硬链接 NAS_NFS到NAS_NFS的迁移，如果源端存在硬链接，请启用“迁移元数据”功能。否则，迁移时会直接跳过该文件。迁移范围支持单桶迁移和批量桶迁移。元数据迁移仅支持中文字符、英文字符、数字和中划线【-】迁移。除上述字符外，其他所有字符均不支持。中文字符：迁移过程中，会被转换成URL编码形式。注意：不支持中文标点符号迁移，由于中文标点符号不会被转换成URL编码，因此元数据中包含中文标点符号时，将无法迁移成功。英文字符、数字与中划线【-】：迁移过程中不需要进行编码转换，可以直接迁移。异构迁移不支持元数据迁移。归档数据归档类型的对象存储要实现迁移，必须预先解冻，待解冻完成后再创建迁移工作流，解冻时请注意如下事项：请务必在解冻完成后再创建迁移工作流。请根据待迁移的数据总量评估并设置解冻有效期，以防迁移期间数据再次变成归档状态。解冻操作可能会产生一定的费用，由源端云厂商收取，计费规则请咨询源端云厂商。并发子任务数用户自定义。配置的数目不能超过可用迁移节点数x10。例如：可用的迁移节点数为2，则最大子任务数配置数目需要≤20。列表迁移文件列表文件存放地址必须与目的端桶处于同一区域。列表文件类型必须为.txt，列表路径中不能包含除了.txt的其他文件/文件夹，并且该文件元数据中的“ContentType”只能为：“text/plain”。 txt文件行数不超过100000行。单个列表文件大小不能超过300 MB。列表文件存放目录下的列表文件个数不能超过10000个。列表文件必须是UTF-8无BOM格式编码格式。列表文件中每行长度不要超过65535，否则会导致迁移失败。列表文件的元数据中不能设置“ContentEncoding”，否则会导致迁移失败。列表文件中每行使用制表符（键盘上Tab键）\t分隔URL和目的端对象名称，请勿使用空格。格式为：[URL][制表符][目的端对象名称]，其中源端对象名称如果包含中文、特殊字符必须使用URL Encode对URL编码；目的端对象名称如果包含中文、特殊字符也需要使用URL Encode编码。列表文件中每行不要添加无效空格，否则会将空格作为对象名，导致迁移失败。表2 文件系统迁移约束与限制场景约束与限制源端为SMB系统不支持迁移单个文件夹下平铺超过500万个文件的场景。不支持断点续传。不支持迁移软链接。源端为NAS文件系统支持迁移的文件类型：普通文件、目录文件、软链接文件、硬链接文件。注意：文件句柄被占用或源端文件被删除，均会导致迁移失败。不支持字符设备文件、块设备文件、套接字、管道文件等特殊文件的迁移。软链接不支持元数据的迁移。父主题：存储迁移

迁移中心 MGC 存储迁移

对象存储迁移服务 OMS-什么是对象存储迁移服务

什么是对象存储迁移服务对象存储迁移服务（Object Storage Migration Service， OMS ）是一种线上数据迁移服务，帮助您将其他云服务商对象存储服务中的数据在线迁移至华为云的对象存储服务（Object Storage Service，OBS）中。目前支持亚马逊云（中国）、阿里云、微软云、百度云、华为云、金山云、优刻得、青云、七牛云、腾讯云、谷歌云平台的对象存储数据迁移。对象存储迁移服务的典型应用场景有：对象数据搬迁：将典型Web应用搬迁到华为云上时，把用户的对象存储数据搬迁到华为云中。云上容灾：出于灾备，把用户对象存储数据复制到华为云中。对象数据恢复：利用其他云服务提供商备份的数据，恢复用户在华为云丢失的对象存储数据。

对象存储迁移服务 OMS

对象存储迁移服务 OMS-隐私声明

隐私声明请您在使用我们的产品（或服务）前，仔细阅读并了解本《隐私声明》。本产品（或服务）的核心业务功能为对象存储数据迁移。为了完成核心业务功能所需，您同意授权我们收集和使用您的个人信息或个人敏感信息，包括源端云厂商AK和SK、CDN鉴权密钥、目的端华为云AK和SK，以及调用您的华为云用户ID、项目ID和账号ID。我们收集您的上述信息，将用于为您提供对象存储迁移服务。对于您的源端云厂商AK和SK、CDN鉴权密钥、目的端华为云AK和SK，系统将于完成您的迁移服务后自动删除上述信息。对于您的华为云用户ID、项目ID和账号ID，将保存至您注销华为云账号时。我们将会为您的上述信息采取相关安全保障措施，包括但不限于加密。对于您提供的上述信息，华为云不进行对外共享、转让、公开披露，除非依据您的指示或法律法规的强制性要求。您有访问、更改、删除您上述信息的权利。对于您权利的行使，请通过提交工单的方式联系我们。上述所有信息均存储于您所选择的区域隶属的国家境内。您应确保，您使用本迁移服务符合法律法规的要求。华为云仅按照您的指示，为您提供标准迁移服务，并不对您使用迁移服务的合法合规性负责。您理解上述信息均是为您提供服务之必需。如您选择不提供或不同意我们收集、使用以上这些信息，将导致您无法正常使用我们的产品（或服务），我们将无法为您服务。如您有任何疑问，可通过提交工单的方式联系我们。

对象存储迁移服务 OMS

对象存储迁移服务 OMS-约束与限制

约束与限制 OMS迁移任务限制如表1所示。表1 OMS迁移任务限制类别限制多版本对象迁移 OMS默认只迁移源端多版本对象中的最新版本，不支持迁移历史版本的对象存储数据。目的端桶存储类别目的端桶的存储类别只能为标准存储或者低频访问存储。迁移完成后，可以自行修改桶的存储类别。迁移网络仅支持公网迁移，不支持专线迁移。元数据迁移仅支持中文字符、英文字符、数字和中划线【-】迁移。除上述字符外，其他所有字符均不支持。中文字符：迁移过程中，会被转换成URL编码形式。注意：不支持中文标点符号迁移，由于中文标点符号不会被转换成URL编码，因此元数据中包含中文标点符号时，将无法迁移成功。英文字符、数字与中划线【-】：迁移过程中不需要进行编码转换，可以直接迁移。迁移范围目前单个任务（迁移任务/迁移任务组）仅支持迁移单桶数据，如果涉及多桶数据迁移，需要创建多个任务。软链接暂不支持源端软链接文件的迁移。在迁移过程中，软链接文件均会添加到失败列表中并造成迁移任务最终失败，但其中非软链接文件可正常迁移到目的端。如果源端包含软链接，请进行如下处理：填写实际的文件路径。迁移速度通常OMS的迁移速度参考值是10~20 TB每天。若需更高的迁移效率，建议使用迁移中心MgC的存储迁移工作流进行迁移。迁移中心MgC提供独享的集群资源，能够动态扩展迁移性能，最高支持20Gbit/s带宽。迁移速度受源端对象个数、大小，带宽以及公网传输距离影响，建议用户创建一个含有实际数据的迁移任务来测试迁移速度，实际最大迁移速度为单个任务平均速度的5倍（单个Region内并发任务数最大为5）。如果需要更高的并发任务数，可以使用迁移中心 MgC的存储迁移工作流来自定义并发子任务数。归档数据对于归档类型的数据，迁移前需要您进行解冻操作，待解冻完成后再创建迁移任务，解冻时请注意如下事项：请务必在解冻完成后再创建迁移任务。请根据待迁移的数据总量评估并设置解冻有效期，以防迁移期间数据再次变成归档状态。解冻操作可能会产生一定的费用，由源端云厂商收取，计费规则请咨询源端云厂商。迁移任务同一用户，单个Region内并发任务数最大为5。说明：假设分别迁移对象存储数据到华北-北京一和华南-广州时，总并发数为5*2=10个。 24小时内，单个Region内最多创建迁移任务数为5000个。迁移任务组同一用户，单个Region内并发任务组数最大为5。说明：假设分别迁移对象存储数据到华北-北京一和华南-广州时，总并发数为5*2=10个。同步任务同步任务和迁移任务、迁移任务组共用配额，优先于迁移任务、迁移任务组下发。并发执行同步中的任务数量最多为5个。对象列表文件对象列表文件大小不能超过1024MB。对象列表文件必须是“.txt”类型的文件，并且该文件元数据中的“ContentType”只能为：“text/plain”。对象列表文件必须是UTF-8无BOM格式编码格式。对象列表文件中每行只能包含一个对象名称，并且对象名称使用URL Encode编码。对象列表文件中每行不要添加无效空格，否则会将空格作为对象名，导致迁移失败。对象列表文件中每行长度不要超过65535，否则会导致迁移失败。对象列表文件的元数据中不能设置“ContentEncoding”，否则会导致迁移失败。 URL列表文件 URL列表文件大小不能超过1024MB。 URL列表文件必须是“.txt”类型的文件，并且该文件元数据中的“ContentType”只能为：“text/plain”。 URL列表文件必须是UTF-8无BOM格式编码格式。 URL列表文件中每行只能包含一个URL和目的端对象名称。 URL列表文件中每行长度不要超过65535，否则会导致迁移失败。 URL列表文件的元数据中不能设置“ContentEncoding”，否则会导致迁移失败。 URL列表文件中每行不要添加无效空格，否则会将空格作为对象名，导致迁移失败。 URL列表文件中每行使用制表符\t分隔URL和目的端对象名称，格式为：[URL][制表符][目的端对象名称]，其中源端对象名称如果包含中文、特殊字符必须使用URL Encode对URL编码；目的端对象名称如果包含中文、特殊字符也需要使用URL Encode编码。例如： http://xxx.xxx.xxx.xxx.com/doc/%e6%96%87%e4%bb%b61.txt doc/%e6%96%87%e4%bb%b61.txt http://xxx.xxx.xxx.xxx.com/doc/thefile2.txt doc/thefile2.txt http://xxx.xxx.xxx.xxx.com/the%20file.txt the%20file.txt http://xxx.xxx.xxx.xxx.com/the%20file2.txt the+file2.txt http://xxx.xxx.xxx.xxx.com/doc/thefile.txt doc/thefile.txt 注意： URL编码仅从域名后第二个字符开始，不要将协议头、域名以及域名两侧的斜线转码，否则将导致格式校验错误。 URL与目的端对象名称之间使用一个制表符（键盘上Tab键）进行分隔，请勿使用空格。以上示例中，URL所表示的文件，被复制到目的端桶后，对象会被分别命名为：doc/文件1.txt、doc/thefile2.txt、the file.txt、the file2.txt以及doc/thefile.txt。 URL列表文件中的URL需确保可通过HEAD和GET请求正常访问。失败对象列表文件单个任务失败对象列表最多记录10万个失败对象。说明：失败对象超过10万个的场景，建议基于已有失败对象列表，分析处理后重新迁移。

对象存储迁移服务 OMS

对象存储迁移服务 OMS-身份认证与访问控制:身份认证

身份认证用户访问OMS的方式包括：OMS控制台、API、SDK，无论哪种访问方式，其本质都是通过OMS提供的REST风格的API接口进行请求。 OMS的接口支持认证请求，经过认证的请求需要包含一个签名值，该签名值以请求者的访问密钥（AK/SK）作为加密因子，结合请求体携带的特定信息计算而成。通过访问密钥（AK/SK）认证方式进行认证鉴权，即使用Access Key ID（AK）/Secret Access Key（SK）加密的方法来验证某个请求发送者身份。关于访问密钥的详细介绍及获取方式，请参见访问密钥（AK/SK）。

对象存储迁移服务 OMS

对象存储迁移服务 OMS-和其他服务的关系

和其他服务的关系对象存储迁移服务与其他服务的关系如表1所示。表1 与其他服务的关系相关服务交互功能位置对象存储服务（Object Storage Service，OBS）将源端对象数据迁移至华为云创建的OBS桶中。创建单个迁移任务创建迁移任务组数据加密服务（Data Encryption Workshop，DEW）将迁移到华为云OBS桶中的文件进行KMS加密。消息通知服务（Simple Message Notification， SMN ）及时获取迁移任务的结果。云审计服务（Cloud Trace Service， CTS ）记录与对象存储迁移服务相关的操作事件，便于日后的查询、审计和回溯。查看审计日志

对象存储迁移服务 OMS

对象存储迁移服务 OMS-权限管理:OMS权限

OMS权限默认情况下，管理员创建的IAM用户没有任何权限，需要将其加入用户组，并授予用户组策略或角色，使得用户组中的用户获得对应的权限，这一过程称为授权。用户获得对应权限后就可以对云服务进行操作。访问OMS时，需要先切换至授权区域。授权时，“作用范围”需要选择“区域级项目”，在指定区域（如华北-北京1）对应的项目（cn-north-1）中设置相关权限，该权限仅对此项目生效；如果在“所有项目”中设置权限，则该权限在所有区域项目中都生效。由于华为云各服务之间存在业务交互关系，对象存储迁移服务的角色依赖其他服务的角色来实现功能。因此给用户对象存储迁移服务的角色时，需要同时授予依赖服务的角色，对象存储迁移服务的权限才能生效。对象存储迁移服务（OMS）的所有系统角色，参见表1。表1 OMS系统权限角色名称描述类别依赖关系 OMS Administrator 对象存储迁移服务所有权限。系统角色依赖OBS Administrator系统策略。

对象存储迁移服务 OMS

对象存储迁移服务 OMS-产品优势

产品优势对象存储迁移服务具备的优势主要有如下几点：简单易用对象存储迁移服务的使用方法简单，您通过登录管理控制台创建迁移任务后，即可等待系统完成迁移，中途无需额外操作。安全认证对象存储迁移服务的鉴权支持AK/SK方式，启动数据传输时会充分认证身份的合法性，避免数据被盗用。创建迁移任务时您需要输入AK/SK进行安全认证，校验成功后，系统才可以访问源端和目的端的迁移数据，从而成功创建迁移任务。迁移任务创建成功后，AK/SK会被加密存放在数据库中。加密AK/SK采用的是业界通用的高级加密标准AES（Advanced Encryption Standard）。当迁移任务失败、成功或者暂停时，会删除AK/SK。如果迁移任务处于等待状态，则AK/SK会被暂时保存。AK/SK的最大保存时间为72小时。传输加密对象存储迁移服务支持通过HTTPS加密在线传输数据，确保数据在传输过程中的安全。源端云服务提供商可能只支持HTTP在线传输，请在迁移前及时了解。存储加密对象存储迁移服务可以对迁移后存储在华为云中的对象数据进行加密，使您的对象数据存储更安全。

对象存储迁移服务 OMS

对象存储迁移服务 OMS-迁移流程

迁移流程对象存储迁移服务 OMS的迁移工作原理图，如图1所示。图1 迁移工作原理图迁移工作流程说明： OMS服务请求获取一定数量的源端对象列表。源端响应对象列表。 OMS服务请求获取源端对象元数据。源端响应对象元数据。 OMS服务请求获取目的端对象元数据。目的端响应对象元数据。根据对象元数据判断对象是否需要迁移。若迁移任务配置“同名对象覆盖方式”选择“不覆盖”或者“全覆盖”，则步骤5~7跳过。 OMS服务请求获取源端对象数据。源端响应对象数据。 OMS服务将对象数据写入目的端。目的端响应写入结果。 OMS服务请求获取源端对象元数据。源端响应对象元数据。 OMS服务请求获取目的端对象元数据。目的端响应对象元数据。通过元数据校验数据的完整性和一致性。重复步骤3~16，完成步骤1中获取的全部对象迁移工作。重复步骤1~17，完成迁移任务中的全部对象迁移工作。父主题：迁移工作原理

对象存储迁移服务 OMS 迁移工作原理

对象存储迁移服务 OMS-计费说明:计费方式

计费方式对象存储迁移服务（Object Storage Migration Service，以下简称OMS）当前处于免费期，免费期内使用OMS服务不收取任何费用。免费期结束后，OMS服务将根据您使用的迁移流量进行收费，计费方式简单灵活、易于预测。具体费用详情，请参见产品价格详情。迁移过程中会调用源端和目的端的对象存储服务的API进行数据的上传、下载，所以会产生一定的API请求及下载流量费用，具体费用说明请参见API请求次数与下载与上传流量费用。

对象存储迁移服务 OMS

对象存储迁移服务 OMS-计费说明:估算迁移计费

估算迁移计费一般情况，迁移费用可参考如下公式估算：迁移费用=调用源端API次数 x 源端API调用单价+调用目的端API次数 x 目的端API调用单价+对象总容量x 源端出口流量单价调用源端API次数=（对象总数/1000）+对象总数 x 3 调用目的端API次数=对象总数 x 4 源端出口流量单价（根据源端云服务商套餐确定）华为云只负责收取调用目的端API的费用；调用源端API的费用和源端出口流量费用均由源端云服务商收取。迁移时忽略的对象由于需要判断对象是否存在+对比数据，因此在源端和目的端均会产生API请求费用，但由于忽略对象并没有迁移，因此不会产生流量费用。

对象存储迁移服务 OMS

对象存储迁移服务 OMS-计费说明:API请求次数

API请求次数 OMS在数据迁移前需要对源端和目的端的文件进行对比；迁移时将源端数据下载后上传到目的端；迁移完成后校验文件，会产生API请求。API请求分为每个对象基本请求+ 公共请求（列举对象，上传失败对象列表，网络异常重试，自动解冻等）。不同场景下，API请求次数不同。目的端不存在源端同名对象对源端的操作迁移前判断对象是否存在+对比数据需要一次请求：head 迁移数据需要一次请求：get 迁移完成后校验数据需要一次请求：head 对目的端的操作迁移前对比数据需要一次请求（判断对象是否存在）：head 迁移数据需要一次请求：put 迁移完成后设置数据存储类型需要一次请求：put 迁移完成后校验数据需要一次请求：head 目的端存在源端同名对象（大小一致，且目的端最后修改时间晚于源端最后修改时间），重复对象，无需迁移。对源端的操作迁移前判断对象是否存在+对比数据需要一次请求：head 对目的端的操作迁移前对比数据需要一次请求（判断对象是否存在）：head 目的端存在源端同名对象（大小不一致，或源端最后修改时间晚于目的端最后修改时间），不同对象，目的端对象会被源端对象覆盖。对源端的操作迁移前判断对象是否存在+对比数据需要一次请求：head 迁移数据需要一次请求：get 迁移完成后校验数据需要一次请求：head 对目的端的操作迁移前对比数据需要一次请求（判断对象是否存在）：head 迁移数据需要一次请求：put 迁移完成后设置数据存储类型需要一次请求：put 迁移完成后校验数据需要一次请求：head 若源端需要迁移的文件大于50 MB，则迁移数据时会将文件进行分段后再上传，单个分段大小为50 MB，此时迁移数据的请求数根据迁移数据大小决定。例如：大小为200 MB的文件会被分成四段上传，源端产生2次head，4次get，目的端产生2次head，5次put（4个分片上传+一次合并）请求。 API请求的实际费用以各云服务商定价为准，华为云OBS的费用请参考产品价格详情。

对象存储迁移服务 OMS

云服务器内容精选

存储迁移

7*24

备案

专业服务

退订

建议反馈

售前咨询热线