检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
本文介绍如何使用迁移中心（MgC）的迁移方案配置功能和文件存储批量迁移模板，以高效完成文件存储的批量迁移工作。 源端支持的类型：NAS_NFS_V3_MOUNT、NAS_NFS_V3_PROTOCOL、NAS_GFS。 目的端支持的类型：NAS_NFS_V3_MOUNT。 约束与限制 存储迁移的约束与限制
nfig\kube-config\xxx.yaml 配置文件内容获取方法如下： 在需要采集的k8s集群服务器上，使用如下命令，将获取到的信息粘贴到一个自建的yaml文件里，再将yaml文件的绝对路径填写到此处。 cat ~/.kube/config 须知： 一个k8s集群只需要获取一个配置信息。
接口与容器集群交互，采集容器集群的详细信息，包括容器的详细规格、节点配置、持久卷配置以及网络策略等。 信息上报给迁移中心：MgC Agent将采集到的信息上报给迁移中心。 迁移中心解析并保存信息：迁移中心接收到上报的信息后，会进行解析，提取出有用的信息，并将其保存到数据库中。 准备工作
当您启用特定功能时，需要您确认并同意授予必要的权限给MgC，以便我们能够为您提供完整的服务。本节为您介绍需要进行权限委托的场景以及自定义策略详情。 委托授权策略说明： 创建自定义策略：如果您尚未设定任何自定义的权限委托策略，系统会自动为您创建一个标准的自定义策略。 更新自定义策略：对于已经存在的自定义策略，系
选择在Edge添加的目的端ClickHouse凭证。凭证的添加方法请参考添加资源凭证中的大数据-ClickHouse。 安全集群 选择是否部署在安全集群下。 ClickHouse Server IP 填写连接到目的端ClickHouse服务器的IP地址。通常是运行ClickHouse的主机IP地址。
软链接 不支持源端路径为软链接路径的迁移。如果源端包含软链接，请进行如下处理： 填写实际的文件路径。 迁移完成后，手动在目的端创建相应的软链接。 不支持软链接的迁移：NAS_SMB的迁移、NAS_NFS到OBS的迁移。 NAS_NFS到NAS_NFS的迁移，如果源端存在软链接，请启用
执行命令后，将生成3个文件的共享下载链接并保存在test2.txt文件中。 打开生成的URL列表文件（在本文示例中为test2.txt），您将看到每个文件的共享下载链接。通过浏览器尝试访问这些链接，以验证生成的URL是否有效。 如果链接无法访问，请检查文件的访问权限是否设置为可读，并重新生成链接。
本节介绍为文件存储批量迁移配置迁移方案的方法。 文件存储批量迁移：适用于源端有多个文件存储地址内的资源需要迁移的场景。如果只有单个文件存储地址内的资源需要迁移，请直接创建单个文件存储迁移工作流。 准备工作 创建迁移项目。 在MgC控制台为本次迁移创建独立的项目，方法请参见项目管理。 创建迁移集群。
全量校验：全量对比所有数据，适用于需要对比历史数据的场景。 日级增量校验：依靠元数据中的创建或更新时间，获取数据变化（增量）分区，再进行校验。支持单日或连续多日增量数据的统计，是最常用的校验方式。 小时级增量校验：依靠元数据中的创建或更新时间，获取数据变化（增量）分区，再进行校验
本节介绍为文件存储批量迁移配置迁移方案的方法。 文件存储批量迁移：适用于源端有多个文件存储地址内的资源需要迁移的场景。如果只有单个文件存储地址内的资源需要迁移，请直接创建单个文件存储迁移工作流。 准备工作 创建迁移项目。 在MgC控制台为本次迁移创建独立的项目，方法请参见项目管理。 创建迁移集群。
保存文件列表的本地文件名（例如：s3url.txt）。 打开生成的列表文件（在本文示例中为s3url.txt），您将看到桶内所有文件的共享s3地址列表。将“s3://及其之前的所有参数”替换为“http://<DOMAIN>:<PORT>/”，以生成可通过浏览器访问的URL（即文
根据所选的区域，自动查询账号在该区域下的项目。 区域：选择需要校验的数据所在区域/项目。 项目：选择需要校验的数据所在项目。 集群ID：输入需要校验的数据所在集群ID。 如果所选凭证与登录迁移中心 MgC的账号凭证不同，请手动输入如下参数信息： 区域ID：输入需要校验的数据所在区
输入目的端接收文件的路径，格式为：/文件夹。 当输入的是/时，表示迁移到目的端的根目录。 根据表4，进行迁移配置。 表4 迁移配置参数说明 参数 子参数 说明 迁移任务类型 全量迁移 迁移源端桶/文件夹内的全部数据。 列表迁移 通过列表文件过滤迁移，只迁移列表文件中的对象。 在“列表
Agent在进行资源采集时，会根据不同的资源类型，收集对应的凭证信息。涉及的资源类型和凭证信息包括：主机凭证、数据库凭证、容器凭证、VMware平台凭证、租户AKSK。 通信矩阵 通信矩阵列出了使用MgC Agent需要开放的端口，以及端口使用的传输层协议、认证方式、加密方式、用途等信息。
当您启用特定功能时，需要您确认并同意授予必要的权限给MgC，以便我们能够为您提供完整的服务。本节为您介绍需要进行权限委托的场景以及自定义策略详情。 委托授权策略说明： 创建自定义策略：如果您尚未设定任何自定义的权限委托策略，系统会自动为您创建一个标准的自定义策略。 更新自定义策略：对于已经存在的自定义策略，系
执行机凭证 选择执行机的登录凭证。凭证的添加方法请参考添加资源凭证中的大数据-执行机。 执行机IP 填写连接执行机的IP地址。 执行机连接端口 填写连接执行机的端口。 Spark客户端目录 填写Spark客户端的安装目录路径。 环境变量地址 填写环境变量文件（配置文件）的绝对路径，例如：
您关心的是分区内数据的最新状态或最近一段时间内的数据变更，可以选择“更新时间”作为筛选条件。 创建时间：指分区被首次创建时的时间戳。如果您关心的是分区从创建开始到某个时间点内的数据，可以选择“创建时间”作为筛选条件。 分区上限：用于限制查询或处理的分区数量，避免不必要的全表扫描或
您关心的是分区内数据的最新状态或最近一段时间内的数据变更，可以选择“更新时间”作为筛选条件。 创建时间：指分区被首次创建时的时间戳。如果您关心的是分区从创建开始到某个时间点内的数据，可以选择“创建时间”作为筛选条件。 分区上限：用于限制查询或处理的分区数量，避免不必要的全表扫描或
否 使用SSL连接，填写CA证书文件（.pem）路径。建议使用一组特定的CA证书，而不是由知名机构颁发签署的服务器证书。 ssl_client_private_key_password 否 如果证书密钥文件中包含的私钥已加密，则需要填写密码或口令短语。 ssl_client_certificate_key_file
用户自定义 元数据连接 选择步骤12.创建的元数据连接。 注意： 表组中的所有表必须来源于同一个元数据来源。 校验标准 选择可以接受的数据差异最大值（即错误容忍度）。MgC提供了多种类型的对数标准可供选择，关于对数标准的详细说明，可以单击新增表组弹窗中的“查看更多”进行查看。 说明（可选）
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
