检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用迁移中心进行迁移前，需要做哪些准备工作？ 注册华为账号开通华为云，并实名认证。 如果使用IAM用户登录MgC进行操作，需要为IAM用户配置迁移中心权限。 获取账号/IAM用户的AK/SK。 父主题： 产品咨询
在创建Hive Metastore连接前，需要先获取连接Hive Metastore的IP地址和端口号。 在创建MaxCompute连接前，需要先获取MaxCompute服务所在地域的Endpoint信息。 在创建Doris连接前，需要先获取Doris集群部署的服务器IP地址和端口。
创建执行机连接 执行机是获取数据的任务执行单元，需要分别与源端和目的端的执行机建立连接，然后执行数据统计，统计结果将用于数据校验。 以下大数据组件需要通过创建执行机连接来进行数据校验： Hive Metastore Delta Lake（有元数据） Delta Lake（无元数据）
内网采集权限与原理 主机深度采集 权限要求： Windows系统：需要提供具有Administrator权限的账号。 Linux系统：需要提供root账号。 采集原理： Windows系统：通过WinRM服务从Edge访问Windows主机，执行PowerShell脚本采集系统信息。
”，授权对象为Edge所在主机的公网IP，端口选择全部。 入方向规则设置完成后，单击“确定”。 步骤五：搭建大数据数据迁移环境 参考大数据数据迁移的准备工作，完成迁移环境搭建。其中，购买ECS选择在阿里云购买一台ECS实例，要求该ECS实例的私有IP地址能够通过SNAT访问外部网
MaxCompute参数 非必填参数，一般为空。如有需要，可参考MaxCompute参数文档进行配置。 数据范围 按库筛选 即按项目筛选，在数据库参数框中输入项目名即可。如果数据库中有不需要迁移的表，可以下载CSV格式的“排除表”模板，参考b.~e.在模板中添加不需要迁移的表信息，然后上传至MgC。
创建目的端连接 创建目的端连接是为了将源端数据写入到华为云DLI。 使用须知 元数据迁移：只需要配置一条连接到DLI SQL队列的连接。 数据迁移：需要配置两条连接，分别为连接到DLI SQL队列的连接和连接到DLI通用队列的连接。 前提条件 已完成准备工作。 操作步骤 登录迁移中心控制台。
（可选）清理集群 当您完成数据迁移并且集群不再需要时，可以直接删除闲置的集群以释放资源。 在左侧导航栏选择“部署>迁移集群”，进入迁移集群页面。 在集群列表，选择需要清理的集群，单击操作列的“更多 > 删除”，弹出删除集群窗口。 选择是否同步删除关联资源后，单击“确认”，删除集群。
MgC进行数据一致性校验的步骤和方法。 DeltaLake不存在元数据，无法通过数据湖元数据同步方式进行数据采集，需要通过导入数据的方式获取元数据信息。 准备工作 需要先在源端内网环境中安装用于配合数据校验的工具Edge并注册用户，方法请参见安装Linux版本的Edge工具。 操作步骤
出现该提示是因为Edge无法访问到源端。 源端为Windows系统时需要对安装Edge主机的IP开放5985端口。 源端为Linux系统时需要对安装Edge主机的IP开放22端口。 源端Windows服务器需要关闭防火墙、杀毒软件，并开启winrm服务（在powershell命令窗口中输入winrm
插件，会导致新下发的主机生成随机密码，从而与源端密码不一致，因此迁移前需要将 Cloudbase-Init 插件卸载。 账号余额 由于AZ迁移需要进行创建存储库、服务器云备份、整机镜像、按需创建目的端等操作，因此迁移时需要确保账号余额充足。 父主题： 可用区迁移
辑，通过Excel编辑并保存的模板文件无法被MgC识别。 DLI队列连接选择 元数据迁移和数据迁移需要使用不同的DLI队列连接，元数据迁移需要使用DLI SQL队列连接，数据迁移需要使用DLI 通用队列连接。配置错误的队列连接类型会导致迁移任务失败，因此在配置任务时，必须仔细检查并确保任务类型与队列类型相匹配。
数据源采集失败，如何重新采集？ 采集失败的数据源，处理完失败原因后，需要删除后通过新增数据源重新采集。 在任务列表页面，单击采集任务操作列的“查看”，进入任务详情页面。 单击采集项操作列的“新增数据源”，弹出新增数据源窗口。 选择区域和资源类型，单击“确认”按钮。新增数据源成功，系统开始对新增的数据源进行采集。
HBase版本间数据迁移后，使用迁移中心 MgC进行数据一致性校验的步骤和方法。 准备工作 需要先在源端内网环境中安装用于配合数据校验的工具Edge并注册用户，方法请参见安装Linux版本的Edge工具。 需要将源端和目的端所有节点的主机名和IP地址映射添加到安装Edge主机的/etc/hosts文件中，配置连接才能连接成功。
按钮，应用创建成功，进入关联资源页面。 如果已经进行过资源采集，并且需要将采集到的资源关联到创建的应用，请勾选需要关联到应用的资源，单击“关联到应用”按钮，完成应用创建和资源关联。 如果还未进行资源采集或暂不需要关联资源，单击“暂不关联资源”按钮，完成应用创建。后续在资源列表中也可以进行关联操作。
余参数配置需要与步骤1.中的第一个元数据连接保持一致。 “N”需要根据您现有的ECS资源和表的数量来确定。在ECS资源充足且表数量非常多的情况下，增加元数据连接的数量可以提高数据校验的效率。 为避免数据重复，除了步骤1.创建的第一个元数据连接以外，新增的元数据连接不需要创建同步任务进行元数据采集。
按钮，应用创建成功，进入关联资源页面。 如果已经进行过资源采集，并且需要将采集到的资源关联到创建的应用，请勾选需要关联到应用的资源，单击“关联到应用”按钮，完成应用创建和资源关联。 如果还未进行资源采集或暂不需要关联资源，单击“暂不关联资源”按钮，完成应用创建。后续在资源列表中也可以进行关联操作。
器。其中网络配置选择上一步创建的虚拟私有云和子网。该ECS主机还需要满足以下条件： 可以访问外网（公网），并检查是否能够访问MgC和IoTDA服务的域名，具体需要检查的域名请查看域名列表。 安全组的出方向规则中，需要包含8883端口。 操作系统为：CentOS 8.x。 推荐规格不小于8U16G。
须知： 使用该功能前，需要前往SMN控制台创建主题。方法请参考创建SMN主题。 使用该功能可能产生少量费用，具体费用由SMN服务结算。详情请查看SMN计费说明。 数据筛选 统计范围 选择需要对哪段时间内的数据进行校验的。 OBS桶配置检查 - 如果需要将任务日志文件和内容校验结
线上采集的凭证仅在线上环境中保存。 操作权限与最小权限原则：无论哪种采集方式，都需要具备相应的操作权限，并且遵循最小权限原则，即只授予完成特定任务所需的最小权限。 MgC服务侧权限要求：云账号需要具备对应权限才能使用MgC和访问MgC调研数据，MgC相关权限请参考权限管理。 数
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
