检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
骤2.创建的项目。 在元数据采集区域，单击“创建连接”，右侧弹出创建连接窗口。 连接类型选择“MaxCompute”，单击“下一步”。 根据MaxCompute连接参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 MaxCompute连接参数配置说明
表中选择步骤2.创建的项目。 在元数据采集区域，单击“创建连接”，右侧弹出创建连接窗口。 连接类型选择“Hive Metastore”，单击“下一步”。 根据Hive Metastore连接参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 Hive
骤2.创建的项目。 在元数据采集区域，单击“创建连接”，右侧弹出创建连接窗口。 连接类型选择“MaxCompute”，单击“下一步”。 根据MaxCompute连接参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 MaxCompute连接参数配置说明
表组名 用户自定义 元数据连接 选择步骤8.创建的元数据连接。 注意： 表组中的所有表必须来源于同一个元数据来源。 校验标准 选择可以接受的数据差异最大值（即错误容忍度）。MgC提供了多种类型的对数标准可供选择，关于对数标准的详细说明，可以单击新增表组弹窗中的“查看更多”进行查看。 说明（可选）
在大数据校验页面的功能入口区域，单击“连接管理”，进入连接管理页面。 单击页面右上角的“新增连接”，右侧弹出新增连接窗口。连接类型选择“ClickHouse”，单击“下一步”，进入详细配置页面。 根据ClickHouse组件参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表4 ClickHouse组件参数配置说明
在大数据校验页面的功能入口区域，单击“连接管理”，进入连接管理页面。 单击页面右上角的“新增连接”，右侧弹出新增连接窗口。连接类型选择“ClickHouse”，单击“下一步”，进入详细配置页面。 根据ClickHouse组件参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表4 ClickHouse组件参数配置说明
在大数据校验页面的功能入口区域，单击“连接管理”，进入连接管理页面。 单击页面右上角的“新增连接”，右侧弹出新增连接窗口。连接类型选择“ClickHouse”，单击“下一步”，进入详细配置页面。 根据ClickHouse组件参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表4 ClickHouse组件参数配置说明
择步骤2.创建的项目。 在元数据采集区域，单击“创建连接”，右侧弹出创建连接窗口。 连接类型选择“Delta Lake（有元数据）”，单击“下一步”。 根据表1，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 Delta Lake（有元数据）连接参数配置说明 参数
与MgC建立连接的Edge工具。 执行机凭证 选择步骤4.在Edge侧添加的源端Delta Lake执行机凭证。 执行机IP 填写连接执行机的IP地址。 执行机连接端口 填写连接执行机的端口，默认为22端口。 Spark客户端目录 填写Spark客户端的bin目录的绝对路径 环境变量地址
请填写正确的表头。 校验模板失败，表头无效。 请检查是否修改了模板中非自定义的表头。 存在未记录在Domain Sheet的域名。 请将导入文件中的Application Sheet和MQ Sheet出现的域名填入Domain Sheet中。 导入文件格式错误。 检查是否改动了导入模板Sheet，或重新下载模板填写。
使用迁移中心的大数据血缘功能前，需要先在可以访问源端元数据来源的环境中部署迁移工具Edge。 迁移工具Edge不具备自动重启功能，严禁在任务执行期间重启Edge，以避免任务失败。 操作步骤 安装Edge的方法请参考下载并安装Edge。 安装成功后，将Edge与迁移中心进行连接，方法请参考连接迁移中心。
互，从而获取必要的数据。 同时，为了确保客户端能够成功连接到集群并执行任务，需要确保安装客户端的主机hosts文件中包含了集群所有节点的主机名和IP地址，以及需要集群的安全组入方向规则将所有端口对客户端节点放开，具体操作请参考添加安全组规则。 安装MRS客户端的方法请参考安装客户端（3
迁移工具Edge是一款专为配合MgC设计的软件，用于源端资源发现与信息采集，同时还提供了工作流模块，用于支持云端迁移工作流任务的执行。 操作步骤 建议在源端内网环境中准备一台Windows主机，用于安装迁移工具Edge，对该主机的要求以及Edge的安装方法请参见安装Windows版本的Edge。 不建议
大数据数据迁移 使用须知 准备工作 创建源端连接 创建目的端连接 迁移实施 自定义参数说明
在迁移工作流详情页面，可以查看该主机迁移工作流的配置信息和资源迁移进度。当资源的迁移进度完成“启动迁移Agent”这一步后，会自动在SMS控制台的迁移服务器列表创建一条迁移任务，关于MgC和SMS主机资源之间的映射关系请查看MgC主机工作流资源与SMS迁移服务器列表之间的映射关系。 将鼠标放至主机迁
大数据校验 大数据校验概述 准备工作 创建元数据连接 创建表组并添加数据表 创建连接 创建统计任务并执行校验 查看并导出校验结果
TB，否则可能会导致迁移失败。 迁移网络 支持公网、内网和专线迁移。 软链接 不支持源端路径为软链接路径的迁移。如果源端包含软链接，请进行如下处理： 填写实际的文件路径。 迁移完成后，手动在目的端创建相应的软链接。 不支持软连接的迁移：NAS_SMB的迁移、NAS_NFS到OBS的迁移。 NAS_NFS到NAS_NFS的迁移和阿里云
采集原理：连接数据库，基于数据库的查询语句进行采集。 中间件采集 权限要求： Redis：使用具有基本访问权限的普通账号即可。 Kafka：需要具备访问所有topic的权限以及对topic的容量等信息进行访问的权限。 采集原理：利用Java语言编写的应用程序，集成对应中间件的SDK（Software
文件类型 参数 配置说明 血缘模板 文件 将血缘模板下载到本地，并填写模板内的参数。其中，如下参数值为必填字段。 目标数据库(TargetDataset) 目标表(TargetTable) 目标连接名称(TargetConnectionName) 目标组件类型(TargetComponentType)
云边协同 连接迁移中心 添加/修改华为云凭证 添加资源凭证 配置OBS桶 设备管理 事件记录
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
