检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
部署迁移工具Edge 使用迁移中心的大数据血缘功能前，需要先在可以访问源端元数据来源的环境中部署迁移工具Edge。 迁移工具Edge不具备自动重启功能，严禁在任务执行期间重启Edge，以避免任务失败。 操作步骤 安装Edge的方法请参考下载并安装Edge。 安装成功后，将Edge
大数据-Hive Metastore凭证文件获取方法 参考访问FusionInsight Manager登录Manager，进入系统页面。 在左侧导航栏，选择“权限>用户”，进入用户页面。 在用户列表，选择要在Edge添加凭证的用户，单击操作列“更多>下载认证凭据”，可以下载凭证文件中的krb5
工具采集 创建工具采集任务 采集器管理 采集器参数配置说明
大数据数据迁移 数据迁移失败，提示超过DLI网管流控上限 部分表迁移失败，报错：CRC Check failed 部分表迁移失败，报错：no more field nodes for for field %s and vector %s
大数据校验 Hive校验结果中的源端数据和目的端数据显示为“0”或“-1” Hive校验的sum统计结果显示未达标 DLI校验任务出现大量失败表 Delta 数据量较大时，如何优化校验任务？
创建工具采集任务 Edge提供了多种类型的线下采集器，用于采集线下网络环境中的资源规格和配置信息。本节为您介绍创建线下工具采集任务的方法。 前提条件 已下载并安装Edge，并完成用户注册。 已安装待采集资源类型的采集器。 操作步骤 使用注册的用户名、密码登录Edge控制台，在左侧
单击任务框中的“导入>工具采集结果”，弹出导入工具采集结果窗口。 图1 导入工具采集结果 单击导入窗口的“添加文件”，将工具采集结果的json文件上传至迁移中心。 上传成功后，单击“确认”按钮，系统自动开始采集。 您可以在任务列表页面，查看任务状态。 如果任务状态为“失败”，
新增大数据校验数据连接时，凭证列表数据缺失 问题描述 进行大数据校验，在新增连接时，凭证的下拉列表中没有数据或没有连接类型所对应的凭证。 问题分析 出现该问题，可能的原因如下： 凭证添加错误：在Edge添加的凭证类型与新增连接所需的凭证类型不对应。 凭证同步失败：在Edge添加的凭证未能同步到MgC。
大数据血缘 部署迁移工具Edge 采集元数据 血缘采集
Edge工具所在主机IP 27080 HTTPS Edge服务监听端口，该端口用于人机交互 否 口令认证 HTTPS Edge工具所在主机 Edge工具所在主机IP NA Edge工具所在主机 Edge工具所在主机IP 5678 TCP Edge服务监听端口，该端口用于采集器与Edge内部交互
大数据校验概述 迁移中心 MgC为多种大数据计算/存储引擎，如Hive、Hbase、Doris和MaxCompute等，提供了一致性校验方法。通过一致性校验，您可以更加放心地进行大数据迁移操作，确保数据的准确性和可靠性，从而避免了数据丢失或不一致的风险。 校验方式说明 全量校验：
大数据校验 大数据校验概述 准备工作 创建源端连接 创建表组并添加数据表 创建目的端连接 创建统计任务并执行校验 查看并导出校验结果 自定义参数说明
大数据数据迁移 使用须知 准备工作 创建源端连接 创建目的端连接 迁移实施 查看并导出执行结果 自定义参数说明
在左侧导航栏选择“实施>大数据校验”，进入大数据校验页面。首次使用大数据校验功能时，需要先选择并启用迁移工具。单击“选择并启用迁移工具”按钮，弹出选择迁移工具窗口。在下拉列表中，选择步骤3.与迁移中心连接成功的Edge。 在进行大数据校验时，请确保迁移工具Edge一直处于在线并启用状态。
已下载并安装Edge，并完成用户注册。 离线升级 使用注册的用户名、密码登录Edge控制台，在左侧导航树选择“采集工具管理”，进入应用关联采集器页面。 可以查看已安装的采集器类型、版本以及安装路径等信息。 在迁移中心管理控制台的迁移工具页面，下载最新版本的采集器安装包，并放入Edge安装目录的根目录下（如C:\Ed
在左侧导航栏选择“实施>大数据校验”，进入大数据校验页面。首次使用大数据校验功能时，需要先选择并启用迁移工具。单击“选择并启用迁移工具”按钮，弹出选择迁移工具窗口。在下拉列表中，选择步骤3.与迁移中心连接成功的Edge。 在进行大数据校验时，请确保迁移工具Edge一直处于在线并启用状态。
Nacos采集器（app-discovery-nacos） 应用配置采集器（app-discovery-application-config） 父主题： 工具采集
配置OBS桶 设置用于存放大数据校验任务日志文件和内容校验结果的OBS桶（以下称为日志桶），实现对日志和内容校验结果的有效管理和分析。设置了日志桶后，会默认使用大数据校验中的日志上传功能，将日志数据和内容校验结果上传到指定的OBS桶中。 权限要求 请确保添加的目的端凭证最少拥有日志桶的如下操作权限：
单击页面右上角的“连接管理”按钮，进入连接管理页面。 首次使用大数据数据迁移功能时，需要先启用迁移工具Edge。单击页面左上角的“修改”或单击“选择迁移工具”按钮，弹出选择迁移工具窗口。在下拉列表中，选择在完成准备工作时与迁移中心连接成功的Edge。 在进行大数据数据迁移时，请确保迁移工具Edge一直处于在线并启用状态。
如迁移工具状态为“在线”、“已启用”，代表该工具已被用于对数相关操作，单击“确定”按钮，继续使用该工具进行后续操作。 如迁移工具状态为“在线”、“未启用”，代表该工具尚未被用于对数，单击“启用”按钮，启用该工具进行后续操作。 如迁移工具状态为“离线”、“已删除”，代表该工具已被删
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
