检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
参考项目管理。 准备迁移工具Edge 在启用大数据校验功能前，需要先在源端环境中安装用于配合大数据校验的迁移工具Edge。大数据校验场景仅支持Linux版本的Edge，安装方法请参考下载并安装Linux版本Edge。安装成功后，将Edge与迁移中心进行连接，连接方法请参考连接迁移中心。
在源端详情区域，根据实际情况，选择源端平台和源端类型，并输入源端文件个数、总文件大小。 在目的端详情区域，选择目的端区域和目的端类型。 在高级特性选择网络模式、偏好设置，并输入期望迁移时间。 配置完以上参数后，单击“创建评估”按钮。系统会根据配置参数，并给出不同的迁移方案。 父主题： 调研评估
安全特性 采集安全性 本地导出 数据上传 数据线上存储 数据分析和呈现 采集时长受控：采集任务在有限的时间内完成，采集避免长时间占用系统资源。 加密保存凭证：所有用于数据采集的凭证都经过加密处理，以保护凭证的安全。线上采集的凭证仅在线上环境中保存。 操作权限与最小权限原则：无论哪
源端需要访问的域名取决于实际的目的端Region，各Region域名可查看终端节点。 例如，目的端为华南-广州，则域名为：https://ecs.cn-south-1.myhuaweicloud.com:443 IMS服务 源端需要访问的域名取决于实际的目的端Region，各Region域名可查看终端节点。
会出现同名对象。 不覆盖：第一个同名对象迁移到OBS后，后续同名对象（无论URL是否相同）直接跳过不会被迁移，只保留第一个迁移的同名对象。 直接覆盖：后一个迁移的同名对象会覆盖前一个迁移的同名对象，只保留最后一个迁移的同名对象。 条件覆盖：对于后续迁移的同名对象，根据以下条件决定是否覆盖。
慎使用“不覆盖”策略。 直接覆盖 对于源端和目的端存在的同名文件，源端文件直接覆盖目的端文件。 条件覆盖 对于文件迁移：源端和目的端存在的同名文件，保留最后修改时间较新的文件；如果最后修改时间相同，比较文件大小，大小不同则源端覆盖目的端文件；如果最后修改时间和大小都相同，则跳过；
慎使用“不覆盖”策略。 直接覆盖 对于源端和目的端存在的同名文件，源端文件直接覆盖目的端文件。 条件覆盖 对于文件迁移：源端和目的端存在的同名文件，保留最后修改时间较新的文件；如果最后修改时间相同，比较文件大小，大小不同则源端覆盖目的端文件；如果最后修改时间和大小都相同，则跳过；
创建元数据连接 创建元数据来源类型的连接，获取源端大数据库表清单。 目前支持的连接类型，参见表1。 表1 支持的元数据连接类型 类别 连接类型 大数据组件 Hive Metastore Doris HBase ClickHouse Delta Lake（有元数据） Delta Lake（无元数据）
创建并运行数据湖元数据同步任务 利用创建的Delta Lake元数据连接，将源端数据库的库、表、字段信息同步至迁移中心。仅Delta Lake（有元数据）支持创建数据湖元数据同步任务。 Delta Lake（无元数据）只能通过手动添加、导入模板等方式添加元数据库表信息，方法请参见查看元数据。 前提条件
自定义参数说明 在创建数据湖探索 DLI校验任务时，支持的自定义参数及说明参见表1。 表1 DLI校验任务支持的自定义参数说明 参数名称 默认值 描述 mgc.mc2dli.table.partition.enable true DLI表分区为空或者分区不存在时需要通过查询DLI的元数据去判断分区存不存在。
创建并运行数据湖元数据同步任务 利用创建的Delta Lake元数据连接，将源端数据库的库、表、字段信息同步至迁移中心。仅Delta Lake（有元数据）支持创建数据湖元数据同步任务。 Delta Lake（无元数据）只能通过手动添加、导入模板等方式添加元数据库表信息，方法请参见查看元数据。 前提条件
自定义参数说明 在创建数据湖探索 DLI校验任务时，支持的自定义参数及说明参见表1。 表1 DLI校验任务支持的自定义参数说明 参数名称 默认值 描述 mgc.mc2dli.table.partition.enable true DLI表分区为空或者分区不存在时需要通过查询DLI的元数据去判断分区存不存在。
”添加对象名称或者名称前缀，单击“确定”保存前缀。 输入对象前缀路径时，如果对象文件在源端桶的根目录下，则直接添加前缀；如果对象文件存在目录路径，则需要在对象前缀前添加对象文件所在的目录路径。格式为：文件夹/对象前缀 所有待迁移桶的迁移设置完成后，单击“下一步”，进行目的端配置。
”添加对象名称或者名称前缀，单击“确定”保存前缀。 输入对象前缀路径时，如果对象文件在源端桶的根目录下，则直接添加前缀；如果对象文件存在目录路径，则需要在对象前缀前添加对象文件所在的目录路径。格式为：文件夹/对象前缀 所有待迁移桶的迁移设置完成后，单击“下一步”，进行目的端配置。
影响小对象迁移速度的关键因素有哪些？ 在迁移小对象的过程中，以下是一些可能影响小对象迁移速度的因素以及相应的建议： 迁移集群的CPU负载：集群的CPU负载过高，可能会减慢处理小对象迁移的速度。 建议：优化集群的CPU资源分配，或者增加更多的迁移节点来分散负载。 源端和目的端的QP
S桶，可能会因为源端对象的元数据中包含mtime属性而导致校验失败。这是因为对象存储中的mtime属性（自定义）与PFS桶中的mtime属性（最后修改时间）存在不同。但实际上数据迁移是成功的，这个问题并不影响数据的迁移结果，您可以前往目的端确认对象是否已成功迁移。 场景二： 当源
请检查是否绑定过相关资源与标签，或联系技术支持人员。 ID未指定。 请联系技术支持人员或提交工单。 修改数据失败。 请联系技术支持人员或提交工单。 导入数据失败。 请联系技术支持人员或提交工单。 名称已存在。 请重新输入名称。 上传文件失败。 请联系技术支持人员或提交工单。 下载文件失败。 请联系技术支持人员或提交工单。
指定日期校验：仅适用于分区为年月日格式的分区表，支持周期性指定一个或多个连续日期分区进行校验。分区格式不为年月日的表不会进行校验。 指定时间校验：用户可以选择一个时间段，校验该时间段内的数据。只能选择当前时间之前的时间段进行校验。 支持的源端、目的端组件 源端组件 目的端组件 Hive Hbase Doris
单击集群状态列的“创建失败”，出现对应的原因和详情，请根据具体的错误信息进行处理。 部分常见的错误原因参见下表。如无法自行解决，请联系对应云服务技术支持人员或提交工单。 原因 描述 处理方法 Ecs.0319 check capacity: capacity is not enough. 用户ecs配额不足
失败，错误提示：“网络连接超时”或“其他异常”。 问题分析 网络连接超时：出现该提示是因为源端资源所在的地域（Region）不在MgC服务支持的资源采集范围内。 其他异常：出现该提示是因为连接源端资源时发生了未知的异常情况。可能由多种因素引起，需要您自行排查和处理。 父主题： 资源采集
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
