检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在元数据采集区域，单击“创建任务 > 元数据同步”按钮，右侧弹出创建任务-元数据同步窗口。 根据元数据同步任务参数配置说明，配置元数据同步任务参数后，单击“确认”按钮，创建元数据同步任务。 表2 元数据同步任务参数配置说明 参数 配置说明 任务名称 默认创建名称为“元数据同步任
注册用户并连接迁移中心。 步骤六：创建大数据迁移任务 完成步骤一到步骤五的操作，并了解大数据校验任务的使用须知后。按照以下步骤创建大数据数据迁移任务。 创建源端MaxCompute连接。 创建目的端DLI连接。 创建元数据迁移任务或数据迁移任务并执行。
准备工作 在使用大数据校验功能前，请务必先完成以下必要的准备工作。 创建项目 通过创建独立的项目，可以将不同的操作场景进行区分和隔离，从而实现更好的组织管理和资源分配。创建方法请参考项目管理。 准备迁移工具Edge 在启用大数据校验功能前，需要先在源端环境中安装用于配合大数据校验的迁移工
创建元数据连接 创建元数据来源类型的连接，获取源端大数据库表清单。 目前支持的连接类型，参见表1。 表1 支持的元数据连接类型 类别 连接类型 大数据组件 Hive Metastore Doris HBase ClickHouse Delta Lake（有元数据） Delta Lake（无元数据）
致 在安装Edge的Windows主机上，打开“日期和时间”设置。 在“日期和时间”设置界面，开启“自动设置时间”，然后单击“同步”按钮，触发一次时间同步。 确保时区和时间设置正确，与当地标准时间一致后，返回Edge控制台，重新尝试查询MgC迁移项目。 父主题： 常见问题
如何查看采集失败原因？ 如果任务状态为“失败”，单击操作列的“查看”，可以查看采集失败的数据源，将鼠标放到数据源的采集状态上，可以查看失败原因。采集失败的数据源，处理完失败原因后，需要删除后通过新增数据源重新采集。 父主题： 资源采集
NAS到NAS迁移和割接方案 概述 适用场景：适用于NAS到NAS迁移过程中源端业务持续运行的场景。 目标：通过多次同步方案迁移增量对象数据，减少源端和目的端数据差异，确保数据迁移的准确性和业务连续性。 源端支持的类型：NAS_SMB、NAS_NFS_V3_MOUNT、NAS_NFS_
归档存储（冷存储）数据迁移 背景概述 冷存储是一种针对不频繁访问数据的长期备份解决方案，例如，平均一年访问一次的归档存储或平均几年访问一次的深度归档存储。这种存储方式具有高安全性、持久性和成本低等优势。 在迁移冷存储数据时，一个主要的考虑因素是数据访问的延迟。由于数据通常处于"冻结"
Hive校验结果中的源端数据和目的端数据显示为“0”或“-1” 问题描述 对Hive进行大数据校验，校验任务执行成功，查看校验结果，发现部分字段的“源端数据”和“目的端数据”显示为“0”或“-1”。 问题分析 出现该问题可能是因为数值超出了Hive支持的数值范围。 在数据处理中，如果遇到
主机迁移工作流进行到全量复制/增量同步步骤时失败，提示失败原因为：SMS-Workflow.0503:SMS migration task failed 'SMS.xxxx' 问题分析 在迁移过程中，源端会和目的端服务器建立一个SSH连接用于传输数据。如果无法成功建立SSH连接，则会导致迁移失败。
迁移工作流状态为“运行中”，如何查看迁移进度？ 您可以通过以下两种方式查看迁移进度： 在工作流列表中，单击工作流名称，进入工作流详情页面，可以查看工作流包含的每台主机的迁移进度详情。 当主机迁移进度进行到“全量复制”和“增量同步”步骤时，如图1所示，单击任务详情（即目的端名称），
单列表中可以查看导入的数据表。 导出数据表 支持将Delta Lake和Hudi有元数据的数据表导出为CSV格式。无元数据的数据表不支持导出。 在表管理页面，选择库表清单页签。 单击列表上方的“导出 > 导出数据表”按钮，弹出导出窗口。 选择需要导出的数据表所在表组，单击“确认”。
迁移工作流状态一直处于“运行中”，如何判断迁移是否正常？ 迁移工作流除了“开始迁移”、“开始同步”两个阶段运行时间比较久以外，其它步骤一般运行不会超过3分钟。如果长时间卡在某一步，可能是因为Edge上报结果给MgC的过程中丢失。 解决办法： 方法一：单击工作流名称，在工作流详情页
如何卸载Edge？ 卸载Windows版本 卸载Linux版本 父主题： 常见问题
如何重启Edge？ Windows版本 打开Edge所在主机的“任务管理器”。 选择“服务”页签，找到名为“Edge_Tomcat ”的服务，鼠标右键，单击“开始”，即可手动启动Edge进程。 Linux版本 执行如下命令，进入Edge安装目录中的scripts目录。 cd /o
配置OBS桶 设置用于存放大数据校验任务日志文件和内容校验结果的OBS桶（以下称为日志桶），实现对日志和内容校验结果的有效管理和分析。设置了日志桶后，会默认使用大数据校验中的日志上传功能，将日志数据和内容校验结果上传到指定的OBS桶中。 权限要求 请确保添加的目的端凭证最少拥有日志桶的如下操作权限：
ID/密钥适用于添加Azure平台凭证。添加凭证所需的信息获取方法请参见如何获取添加Azure凭证所需的信息。 私有云 用户名/密码 输入源端私有云的登录用户名、密码。 数据库 用户名/密码 输入数据库的登录用户名、密码。 大数据-执行机 用户名/密码 输入大数据所部署主机的登录用户名、密码；网段限制填写网
数据迁移失败，提示超过DLI网管流控上限 问题描述 进行大数据数据迁移失败，在数据湖探索的Spark作业查看报错信息为：The throttling thershold has been reached 问题分析 出现该问题，是因为您创建的资源数量已达到DLI服务流控限制阈值。 解决方法
支持规格评估的数据库类型 目前支持规格评估的数据库类型包括：MySQL、PostgreSQL、MongoDB、Oracle和SQL Server。 父主题： 规格评估
大数据-Hive Metastore凭证文件获取方法 参考访问FusionInsight Manager登录Manager，进入系统页面。 在左侧导航栏，选择“权限>用户”，进入用户页面。 在用户列表，选择要在Edge添加凭证的用户，单击操作列“更多>下载认证凭据”，可以下载凭证文件中的krb5
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
