检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Hive校验的sum统计结果显示未达标 问题描述 对Hive进行大数据校验，Hive中的double字段保存的值为 1.7976931348623157E308 和 -1.7976931348623157E308 时 sum 统计结果显示未达标。 问题分析 使用spark-sql
影响小对象迁移速度的关键因素有哪些？ 在迁移小对象的过程中，以下是一些可能影响小对象迁移速度的因素以及相应的建议： 迁移集群的CPU负载：集群的CPU负载过高，可能会减慢处理小对象迁移的速度。 建议：优化集群的CPU资源分配，或者增加更多的迁移节点来分散负载。 源端和目的端的QP
迁移对源端和目的端有什么要求？ 迁移会占用源端和目的端大量的QPS（每秒查询率）和带宽。因此，建议在迁移前先进行测试，以评估实际迁移过程中源端和目的端的QPS和带宽占用情况。如果占用率过高，请调整源端和目的端QPS和带宽限制，以确保对现有业务的影响最小化。 父主题： 存储迁移
在校验结果列表中，可以进行如下操作： 查看校验详情：单击分区达标详情列的“查看”按钮，展开该数据表的作业详情。单击操作列的“查看详情”，进入校验详情页面，查看该数据表的校验详细信息。 查看执行历史及状态：单击操作列的“查看历史”，可以查看该表的所有执行批次和达标状态。 导出校验结果 在校验结果页面，单击“导出”按钮，弹出导出校验结果窗口。
在校验结果列表中，可以进行如下操作： 查看校验详情：单击分区达标详情列的“查看”按钮，展开该数据表的作业详情。单击操作列的“查看详情”，进入校验详情页面，查看该数据表的校验详细信息。 查看执行历史及状态：单击操作列的“查看历史”，可以查看该表的所有执行批次和达标状态。 导出校验结果 在校验结果页面，单击“导出”按钮，弹出导出校验结果窗口。
Delta 数据量较大时，如何优化校验任务？ 本文介绍当源端Delta数据量较大（如超过10000张表）时，如何使用MgC大数据校验功能进行一致性校验的方法。 操作步骤 参考创建元数据连接，创建第一个Delta元数据连接。 使用步骤1.创建的第一个元数据连接，创建元数据同步任务，将源端的元数据同步至迁移中心。
配置rollback_hosts_linux.sh脚本 根据提供的脚本示例，结合实际情况，修改示例中的相关配置。 前提条件 已完成准备工作。 操作步骤 在执行脚本的主机上创建一个名为“rollback_hosts_linux.sh”的文件，然后将以下脚本示例的内容复制到文件中。如
新增大数据校验数据连接时，凭证列表数据缺失 Hive校验结果中的源端数据和目的端数据显示为“0”或“-1” Hive校验的sum统计结果显示未达标 DLI校验任务出现大量失败表 Delta 数据量较大时，如何优化校验任务？ 创建HBase目的端连接安全集群下的换包操作指南 MRS 3
在创建用于MaxCompute迁移到DLI数据校验的表组时，建议先创建count、sum、allsum等基本校验标准的表组，在确保基本校验任务的校验标准已达标，并且源端和目的端数据量一致后，再创建content校验标准的表组进行详细的内容校验，以确保的目的端数据与源数据在数据量和内容上一致。 前提条件
在创建用于MaxCompute迁移到DLI数据校验的表组时，建议先创建count、sum、allsum等基本校验标准的表组，在确保基本校验任务的校验标准已达标，并且源端和目的端数据量一致后，再创建content校验标准的表组进行详细的内容校验，以确保的目的端数据与源数据在数据量和内容上一致。 前提条件
增量数据迁移 将上一次迁移后，在源端数据库中发生变化（新增、修改或删除）的数据同步至目的端华为云数据湖探索（DLI）。 前提条件 已完成所有准备工作。 已创建源端连接。 已创建目的端连接。 已最少完成一次全量数据迁移。 开始迁移前，需要联系技术支持人员，将您添加到允许jar程序访问DLI元数据功能的白名单中。
增量数据迁移 将上一次迁移后，在源端数据库中发生变化（新增、修改或删除）的数据同步至目的端华为云数据湖探索（DLI）。 前提条件 已完成所有准备工作。 已创建源端连接。 已创建目的端连接。 已最少完成一次全量数据迁移。 开始迁移前，需要联系技术支持人员，将您添加到允许jar程序访问DLI元数据功能的白名单中。
全量数据迁移 将源端数据库中的所有数据迁移到目的端华为云数据湖探索（DLI）。 前提条件 已完成所有准备工作。 已创建源端连接。 已创建目的端连接。 开始迁移前，需要联系技术支持人员，将您添加到允许jar程序访问DLI元数据功能的白名单中。 操作步骤 登录迁移中心控制台。 在左侧
全量数据迁移 将源端数据库中的所有数据迁移到目的端华为云数据湖探索（DLI）。 当迁移的表数量较多或单个表的列数较多时，迁移过程可能会耗费较长时间。 前提条件 已完成所有准备工作。 已创建源端连接。 已创建目的端连接。 开始迁移前，需要联系技术支持人员，将您添加到允许jar程序访问DLI元数据功能的白名单中。
自定义参数说明 在创建数据湖探索 DLI校验任务时，支持的自定义参数及说明参见表1。 表1 DLI校验任务支持的自定义参数说明 参数名称 默认值 描述 mgc.mc2dli.table.partition.enable true DLI表分区为空或者分区不存在时需要通过查询DLI的元数据去判断分区存不存在。
自定义参数说明 在创建数据湖探索 DLI校验任务时，支持的自定义参数及说明参见表1。 表1 DLI校验任务支持的自定义参数说明 参数名称 默认值 描述 mgc.mc2dli.table.partition.enable true DLI表分区为空或者分区不存在时需要通过查询DLI的元数据去判断分区存不存在。
元数据全量迁移 将源端数据库中的所有元数据迁移到华为云数据湖探索（DLI） 。 元数据迁移不支持事务表（即DDL中带有transactional=true字段的表）。 前提条件 已完成所有准备工作。 已创建源端连接。 已创建目的端连接。 操作步骤 登录迁移中心控制台。 在左侧导航
元数据全量迁移 将源端数据库中的所有元数据迁移到华为云数据湖探索（DLI） 。 元数据迁移不支持事务表（即DDL中带有transactional=true字段的表）。 当迁移的表数量较多或单个表的列数较多时，迁移过程可能会耗费较长时间。 前提条件 已完成所有准备工作。 已创建源端连接。
添加阶段/步骤 您可以在工作流标准模板的迁移阶段/步骤，添加卡点，对迁移阶段/步骤进行控制。 只有迁移阶段/步骤状态为等待中/暂停，才可以选择该阶段/步骤进行添加。迁移阶段/步骤处于运行中/完成状态时，无法添加。 如果上一阶段/步骤处于运行中/暂停/完成状态，该阶段/步骤只能选择添加后置阶段/步骤。
添加阶段/步骤 您可以在工作流标准模板的迁移阶段/步骤，添加卡点，对迁移阶段/步骤进行控制。 只有迁移阶段/步骤状态为等待中/暂停，才可以选择该阶段/步骤进行添加。迁移阶段/步骤处于运行中/完成状态时，无法添加。 如果上一阶段/步骤处于运行中/暂停/完成状态，该阶段/步骤只能选择添加后置阶段/步骤。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
