检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
maxPartitionBytes 134217728 读取文件时要打包到单个分区中的最大字节数。 spark.sql.badRecordsPath - Bad Records的路径。 spark.sql.legacy.correlated.scalar.query.enabled false 该参数设置为true：
maxPartitionBytes 134217728 读取文件时要打包到单个分区中的最大字节数。 spark.sql.badRecordsPath - Bad Records的路径。 spark.sql.legacy.correlated.scalar.query.enabled false 该参数设置为true：
Doris连接 HBase连接 ClickHouse连接 Hudi（有元数据）连接 Hudi（无元数据）连接 MaxCompute连接 阿里云云数据库ClickHouse连接 您还可以通过手动添加、导入模板等方式添加元数据库表信息，方法请参见查看元数据。 前提条件 已创建元数据连接。 操作步骤
Doris连接 HBase连接 ClickHouse连接 Hudi（有元数据）连接 Hudi（无元数据）连接 MaxCompute连接 阿里云云数据库ClickHouse连接 您还可以通过手动添加、导入模板等方式添加元数据库表信息，方法请参见查看元数据。 前提条件 已创建元数据连接。 操作步骤
Hive校验的sum统计结果显示未达标 问题描述 对Hive进行大数据校验，Hive中的double字段保存的值为 1.7976931348623157E308 和 -1.7976931348623157E308 时 sum 统计结果显示未达标。 问题分析 使用spark-sql
则，迁移时会直接跳过该文件。 阿里云 OSS到NAS_NFS的迁移，如果源端存在软链接，请启用“迁移元数据”功能。否则，迁移后软链接会变成普通文件，从而失去链接功能。 须知： 如果迁移对象中包含软链接，在迁移过程中，可能会因为软链接指向的对象尚未完全迁移到目的端导致校验失败，进而
xxx 域名:/ 域名:/ xxx 无论是全量迁移还是列表迁移，源端文件存储服务地址+路径的组合或源端文件存储服务地址+列表路径的组合都必须是唯一的不能重复，都遵循前缀匹配规则。 例如，已有组合是地址192.168.0.1:/a和路径/abc/a，那么添加或修改另一个地址为192.168
xxx 域名:/ 域名:/ xxx 无论是全量迁移还是列表迁移，源端文件存储服务地址+路径的组合或源端文件存储服务地址+列表路径的组合都必须是唯一的不能重复，都遵循前缀匹配规则。 例如，已有组合是地址192.168.0.1:/a和路径/abc/a，那么添加或修改另一个地址为192.168
各地域Endpoint信息请参考Endpoint对照表。 表11 阿里云云数据库ClickHouse连接参数配置说明 参数 配置说明 所属源 仅需在源端创建元数据连接。 连接名称 默认创建名称为“阿里云云数据库ClickHouse-4位随机数（字母和数字）”，也可以自定义名称。 迁移工具
Management，简称IAM），通过IAM，您可以： 根据企业的业务组织，在您的华为云账号中，给企业中不同职能部门的员工创建IAM用户，让员工拥有唯一安全凭证，并使用MgC。 根据企业用户的职能，设置不同的访问权限，以达到用户之间的权限隔离。 将MgC委托给更专业、高效的其他华为云账号或
创建源端连接 创建源端连接是为了允许迁移工具Edge访问和读取源端阿里云 MaxCompute中存储的数据。 前提条件 已完成准备工作。 操作步骤 登录迁移中心控制台。 在左侧导航栏选择“实施>大数据数据迁移”，进入大数据数据迁移页面。在页面左上角的当前项目下拉列表中选择在完成准备工作时所创建的迁移项目。
创建源端连接 创建源端连接是为了允许MgC Agent（原Edge）访问和读取源端阿里云 MaxCompute中存储的数据。 前提条件 已完成准备工作。 操作步骤 登录迁移中心管理控制台。在左侧导航栏的项目下拉列表中选择在完成准备工作时创建的大数据迁移项目。 在左侧导航栏选择“实
DLI校验任务出现大量失败表 Delta 数据量较大时，如何优化校验任务？ 创建HBase目的端连接安全集群下的换包操作指南 MRS 3.1.0版本普通集群使用YARN模式的换包操作指南
"dli:database:explain", "dli:table:insertIntoTable", "dli:database:createDatabase",
信息获取，对应参数为“集群访问地址”。 创建阿里云云数据库 ClickHouse统计任务并执行，方法请参考创建统计任务并执行校验。需要注意任务配置中的表组，选择步骤20.创建的表组。 任务类型请选择大数据组件中的“阿里云云数据库 ClickHouse”。 统计方式仅支持“全量校验”。
"dli:database:explain", "dli:table:insertIntoTable", "dli:database:createDatabase",
注意： 以上端口，建议只对源端服务器开放。 防火墙开放端口与操作系统开放端口保持一致。 迁移端口 默认为22端口。如果22端口被占用，支持将其更改为10000至65535范围内的端口。 注意： 以下端口为黑名单端口： 135, 139, 445, 5357, 5985, 5986, 8899
增量数据迁移 将上一次迁移后，在源端数据库中发生变化（新增、修改或删除）的数据同步至目的端华为云数据湖探索（DLI）。 前提条件 已完成所有准备工作。 已创建源端连接。 已创建目的端连接。 已最少完成一次全量数据迁移。 开始迁移前，需要联系技术支持人员，将您添加到允许jar程序访问DLI元数据功能的白名单中。
Get-ExecutionPolicy 如果返回值为“Restricted”，则表示不允许运行任何脚本。需要执行如下命令，并输入Y，将策略改为“RemoteSigned”。 Set-ExecutionPolicy RemoteSigned 源端是Linux主机时，源端主机需要满足如下条件：
概述 背景介绍 当您迁移Windows主机时，需要确保源端主机能够解析相关云服务的接口域名。这通常涉及到在每台源端主机上编辑hosts文件。如果迁移的主机数量众多，手动编辑将非常耗时。为了简化这一过程，我们提供了一个批量修改的脚本示例。您可以利用这个脚本，快速地将域名解析IP批量
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
