检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在功能入口区域，单击“表管理”，进入表管理页面的表组页签。 单击“新增表组”，弹出新增表组窗口。根据新增表组参数说明，配置参数后，单击“确认”按钮，创建表组。 表3 新增表组参数说明 参数 说明 表组名 用户自定义 元数据连接 选择步骤8.创建的元数据连接。 注意： 表组中的所有表必须来源于同一个元数据来源。
请查看SMN计费说明。 数据筛选 非分区表处理策略 选择对于非分区表的校验处理策略。 全部校验：全量处理所有非分区表，不做筛选。 全部忽略：忽略所有非分区表，不做校验。 按更新时间过滤：只处理更新时间在校验范围内的非分区表。注意：非分区表非insert写入业务，元数据更新时间存在
配置路由 登录虚拟私有云管理控制台。 在左侧导航栏，选择“虚拟私有云 > 路由表”，进入路由表列表页面。 在路由表列表中，找到创建跨源连接时对应的路由表（即ECS所在VPC的路由表），单击路由表名称，进入路由表详情页面。 单击“添加路由”，弹出添加路由窗口。 按照提示配置参数。需要添
利用创建的Delta Lake元数据连接，将源端数据库的库、表、字段信息同步至迁移中心。仅Delta Lake（有元数据）支持创建数据湖元数据同步任务。 Delta Lake（无元数据）只能通过手动添加、导入模板等方式添加元数据库表信息，方法请参见查看元数据。 前提条件 已创建Delta
击“确认”。创建项目成功，可在项目管理列表查看。 修改项目 单击操作列的“修改”按钮，弹出“修改项目”窗口。 可以修改项目名称、输入项目描述、设置项目的开始时间和结束时间，单击“确认”，完成修改。 归档项目 归档后的项目将在当前项目下拉列表中隐藏，无法选择。单击操作列的“归档”按
DLI校验任务时，支持的自定义参数及说明参见表1。 表1 DLI校验任务支持的自定义参数说明 参数名称 默认值 描述 mgc.mc2dli.table.partition.enable true DLI表分区为空或者分区不存在时需要通过查询DLI的元数据去判断分区存不存在。 true：查询DLI表的分区，空分区效验状态为成功，分区不存在状态为失败。
填写一个表的迁移信息，格式为“{MC项目名},{表名}”，其中MC项目名代表MaxCompute项目名称，表名代表具体的表名称。 须知： 每行的“MC项目名”和“表名”之间使用英文逗号隔开，不要使用空格或其他分隔符。 每添加完一个表的信息后，使用回车键换行。 完成所有表信息的添加后，保存CSV文件的更改。
Hive校验的sum统计结果显示未达标 问题描述 对Hive进行大数据校验，Hive中的double字段保存的值为 1.7976931348623157E308 和 -1.7976931348623157E308 时 sum 统计结果显示未达标。 问题分析 使用spark-sql
填写一个表的迁移信息，格式为“{MC项目名},{表名}”，其中MC项目名代表MaxCompute项目名称，表名代表具体的表名称。 须知： 每行的“MC项目名”和“表名”之间使用英文逗号隔开，不要使用空格或其他分隔符。 每添加完一个表的信息后，使用回车键换行。 完成所有表信息的添加后，保存CSV文件的更改。
部分表迁移失败，报错：CRC Check failed 问题描述 进行大数据数据迁移时，部分表迁移失败，报错：CRC Check failed 解决方法 通过修改DLI作业中迁移sql，将源端timestamp字段类型转成String类型，进行数据迁移。 父主题： 大数据数据迁移
在功能入口区域，单击“表管理”，进入表管理页面的表组页签。 单击“新增表组”，弹出新增表组窗口。根据新增表组参数说明，配置参数后，单击“确认”按钮，创建表组。 表3 新增表组参数说明 参数 说明 表组名 用户自定义 元数据连接 选择步骤8.创建的元数据连接。 注意： 表组中的所有表必须来源于同一个元数据来源。
您可以输入用于区分表组的说明。 参数配置完成后，单击“确认”按钮，创建表组完成。在表组列表，可以查看创建的表组信息。 表组创建完成后，即可导入数据表并加入表组。 导入数据表并加入表组 在表管理页面，选择库表清单页签。 单击列表上方的“表管理 > 导入数据表”按钮，弹出导入数据表窗口。 选择元数据连接和要加入的表组名。
称为用户自定义，单击“确定”。添加完成后，系统会自动将添加的凭证同步至迁移中心。在凭证列表可以查看凭证的详细信息。 导入凭证 从迁移中心控制台的应用发现页面，导出主机资源列表或数据库资源列表，格式为CSV文件。 打开导出的CSV文件，在最后增加“user_name”和“passw
可以持续关注数据一致性变化情况。第二日0点自动停止任务。 指定日期校验：仅适用于分区为年月日格式的分区表，支持周期性指定一个或多个连续日期分区进行校验。分区格式不为年月日的表不会进行校验。 指定时间校验：用户可以选择一个时间段，校验该时间段内的数据。只能选择当前时间之前的时间段进行校验。
obs:bucket:ListAllMyBuckets：获取桶列表 obs:bucket:ListBucket：列举桶内对象 更多权限介绍请参见权限管理。 操作步骤 在Edge凭证管理界面的桶配置区域，单击“配置”按钮，弹出“桶配置”窗口。 根据表1，配置日志桶。 表1 日志桶参数配置说明 参数 配置说明
sh 无 功能类 getNetCards.sh /Edge/tools/plugins/collectors/rda-collector-server/shell 是 查询网卡信息 sh getNetCards.sh 无 功能类 getNetcardsInfo.sh /Edge/to
填写一个表的迁移信息，格式为“{MC项目名},{表名}”，其中MC项目名代表MaxCompute项目名称，表名代表具体的表名称。 须知： 每行的“MC项目名”和“表名”之间使用英文逗号隔开，不要使用空格或其他分隔符。 每添加完一个表的信息后，使用回车键换行。 完成所有表信息的添加后，保存CSV文件的更改。
创建的目的端ClickHouse集群的登录用户名和密码。 数据库链接 填写连接到CloudTable(ClickHouse)的数据库链接地址。可以在ClickHouse集群的基本信息获取，对应参数为“集群访问地址”。 表3 CloudTable(HBase)服务参数配置说明 参数
填写一个表的迁移信息，格式为“{MC项目名},{表名}”，其中MC项目名代表MaxCompute项目名称，表名代表具体的表名称。 须知： 每行的“MC项目名”和“表名”之间使用英文逗号隔开，不要使用空格或其他分隔符。 每添加完一个表的信息后，使用回车键换行。 完成所有表信息的添加后，保存CSV文件的更改。
在功能入口区域，单击“表管理”，进入表管理页面的表组页签。 单击“新增表组”，弹出新增表组窗口。根据新增表组参数说明，配置参数后，单击“确认”按钮，创建表组。 表3 新增表组参数说明 参数 说明 表组名 用户自定义 元数据连接 选择步骤8.创建的元数据连接。 注意： 表组中的所有表必须来源于同一个元数据来源。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
