检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
应用配置采集器（app-discovery-application-config） 通过应用配置文件，采集应用配置信息。参数配置说明参见表1。 表1 应用配置采集器参数配置说明 参数 必选 配置说明 output_path 否 自定义采集结果（app-discovery-application-config-xxx
进程与网络采集器（app-discovery-process-netstat） 采集目标节点的进程和网络关联关系。参数配置说明参见表1。 表1 进程与网络采集器参数配置说明 参数 必选 配置说明 output_path 否 自定义采集结果（app-discovery-process-netstat-xxx
K8S静态采集器（app-discovery-k8s） 用于采集k8s集群中的ingress，service，configMap等信息。参数配置说明参见表1。 表1 k8s静态采集器参数配置说明 参数 必填 配置说明 output_path 否 自定义采集结果（app-discovery-k8s-xxx.c
erallog） 通过MySQL的general-log日志，采集客户端host和port信息。参数配置说明参见表1。 表1 MySQL-generallog采集器参数配置说明 参数 必选 配置说明 output_path 否 自定义采集结果（app-discovery-mysql-generallog-xxx
covery-k8s-conntrack） 通过conntrack命令采集k8s集群的应用关联拓扑。参数配置说明参见表1。 表1 k8s conntrack采集器参数配置说明 参数 必选 配置说明 output_path 否 自定义采集结果（app-discovery-k8s-conntrack-xxx
pod网络采集器（app-discovery-k8s-pod-net） 通过采集k8s pod的网络分析应用间的关联关系。参数配置说明参见表1。 表1 k8s pod采集器参数配置说明 参数 必选 配置说明 output_path 否 自定义采集结果（app-discovery-k8s-pod-net-xxx
MaxCompute参数（可选） 非必填参数，一般为空。如有需要可参考MaxCompute参数文档进行配置。 数据范围 按库筛选 即按数据库进行筛选，在数据库参数框中输入需要增量待迁移的数据库名称。单击“添加数据库”，可以新增数据库，最多支持同时添加10个数据库。 如果数据库中有不需要迁移
出现该问题可能是因为数值超出了Hive支持的数值范围。 在数据处理中，如果遇到极大值或极小值，Hive可能无法以标准数值格式表示这些极端数值，而是将它们显示为 “Infinity”（表示无限大）或 “-Infinity”（表示无限小）。这些值并不是有效的数字，因此在进行数值转换或计算时，可能会引发异常。
MaxCompute参数 非必填参数，一般为空。如有需要，可参考MaxCompute参数文档进行配置。 数据范围 按库筛选 即按数据库进行筛选，在数据库参数框中输入待迁移的数据库名称。单击“添加数据库”，可以新增数据库，最多支持同时添加10个数据库。 如果数据库中有不需要迁移的表，可
将编辑并保存好的CSV文件上传至MgC。 目的端配置 目的端连接 选择创建的目的端DLI SQL队列连接。 注意： 切勿选择通用队列。 自定义参数（可选） 根据实际需求进行配置，支持的自定义参数详情请参考conf参数说明和自定义参数说明。 迁移选项 并发连接数 设置迁移并发数。默认为3，1≤取值范围≤10。
目的端配置 目的端连接 选择创建的目的端DLI 通用队列连接。 注意： 切勿选择DLI SQL队列。 自定义参数（可选） 根据实际需求进行配置，支持的自定义参数详情请参考conf参数说明和自定义参数说明。 如果是公网迁移，需要填写以下4个参数： spark.dli.metaAccess.enable：填写true。
全量迁移 迁移源端桶/文件夹内的全部数据。 列表迁移 通过列表文件过滤迁移，只迁移列表文件中的对象。 在“列表路径”输入存放在目的端桶的对象列表文件路径。对象列表文件的约束与限制如下： 目的端为OBS 对象列表文件大小不能超过30 MB。 对象列表文件类型必须为.txt类型，并且元数据
MaxCompute参数 非必填参数，一般为空。如有需要，可参考MaxCompute参数文档进行配置。 数据范围 按库筛选 即按数据库进行筛选，在数据库参数框中输入待迁移的数据库名称。单击“添加数据库”，可以新增数据库，最多支持同时添加10个数据库。 如果数据库中有不需要迁移的表，可
HBase组件参数配置说明 ClickHouse组件参数配置说明 Hive Metastore连接参数配置说明 表1 Doris组件参数配置说明 参数 配置说明 所属源 选择目的端。 连接名称 默认创建名称为“Doris-4位随机数（字母和数字）”，也可以自定义名称。 Doris凭证
创建采集任务的方法请参考创建并运行元数据同步任务。当元数据同步任务的实例状态为“已完成”且采集结果有数值时，在库表清单页签可以查看采集到的元数据列表。 手动添加数据表 登录迁移中心管理控制台。在左侧导航栏的项目下拉列表中选择创建的大数据迁移项目。 在左侧导航栏选择“调研>迁移准备”，进入迁移准备页面。
当元数据同步任务的实例状态为“已完成”且采集结果有数值时，在库表清单页签可以查看采集到的元数据列表。 手动添加数据表 登录迁移中心管理控制台。 在左侧导航栏选择“调研>大数据血缘”，进入大数据血缘页面。在页面左上角的当前项目下拉列表中选择迁移项目。 在元数据采集区域，单击“查看库
”，进入详细配置页面。 根据对应的参数配置说明，配置组件连接参数。 Doris组件参数配置说明 HBase组件参数配置说明 ClickHouse组件参数配置说明 Hive Metastore连接参数配置说明 表1 Doris组件参数配置说明 参数 配置说明 所属源 选择目的端。 连接名称
各组件之间配置参数略有区别，请以实际页面为准。 全量对数作业参数配置说明 日级增量校验参数配置说明 小时级增量校验参数配置说明 指定日期校验参数配置说明 指定时间校验参数配置说明 表1 全量校验参数配置说明 区域 参数 配置说明 基础信息 任务名 默认创建名称为“组件类型全量校验-4位随
目的端配置 目的端连接 选择创建的目的端DLI 通用队列连接。 注意： 切勿选择DLI SQL队列。 自定义参数（可选） 根据实际需求进行配置，支持的自定义参数详情请参考conf参数说明和自定义参数说明。 如果是公网迁移，需要填写以下4个参数： spark.dli.metaAccess.enable：填写true。
3版本依赖访问时，请添加如下参数： 参数名：master 参数值：local 如果源端是阿里云 EMR Delta 2.1.0版本并且配置了Spark 2.4.8来处理Delta Lake数据，请添加如下参数： 参数名：mgc.delta.spark.version 参数值：2 如果源端是阿里云
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
