检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Kafka采集器（app-discovery-kafka） 通过连接到Kafka节点，获取Kafka节点IP、版本、消费者信息等。参数配置说明参见表1。 表1 Kafka采集器参数配置说明 参数 必选 配置说明 output_path 否 自定义采集结果（app-discovery-kafka-xxx
Eureka采集器（app-discovery-eureka） 通过Eureka提供的开发API，采集Eureka Server和Eureka Client的相关信息。参数配置说明参见表1。 表1 Eureka采集器参数配置说明 参数 必选 配置说明 output_path 否 自定义采集
配置信任主机。 在PowerShell中执行如下命令，将源端服务器加入到信任的host中。 winrm set winrm/config/client '@{TrustedHosts="*"}' 出于安全考虑，建议使用源端服务器的WinRMhost（即主机名或IP地址）替换TrustedHosts
rocess-netstat-win） RabbitMQ采集器（app-discovery-rabbitmq） Kafka采集器（app-discovery-kafka） Eureka采集器（app-discovery-eureka） Redis采集器（app-discovery-redis）
Spark客户端目录 填写Spark客户端的安装目录路径。 环境变量地址 填写环境变量文件（配置文件）的绝对路径，例如：/opt/bigdata/client/bigdata_env。 SQL文件地址 填写用于存放执行作业时生成的SQL文件的文件夹地址。您需要拥有该文件夹的读写权限。 须知：
阿里云技术支持人员。 AK/SK无效。 请检查所选凭证的AK/SK是否正确。 调用阿里云Kafka SDK失败。 请检查所用凭证和所选区域是否正确，或检查凭证所属账号是否开通阿里云Kafka服务。 调用阿里云Topic SDK失败。 请参考阿里云资源管理产品文档进行API Get
Spark客户端目录 填写Spark客户端的安装目录路径。 环境变量地址 填写环境变量文件（配置文件）的绝对路径，例如：/opt/bigdata/client/bigdata_env。 SQL文件地址 填写用于存放执行作业时生成的SQL文件的文件夹地址。您需要拥有该文件夹的读写权限。 须知：
anceAttribute Read kvstore:DescribeMetricData List Kafka alikafka:ListInstance Read kafka::DescribeMetricData List RocketMQ rocketmq:GetInstance
pem）路径。建议使用一组特定的CA证书，而不是由知名机构颁发签署的服务器证书。 ssl_client_private_key_password 否 如果证书密钥文件中包含的私钥已加密，则需要填写密码或口令短语。 ssl_client_certificate_key_file 否 填写证书与其私钥的串联文件（
ark-submit命令需要配置mgc.delta.metadata.client.ips参数，参数值为所有元数据连接的IP地址和端口，用英文逗号分隔。 例如：mgc.delta.metadata.client.ips = xx.xx.xx.xx:22,xx.xx.xx.xx:22
为"参数名1,参数值1,参数名2,参数值2"。 例如："ca,/data/ca.pem,key,/data/client-key.pem,cert,/data/client-cert.pem,check_hostname,True" ca 否 使用了SSL认证的verify_ca模式时，填写CA证书所在路径。
MRS ClickHouse迁移至MRS ClickHouse数据校验 本文主要介绍MRS ClickHouse版本间数据迁移后，使用迁移中心 MgC进行数据一致性校验的步骤和方法。 准备工作 需要先在源端内网环境中安装用于配合数据校验的工具Edge并注册用户，方法请参见安装Linux版本的Edge工具。
中间件 Redis Kafka 存储 对象存储 文件存储 网络 云连接 负载均衡（ALB、CLB） 专线 公网域名 内网域名 弹性公网IP 公网NAT网关 路由表 安全组 虚拟私有云 VPN网关 华为云 主机 容器 大数据 数据库 - 中间件 Redis Kafka 存储 对象存储 文件存储
阿里云EMR ClickHouse迁移至MRS ClickHouse数据校验 本文主要介绍将阿里云EMR ClickHouse数据迁移至华为云MRS ClickHouse后，使用迁移中心 MgC进行数据一致性校验的步骤和方法。 准备工作 需要先在源端内网环境中安装用于配合数据校验
阿里云 ClickHouse迁移至MRS ClickHouse数据校验 本文主要介绍将阿里云 ClickHouse数据迁移至华为云MRS ClickHouse后，使用迁移中心 MgC进行数据一致性校验的步骤和方法。 准备工作 需要先在源端内网环境中安装用于配合数据校验的工具Edg
Server：使用sa账号。 采集原理：连接数据库，基于数据库的查询语句进行采集。 中间件采集 权限要求： Redis：使用具有基本访问权限的普通账号即可。 Kafka：需要具备访问所有topic的权限以及对topic的容量等信息进行访问的权限。 采集原理：利用Java语言编写的应用程序，集成对应中间件的SDK（Software
阿里云 ClickHouse迁移至CloudTable ClickHouse数据校验 本文主要介绍将阿里云 ClickHouse数据迁移至华为云CloudTable ClickHouse后，使用迁移中心 MgC进行数据一致性校验的步骤和方法。 准备工作 需要先在源端内网环境中安装
中间件 Redis Kafka 存储 对象存储 文件存储 网络 云连接 负载均衡（ALB、CLB） 专线 公网域名 内网域名 弹性公网IP 公网NAT网关 路由表 安全组 虚拟私有云 VPN网关 华为云 主机 容器 大数据 数据库 - 中间件 Redis Kafka 存储 对象存储 文件存储
创建并运行元数据同步任务 利用元数据连接，创建元数据同步任务，将源端数据库的库、表、字段信息同步至迁移中心。 支持创建元数据同步任务的连接类型如下： Hive Metastore连接 Doris连接 HBase连接 ClickHouse连接 Hudi（有元数据）连接 Hudi（无元数据）连接
[application-arguments] 参数解释： --class：Spark应用的类名。 --master：Spark用于所连接的master，如yarn-client，yarn-cluster等。 application-jar：Spark应用的jar包的路径。 application-argume
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
