检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据采集架构 迁移中心（MgC）采集数据的方式主要包括以下两种： 利用Edge远程在线采集 通过调用API在线采集云平台资源 利用Edge远程在线采集 适用于公有云、私有云（如VMware、Hyper-V等虚拟化环境）以及数据中心（IDC）部署，或者以上部署方式的混合场景。迁移中心
采集时长受控：采集任务在有限的时间内完成，采集避免长时间占用系统资源。 加密保存凭证：所有用于数据采集的凭证都经过加密处理，以保护凭证的安全。线上采集的凭证仅在线上环境中保存。 操作权限与最小权限原则：无论哪种采集方式，都需要具备相应的操作权限，并且遵循最小权限原则，即只授予完成特定任务所需的最小权限。
在任务管理页签，可以查看已创建的元数据同步任务列表以及参数配置信息。单击操作列的“运行任务”，即可触发一次任务执行。每执行一次任务，会生成一条任务实例。 单击操作列的“查看实例”，进入任务实例管理页签。可以查看该任务的运行记录，以及每条任务实例的状态和采集结果。当元数据同步任
选择迁移工具窗口。在下拉列表中，选择在完成准备工作时与迁移中心连接成功的Edge。 在进行大数据数据迁移时，请确保迁移工具Edge一直处于在线并启用状态。 启用迁移工具Edge后，单击页面右上角的“创建源端连接”按钮，右侧弹出创建连接窗口。 连接类型选择“MaxCompute”，单击“下一步”。
csv。 ssl_ca_file 否 使用SSL连接，填写CA证书文件（.pem）路径。建议使用一组特定的CA证书，而不是由知名机构颁发签署的服务器证书。 ssl_client_private_key_password 否 如果证书密钥文件中包含的私钥已加密，则需要填写密码或口令短语。
check_hostname,True" ca 否 使用了SSL认证的verify_ca模式时，填写CA证书所在路径。 Linux系统MySQL证书默认存放位置取决于MySQL的安装方式和版本。通常MySQL证书存放在以下位置： MySQL 5.6及以下版本：/etc/mysql/ MySQL 5
公网发现与采集 通过公网在线发现并采集源端云平台资源，获取源端资源详细信息。目前支持的源端云平台为：阿里云、华为云、AWS、腾讯云、Azure、七牛云、金山云。 阿里云和华为云支持采集的资源类型包括：主机、容器、中间件、数据库、网络和存储。 腾讯云支持采集的资源类型包括：主机、数据库、存储。
公网发现与采集 通过公网在线发现并采集源端云平台资源，获取源端资源详细信息，并整理源端资源与应用间的关联关系。目前支持发现的源端云平台为：阿里云、华为云、AWS、腾讯云、Azure、七牛云、金山云。 阿里云和华为云支持采集的资源类型包括：主机、容器、中间件、数据库、网络和存储。
据时只会读取源端数据，不会对源端数据进行修改。并提供了“导入本地文件”与“在线采集”两种采集方式。 数据传输 迁移中心为了确保数据传输安全，采用加密通道（HTTPS、SSH）进行数据传输。 凭证加密 在线采集时，采集凭证会加密存储在MgC服务端。用户也可以通过在源端部署Edge实
目下拉列表中选择迁移项目，即可查看当前项目下的所有Edge设备以及设备状态。 设备状态说明参见下表。 表1 设备状态说明 设备状态 说明 在线 Edge与MgC控制台之间一直连接，无断开。 离线 Edge运行程序退出与MgC控制台之间的连接断开1分钟后，置为“离线”状态。 未激活
连接中 等待master节点上线，并开始创建和安装其他节点 健康 所有节点均处于在线状态 亚健康 部分迁移节点和列举节点在线，并且至少存在一个迁移节点和一个列举节点在线 不可用 所有迁移节点或列举节点不在线 离线 master节点离线，可能是网络中断、ECS删除等原因，请排查Vpcep
SSL/TLS端口 安全集群下，与源端ClickHouse 服务器通信的HTTPS 端口。 可以登录源端集群的FusionInsight Manager，选择“集群 > 服务 > ClickHouse > 配置 > 全部配置”，搜索“https_port”参数获取。 在元数据采集区域，单击“创建任务
安全集群下，与MRS ClickHouse 服务器通信的HTTPS 端口。 可以登录目的端集群的FusionInsight Manager，选择“集群 > 服务 > ClickHouse > 配置 > 全部配置”，搜索“https_port”参数获取。 分别创建源端阿里云EMR ClickHouse和目的端MRS
具窗口。 在下拉列表中，选择与迁移中心连接成功的Edge。 如迁移工具状态为“在线”、“已启用”，代表该工具已被用于对数相关操作，单击“确定”按钮，继续使用该工具进行后续操作。 如迁移工具状态为“在线”、“未启用”，代表该工具尚未被用于对数，单击“启用”按钮，启用该工具进行后续操作。
MgC分为部署在云上的云服务和部署在客户网络中的Edge两个部分。 MgC：部署在云上，主要包含六个业务功能(问卷&TCO对比、在线采集、应用关联分析、在线评估、资源分组、迁移编排)，通过基于服务开发服务，基于服务运维服务的方式进行设计。 Edge：部署在客户的网络中，用来保存凭证
安全集群下，与MRS ClickHouse 服务器通信的HTTPS 端口。 可以登录目的端集群的FusionInsight Manager，选择“集群 > 服务 > ClickHouse > 配置 > 全部配置”，搜索“https_port”参数获取。 创建阿里云云数据库 Click
如果该参数不为空，则环境变量文件在命令执行前将被自动“source” SQL文件地址 填写用于存放执行作业时生成的SQL文件的文件夹地址。您需要拥有该文件夹的读写权限。 须知： 迁移完成后，您需要手动清理该路径下生成的文件夹，以释放存储空间。 在元数据采集区域，单击“查看库表清单”或“数据表”，进入库表清单页签。
如果该参数不为空，则环境变量文件在命令执行前将被自动“source” SQL文件地址 填写用于存放执行作业时生成的SQL文件的文件夹地址。您需要拥有该文件夹的读写权限。 须知： 迁移完成后，您需要手动清理该路径下生成的文件夹，以释放存储空间。 在元数据采集区域，单击“创建任务 > 数据湖元数据同步”按
“./install.sh” 所填写的地址。 SQL文件地址 填写用于存放执行作业时生成的SQL文件的文件夹地址。您需要拥有该文件夹的读写权限。 须知： 迁移完成后，您需要手动清理该路径下生成的文件夹，以释放存储空间。 在MgC控制台，创建Hive统计任务并执行，方法请参考创建
yml edge.mgc-host MgC服务地址 华南-广州: https://mgc.cn-south-1.myhuaweicloud.com edge.vars.sms-agent-url SMS服务桶地址 https://sms-agent-2-0-cn-north-1.obs
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
