检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据采集架构 迁移中心（MgC）采集数据的方式主要包括以下两种： 利用Edge远程在线采集 通过调用API在线采集云平台资源 利用Edge远程在线采集 适用于公有云、私有云（如VMware、Hyper-V等虚拟化环境）以及数据中心（IDC）部署，或者以上部署方式的混合场景。迁移中心
在进行大数据数据迁移时，请确保迁移工具Edge一直处于在线并启用状态。 启用迁移工具Edge后，单击页面右上角的“创建源端连接”按钮，右侧弹出创建连接窗口。 连接类型选择“MaxCompute”，单击“下一步”。 根据MaxCompute连接参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。
在元数据采集区域，单击“创建连接”，右侧弹出创建连接窗口。 连接类型选择“Doris”，单击“下一步”。 根据Doris连接参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 Doris连接参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创建名称为“Doris-4
迁移对源端和目的端有什么要求？ 迁移会占用源端和目的端大量的QPS（每秒查询率）和带宽。因此，建议在迁移前先进行测试，以评估实际迁移过程中源端和目的端的QPS和带宽占用情况。如果占用率过高，请调整源端和目的端QPS和带宽限制，以确保对现有业务的影响最小化。 父主题： 存储迁移
公网发现与采集 通过公网在线发现并采集源端云平台资源，获取源端资源详细信息。目前支持的源端云平台为：阿里云、华为云、AWS、腾讯云、Azure、七牛云、金山云。 阿里云和华为云支持采集的资源类型包括：主机、容器、中间件、数据库、网络和存储。 腾讯云支持采集的资源类型包括：主机、数据库、存储。
安装Edge：下载并安装MgC服务所需的云边协同组件Edge。 资源采集：采集源端阿里云ECS主机的信息。 迁移准备：对源端阿里云ECS主机进行配置检查、网络测试和迁移分组。 规格评估：评估并配置华为云目的端主机的规格。 工作流创建：创建并配置迁移工作流并启动迁移。 使用须知 在创建主机迁移工作流前，请仔细阅读并了解以下使用须知内容。
公网发现与采集 通过公网在线发现并采集源端云平台资源，获取源端资源详细信息，并整理源端资源与应用间的关联关系。目前支持发现的源端云平台为：阿里云、华为云、AWS、腾讯云、Azure、七牛云、金山云。 阿里云和华为云支持采集的资源类型包括：主机、容器、中间件、数据库、网络和存储。
采集时长受控：采集任务在有限的时间内完成，采集避免长时间占用系统资源。 加密保存凭证：所有用于数据采集的凭证都经过加密处理，以保护凭证的安全。线上采集的凭证仅在线上环境中保存。 操作权限与最小权限原则：无论哪种采集方式，都需要具备相应的操作权限，并且遵循最小权限原则，即只授予完成特定任务所需的最小权限。
目下拉列表中选择迁移项目，即可查看当前项目下的所有Edge设备以及设备状态。 设备状态说明参见下表。 表1 设备状态说明 设备状态 说明 在线 Edge与MgC控制台之间一直连接，无断开。 离线 Edge运行程序退出与MgC控制台之间的连接断开1分钟后，置为“离线”状态。 未激活
连接类型选择“阿里云云数据库 ClickHouse”，单击“下一步”。 根据ClickHouse组件参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 ClickHouse组件参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创建名称为“阿里
接窗口。 连接类型选择“MaxCompute”，单击“下一步”。 根据MaxCompute连接参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 MaxCompute连接参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创建名称为“Ma
在元数据采集区域，单击“创建连接”，右侧弹出创建连接窗口。 连接类型选择“HBase”，单击“下一步”。 根据表1，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 HBase连接参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创建名称为“HBase-4
接窗口。 连接类型选择“MaxCompute”，单击“下一步”。 根据MaxCompute连接参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 MaxCompute连接参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创建名称为“Ma
接窗口。 连接类型选择“ClickHouse”，单击“下一步”。 根据ClickHouse组件参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 ClickHouse组件参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创建名称为“Cl
连接类型选择“阿里云云数据库 ClickHouse”，单击“下一步”。 根据ClickHouse组件参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 ClickHouse组件参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创建名称为“阿里
接窗口。 连接类型选择“ClickHouse”，单击“下一步”。 根据ClickHouse组件参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 ClickHouse组件参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创建名称为“Cl
连接中 等待master节点上线，并开始创建和安装其他节点 健康 所有节点均处于在线状态 亚健康 部分迁移节点和列举节点在线，并且至少存在一个迁移节点和一个列举节点在线 不可用 所有迁移节点或列举节点不在线 离线 master节点离线，可能是网络中断、ECS删除等原因，请排查Vpcep
在元数据采集区域，单击“创建连接”，右侧弹出创建连接窗口。 连接类型选择“Delta Lake（无元数据）”，单击“下一步”。 根据表1，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 Delta Lake（无元数据）连接参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创建
单击“确定”，测试是否连接成功。 如果连接成功，可以输入任意命令来测试联调性。 如果连接失败，请参考WinRM远程连接失败故障排查，进行处理。 WinRM远程连接失败故障排查 如果远程连接测试失败，请参考方法进行故障排查： 检查端口连接：使用 telnet 命令测试源端服务器的5
连接类型选择“Hive Metastore”，单击“下一步”。 根据Hive Metastore连接参数配置说明，配置连接参数后，单击“测试连接”按钮，测试通过代表连接成功。 表1 Hive Metastore连接参数配置说明 参数 配置说明 所属源 选择源端。 连接名称 默认创建名称
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
