检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
采集安全性说明 数据采集架构 安全特性 采集项列表 内网采集权限与原理 公网采集权限要求 责任共担
是运行ClickHouse的主机IP地址。 HTTP端口 非安全集群下，填写与目的端ClickHouse 服务器通信的 HTTP 端口。默认为8123。 HTTP SSL/TLS端口 安全集群下，填写与目的端ClickHouse 服务器通信的HTTPS 端口。 表4 Hive Metastore连接参数配置说明
首次使用大数据数据迁移功能时，需要先启用迁移工具Edge。单击页面左上角的“修改”或单击“选择迁移工具”按钮，弹出选择迁移工具窗口。在下拉列表中，选择在完成准备工作时与迁移中心连接成功的Edge。 在进行大数据数据迁移时，请确保迁移工具Edge一直处于在线并启用状态。 启用迁移工具Edge后，单击页面右上角
过程。 数据安全 数据采集 迁移中心为了确保采集数据的安全性，采集数据时只会读取源端数据，不会对源端数据进行修改。并提供了“导入本地文件”与“在线采集”两种采集方式。 数据传输 迁移中心为了确保数据传输安全，采用加密通道（HTTPS、SSH）进行数据传输。 凭证加密 在线采集时，
Edge通过凭证登录容器集群：Edge使用用户提供的凭证登录至目标容器集群中。 K8s接口采集信息：Edge通过Kubernetes（K8s）API接口与容器集群交互，采集容器集群的详细信息，包括容器的详细规格、节点配置、持久卷配置以及网络策略等。 信息上报给迁移中心：Edge将采集到的信息上报给迁移中心。
址。通常是运行ClickHouse的主机IP地址。 HTTP端口 非安全集群下，与源端ClickHouse 服务器通信的 HTTP 端口。默认为8123。 HTTP SSL/TLS端口 安全集群下，与源端ClickHouse 服务器通信的HTTPS 端口。 表4 Hive Metastore连接参数配置说明
地址。通常是运行ClickHouse的主机IP地址。 HTTP端口 非安全集群下，与ClickHouse 服务器通信的 HTTP 端口。默认为8123。 HTTP SSL/TLS端口 安全集群下，与ClickHouse 服务器通信的HTTPS 端口。 表6 Delta Lake（有元数据）连接参数配置说明
数据采集架构 迁移中心（MgC）采集数据的方式主要包括以下两种： 利用Edge远程在线采集 通过调用API在线采集云平台资源 利用Edge远程在线采集 适用于公有云、私有云（如VMware、Hyper-V等虚拟化环境）以及数据中心（IDC）部署，或者以上部署方式的混合场景。迁移中心
迁移准备度检查失败，失败原因：下发命令到Edge失败 问题描述 对Windows主机进行迁移准备度检查时，检查失败，提示：下发命令到Edge失败。 问题分析 可能导致该问题的原因如下： 配置参数中的接入IP填写错误。 源端主机处于关机状态。 源端主机的IP或端口异常。 您可以通过
迁移准备度检查失败，失败原因：主机端口不可达、防火墙规则不正确或访问权限不足 问题描述 对主机进行迁移准备度检查时，检查失败，提示：主机端口不可达、防火墙规则不正确或访问权限不足。 问题分析 出现该问题的原因为接入端口不正确。 解决方法 检查迁移准备度配置参数中的“端口”填写是否
采集项列表 本节为您列出各类型采集方式所包含的采集项以及用途。 网段扫描 采集项 说明 作用 ip 主机IP 用于深度采集 port 主机端口 用于深度采集 osType 系统类型 用于深度采集 name 主机名称 用于深度采集 主机（含深度采集） 采集项 说明 作用 name 主机名称
如何获取Azure对象存储深度采集所需凭证？ 在对Azure云平台对象存储资源进行深度采集时，需要使用“存储账户”和“密钥”作为采集凭证，本节介绍获取Azure“存储账户”和“密钥”的方法。 登录 Azure 门户中转到存储账户。 在左侧导航栏选择“安全性和网络 > 访问密钥” ，即可看到“存储账户名称”和“密钥”。
如果源端是Windows主机，需要开启WinRM远程访问，并与安装Edge的主机建立连接，方法请参考Windows服务器WinRM服务配置与故障排查。 完成用户注册后，建议每3-6个月更换一次密码。 操作步骤 使用在源端内网环境准备好的Windows主机，登录迁移中心管理控制台。
如果源端是Windows主机，需要开启WinRM远程访问，并与安装Edge的主机建立连接，方法请参考Windows服务器WinRM服务配置与故障排查。 完成用户注册后，建议每3-6个月更换一次密码。 操作步骤 使用在源端内网环境准备好的Windows主机，登录迁移中心管理控制台。
任务名称 默认创建名称为“MaxCompute到DLI全量数据迁移-4位随机数（字母和数字）”，也可以自定义名称。 迁移工具 选择在完成准备工作时与迁移中心连接成功的Edge。 源端配置 源端连接 选择创建的源端连接。 预估项目周期（天）（可选） 配置后，系统会在任务执行时检查表的生命周
任务名称 默认创建名称为“MaxCompute到DLI增量数据迁移-4位随机数（字母和数字）”，也可以自定义名称。 迁移工具 选择在完成准备工作时与迁移中心连接成功的Edge。 源端配置 源端连接 选择创建的源端连接。 增量区间 选择T-N区间作为增量数据的迁移范围，即任务开始执行时间的前
限。 系统策略 MgC MigrateAccess策略内容 MgC AppDiscoveryAccess 迁移中心资源采集操作权限，拥有操作资源采集功能、资源发现功能的权限和只读权限。 系统策略 MgC AppDiscoveryAccess策略内容 MgC MrrAccess 迁
公网采集权限要求 通过公网采集各云平台资源所需的权限如下： 阿里云资源采集 采集阿里云各类资源所需的权限参见下表。 资源类型 云服务 Action 最小权限策略 主机 ECS ecs:DescribeInstances Read ecs:DescribeDisks List ec
Lake数据，请添加如下参数： 参数名：jars 参数值：'/opt/apps/DELTALAKE/deltalake-current/spark3-delta/delta-core_2.12-*.jar,/opt/apps/DELTALAKE/deltalake-current/sp
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
