检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
任务参数配置。 单击操作列的“运行任务”，即可触发一次任务执行。每执行一次任务，会生成一条任务实例。 单击操作列的“查看实例”，进入任务实例管理页签。可以查看该任务的运行记录，以及每条任务实例的状态和采集结果。当数据湖元数据同步任务的实例状态为“已完成”且采集结果有数值时，在库表清单页签可以查看采集到的元数据列表。
如何查看采集失败原因？ 如果任务状态为“失败”，单击操作列的“查看”，可以查看采集失败的数据源，将鼠标放到数据源的采集状态上，可以查看失败原因。采集失败的数据源，处理完失败原因后，需要删除后通过新增数据源重新采集。 父主题： 资源采集
存储类型介绍 各云厂商的对象存储服务针对用户业务对存储性能、成本的不同诉求，将对象的存储级别进行了区分，区分的普遍依据是对象的访问频度、访问时延、最低存储时间、最低存储单元、数据可靠性、数据可用性等。根据以上依据，华为云OBS提供了以下四种存储类型： 标准存储 访问时延低和吞吐量高，因而
任务参数配置。 单击操作列的“运行任务”，即可触发一次任务执行。每执行一次任务，会生成一条任务实例。 单击操作列的“查看实例”，进入任务实例管理页签。可以查看该任务的运行记录，以及每条任务实例的状态和采集结果。当数据湖元数据同步任务的实例状态为“已完成”且采集结果有数值时，在库表清单页签可以查看采集到的元数据列表。
参数配置。 单击操作列的“运行任务”，即可触发一次任务执行。每执行一次任务，会生成一条任务实例。 单击操作列的“查看实例”，进入任务实例管理页签。可以查看该任务的运行记录，以及每条任务实例的状态和采集结果。当元数据同步任务的实例状态为“已完成”且采集结果有数值时，在库表清单页签可以查看采集到的元数据列表。
数据源采集失败，如何重新采集？ 采集失败的数据源，处理完失败原因后，需要删除后通过新增数据源重新采集。 在任务列表页面，单击采集任务操作列的“查看”，进入任务详情页面。 单击采集项操作列的“新增数据源”，弹出新增数据源窗口。 选择区域和资源类型，单击“确认”按钮。新增数据源成功，系统开始对新增的数据源进行采集。
执行机凭证 选择执行机的登录凭证。凭证的添加方法请参考添加资源凭证中的大数据-执行机。 执行机IP 填写连接执行机的IP地址。 执行机连接端口 填写连接执行机的端口。 Spark客户端目录 填写Spark客户端的安装目录路径。 环境变量地址 填写环境变量文件（配置文件）的绝对路径，例如：
执行机凭证 选择执行机的登录凭证。凭证的添加方法请参考添加资源凭证中的大数据-执行机。 执行机IP 填写连接执行机的IP地址。 执行机连接端口 填写连接执行机的端口。 Spark客户端目录 填写Spark客户端的安装目录路径。 环境变量地址 填写环境变量文件（配置文件）的绝对路径，例如：
元数据连接为Delta（无元数据）连接时，模板中的source_path和target_path参数为必填项。 模板参数填写完成并保存后，单击导入窗口的“添加文件”按钮，将填写后的模板文件上传。 上传成功后，单击“确认”按钮，系统开始导入，并且会在任务实例管理页签中的任务实例列表中，新增一条导入数据表的任务实例记录。您可以通过任务实例查看导入状态。
元数据连接为Delta（无元数据）连接时，模板中的source_path和target_path参数为必填项。 模板参数填写完成并保存后，单击导入窗口的“添加文件”按钮，将填写后的模板文件上传。 上传成功后，单击“确认”按钮，系统开始导入，并且会在任务实例管理页签中的任务实例列表中，新增一条导入数据表的任务实例记录。您可以通过任务实例查看导入状态。
一个可用于访问MgC的IAM用户，并获取账号/IAM用户的访问密钥（AK/SK）。获取方法请参考准备工作。 创建应用迁移项目 在MgC控制台为本次迁移创建独立的项目，方法请参见项目管理。 创建弹性文件系统 在目的端创建相应的弹性文件系统，用于迁移后的数据存储和管理，方法请参见创建弹性文件系统。
数配置。 单击操作列的“运行任务”，即可触发一次任务执行。每执行一次任务，会生成一条任务实例。 单击操作列的“查看实例”，进入任务实例管理页签。可以查看该任务的运行记录，以及每条任务实例的状态和采集结果。当元数据同步任务的实例状态为“已完成”且采集结果有数值时，在库表清单页签可以查看采集到的元数据列表。
数据流：数据流涉及从源端到目的端的数据传输。为确保数据流的畅通，需要检查目的端服务器的安全组配置，确保目的端安全组对源端IP开放了指定的迁移端口。如果源端主机无法直接访问公网或与目的端直接通信，需要配置代理服务器。在这种情况下，需要额外考虑以下因素： 代理服务器的配置，确保它能够正确转发源端主机的流量。
Agent安装在源端待迁移的主机上，主要原因包括： 资源消耗：MgC Agent在采集和迁移运行过程中会消耗CPU和内存资源。在迁移任务量大时，这可能会对源端的业务运行造成影响。 端口占用：MgC Agent会占用源端主机上的一些端口，也可能会对源端业务产生影响。 检查安装MgC Agent的Lin
场景一： 由于元数据中的mtime属性引起的校验失败。在对象存储数据迁移过程中，如果启用了元数据保留迁移，且目的端存储为PFS桶，可能会因为源端对象的元数据中包含mtime属性而导致校验失败。这是因为对象存储中的mtime属性（自定义）与PFS桶中的mtime属性（最后修改时
实例资源清单上传后，单击云盘资源清单后的“添加文件”，将导出的阿里云ECS云盘资源清单上传。 Redis 单击资源清单后的“添加文件”，将导出的阿里云Redis实例资源清单上传。 对象存储 单击资源清单后的“添加文件”，将导出的阿里云OSS桶资源清单上传。 数据库 单击资源清单后的“添加文件”，将导出的阿里云RDS
实例资源清单上传后，单击云盘资源清单后的“添加文件”，将导出的阿里云ECS云盘资源清单上传。 Redis 单击资源清单后的“添加文件”，将导出的阿里云Redis实例资源清单上传。 对象存储 单击资源清单后的“添加文件”，将导出的阿里云OSS桶资源清单上传。 数据库 单击资源清单后的“添加文件”，将导出的阿里云RDS
调研采集过程是否会对源端业务产生影响？ MgC采用高效的数据采集算法，确保数据采集可以在较短的时间内完成，有效避免了长时间的资源占用，最大限度减少了对源端业务的影响。 父主题： 产品咨询
Agent（原Edge）提供了多种类型的线下采集器，用于采集线下网络环境中的资源规格和配置信息。本节为您介绍创建线下工具采集任务的方法。 前提条件 已下载并安装MgC Agent，并完成用户注册。 已安装待采集资源类型的采集器。 操作步骤 使用注册的用户名、密码登录MgC Agent
MgC通过以下方式确保采集数据的安全： 数据加密传输：采用加密技术来保护数据在传输过程中的安全 本地加密存储凭证：MgC Agent上的凭证信息都会经过加密处理后保存在本地，不会通过网络传输到云端。 本地数据采集与存储：通过MgC Agent线下采集的信息会被安全地保存在本地。在将本地采集的数据上传到
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
