检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
安装Edge：下载并安装MgC服务所需的云边协同组件Edge。 资源采集：采集源端阿里云ECS主机的信息。 迁移准备：对源端阿里云ECS主机进行配置检查、网络测试和迁移分组。 规格评估：评估并配置华为云目的端主机的规格。 工作流创建：创建并配置迁移工作流并启动迁移。 使用须知 在创建主机迁移工作流前，请仔细阅读并了解以下使用须知内容。
maxPartitionBytes 134217728 读取文件时要打包到单个分区中的最大字节数。 spark.sql.badRecordsPath - Bad Records的路径。 spark.sql.legacy.correlated.scalar.query.enabled false 该参数设置为true：
创建应用 通过创建应用，并将采集到的主机资源添加到应用中，对主机资源进行功能分组，用于后续进行规格评估和创建迁移工作流。 操作步骤 登录迁移中心管理控制台。 单击左侧导航栏的“调研>应用管理”，进入应用管理页面。在页面左上角的当前项目下拉列表中选择迁移项目。 单击应用框中的“新建应用”按钮，弹出新建应用窗口。
证的安全。线上采集的凭证仅在线上环境中保存。 操作权限与最小权限原则：无论哪种采集方式，都需要具备相应的操作权限，并且遵循最小权限原则，即只授予完成特定任务所需的最小权限。 MgC服务侧权限要求：云账号需要具备对应权限才能使用MgC和访问MgC调研数据，MgC相关权限请参考权限管理。
创建应用 您可以通过创建应用，将采集到的资源添加到应用中，对资源进行功能分组，便于后续进行规格评估和创建迁移工作流。 新建应用 登录迁移中心管理控制台。 单击左侧导航栏的“调研>应用管理”，进入应用管理页面。在页面左上角的当前项目下拉列表中选择迁移项目。 单击应用框中的“新建应用”按钮，弹出新建应用窗口。
迁移集群是专为存储工作流提供协作中的核心组件，通过集群可以创建和管理迁移节点、列举节点，部署和升级迁移插件，确保存储工作流顺利运行。 使用须知 单个账号在每个区域（Region）最多只能创建2个集群。 为了保证迁移的稳定性和数据安全，创建的迁移集群不支持用户自行登录。如您有特殊需求必须登录，请联系技术支持人员。
单击页面右上角的“创建迁移工作流”按钮，进入选择模板页面。 选择文件存储批量迁移模板，单击“查看步骤详情”，可以查看该模板所包含的迁移阶段和步骤，以及每个阶段和步骤的详细描述。其中，步骤类型为“自动”，表示该步由系统自动完成。单击“开始配置”按钮，进行工作流配置。 在基础信息区域，输入自定义的工作流名称和描述。
ry：15G，executorMemory：8G，numExecutor：14) 否 executorCores 1- 4 Spark应用每个Executor的CPU核数。该配置项会替换“sc_type”中对应的默认参数。 numExecutors 1-100 Spark应用Ex
MgC分为部署在云上的云服务和部署在客户网络中的Edge两个部分。 MgC：部署在云上，主要包含六个业务功能(问卷&TCO对比、在线采集、应用关联分析、在线评估、资源分组、迁移编排)，通过基于服务开发服务，基于服务运维服务的方式进行设计。 Edge：部署在客户的网络中，用来保存凭证等敏感资源和操作租户本地部
单击页面右上角的“创建迁移工作流”按钮，进入选择模板页面。 选择对象存储批量迁移模板，单击“查看步骤详情”，可以查看该模板所包含的迁移阶段和步骤，以及每个阶段和步骤的详细描述。其中，步骤类型为“自动”，表示该步由系统自动完成。单击“开始配置”按钮，进行工作流配置。 在基础信息区域，输入自定义的工作流名称和描述。
单次采集持续时间，单位为s（秒），1<取值范围<period值，取整数，不设置默认为period值的一半。 max_count 否 每次最大采集量，取值范围≥1，取整数，不设置默认为1000条。 period 否 采集间隔时间，单位为m（分钟），1m≤取值范围≤30m，取整数，不设置默认为1m。 time 是
独立的迁移集群，方法请参见创建集群。 步骤二：创建文件存储迁移方案 将源端需要迁移到同一目的端区域的文件存储资源添加到同一迁移方案中，并为每个资源配置相应的目的端，然后绑定迁移集群。详细操作步骤请参考配置文件存储批量迁移方案。 步骤三：创建文件存储迁移工作流 选择迁移方案，配置迁
请参考创建桶。如果您已有目的端桶，则无需重新创建。 为每个待迁移的源端桶，创建一个对应的前缀列表文件（即一个桶对应一个前缀列表文件），前缀列表文件要求如下： 文件格式为.txt，大小不超过2 MB。 每行只能包含一个前缀，每个前缀的长度不超过1024个字符。 前缀总数（即行数）不超过1000。
里云、腾讯云、金山云为北京区域，谷歌云、亚马逊云为中国香港区域，微软云为东亚区域，七牛云、优刻得为中国大陆，按量优惠取最贵收费，若存在冗余存储而官方存储类型未区分取非冗余储存价格，单位：元。 下表中不存在的云厂商存储类型可能会迁移失败，建议手动解冻后再迁移至OBS。 表1 各云厂商的存储类型和华为云的存储类型转换关系
执行命令后，将生成3个文件的共享下载链接并保存在test2.txt文件中。 打开生成的URL列表文件（在本文示例中为test2.txt），您将看到每个文件的共享下载链接。通过浏览器尝试访问这些链接，以验证生成的URL是否有效。 如果链接无法访问，请检查文件的访问权限是否设置为可读，并重新生成链接。
选择源端主机所在区域，支持多选。 是 资源发现 云平台采集 开启云平台采集，并在资源类型下拉列表，勾选“主机”资源。 是 关联到应用（可选） 应用是资源分组的概念，将资源关联到应用，后续的评估推荐和迁移工作流都将以应用作为整体进行（可以自由添加和删除资源到应用中）。 已提前创建应用，在“应用”的下拉列表中选择要关联的应用。
根据实际情况选择执行机类型，单击“下一步”，根据表1，配置执行机参数。 表1 执行机参数配置说明 参数 配置说明 所属源 根据实际情况选择。 须知： CDH执行机只支持源端，MRS执行机支持源端和目的端。 连接名称 默认创建名称为“执行机类型-4位随机数（字母和数字）”，也可以自定义名称。 执行机凭证
设置“保存到指定前缀”参数中的功能介绍。 根据表4，进行迁移配置。 表4 迁移配置参数说明 参数 子参数 说明 迁移任务类型 列表迁移 通过列表文件过滤迁移，只迁移列表文件中的对象。 并发子任务数 - 用户自定义。配置的数目不能超过可用迁移节点数x10。例如：可用的迁移节点数为2，则最大子任务数配置数目需要≤20。
DeltaLake（无元数据）迁移至MRS DeltaLake数据校验 本文主要介绍将自建DeltaLake环境上的数据迁移至华为云MRS DeltaLake之后，使用迁移中心 MgC进行数据一致性校验的步骤和方法。 DeltaLake不存在元数据，无法通过数据湖元数据同步方式进
查看评估推荐的服务器参数(镜像，磁盘)是否有遗漏，或联系MgC 技术支持人员，查看工作流数据库参数***是否为空。 SMS-Workflow.0102 配置参数 *** 有特殊字符 请联系MgC 技术支持人员，查看工作流数据库参数***是否有特殊字符。 SMS-Workflow.0103 PowerShell
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
