检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在目的端配置中，支持配置的自定义参数及说明请参见表1和conf参数说明。 表1 支持的自定义参数说明 参数名称 取值范围 说明 是否必填 spark.dli.metaAccess.enable - 填写true。 是 spark.dli.job.agency.name 填写DLI委托权限名称。 mgc.mc2dli
打开生成的URL列表文件（在本文示例中为test2.txt），您将看到每个文件的共享下载链接。通过浏览器尝试访问这些链接，以验证生成的URL是否有效。 如果链接无法访问，请检查文件的访问权限是否设置为可读，并重新生成链接。 根据MgC的要求，编辑URL列表文件内容，使其包含文件的共享下载链接和文件名，格式为：
根据表1，配置公网发现任务参数。 表1 公网发现任务参数说明 区域 参数 说明 是否必选 基础配置 任务名称 自定义发现任务名称。 是 任务说明 输入发现任务说明。 否 任务配置 源端 选择华为云。 是 凭证 选择源端对应的凭证，如未提前添加凭证，请单击“新建凭证”，填写相应参数，校验并保存凭证。
本文介绍创建迁移集群所包含的资源类型以及所有节点的安全组配置。 迁移集群包含的资源类型和介绍 资源类型 创建时可配置 是否必须 规格数量 名称 描述 ECS 是 是 Master节点：1台 迁移节点：根据创建集群时的参数配置创建 列举节点：根据创建集群时的参数配置创建 “oms_cluster_ecs_”
HBase凭证 选择在Edge添加的源端HBase凭证。凭证的添加方式请参考添加资源凭证，类型选择“大数据-HBase”。 安全集群 选择是否部署在安全集群下。 Zookeeper节点IP 填写连接到源端Zookeeper的IP地址。通常是部署Zookeeper的服务器公网IP地址或内网IP地址。
MgC在统一身份认证服务（IAM）能力基础上，为用户提供细粒度的权限管理功能，帮助用户灵活便捷地对账号下的IAM用户设置不同的MgC资源权限，结合权限策略实现权限隔离。 以下是使用MgC不同功能时，IAM用户需要配置的权限。为IAM用户配置权限的方法请参考创建自定义策略。 功能 权限Action 配置主机购买模板
默认创建名称为“Hive-Metastore-4位随机数（字母和数字）”，也可以自定义名称。 迁移工具 选择在源端环境中部署的迁移工具Edge。 启用安全连接 选择是否启用安全连接。 MetaStore在非安全集群下，可以不启用安全连接。 MetaStore在安全集群下，需要启用安全连接并选择凭证。凭证的
采集Azure容器AKS资源 在进行Azure Kubernetes Service（AKS）资源迁移前，通过MgC进行资源采集是关键步骤，它为后续迁移操作提供了必要的数据支持。本节介绍使用MgC采集AKS资源的基本原理、准备工作、账号权限要求以及具体的操作步骤，旨在帮助用户高效、准确地完成AKS资源的数据采集工作。
与MgC建立连接的Edge工具。 ClickHouse凭证（可选） 选择步骤4.在Edge添加的源端 MRS ClickHouse凭证。 安全集群 选择是否部署在安全集群下。 ClickHouse Server IP 填写连接到源端ClickHouse服务器的IP地址。通常是运行ClickHouse的主机IP地址。
创建执行机连接 执行机是获取数据的任务执行单元，需要分别与源端和目的端的执行机建立连接，然后执行数据统计，统计结果将用于数据校验。 以下大数据组件需要通过创建执行机连接来进行数据校验： Hive Metastore Delta Lake（有元数据） Delta Lake（无元数据）
主机深度采集成功，部分采集规格信息缺失 问题描述 进行主机深度采集后，在资源详情中查看采集的基本信息和规格信息，发现存在部分信息缺失的情况。 问题分析 出现该问题，可能是在安装Edge主机上的Linux采集脚本时，UNIX换行符格式不正确。正常情况下，Linux系统使用“LF”作为换行符，但安装的脚本中使用了Windows系统的“CR
与MgC建立连接的Edge工具。 ClickHouse凭证（可选） 选择步骤4.在Edge添加的阿里云EMR ClickHouse凭证。 安全集群 选择是否部署在安全集群下。 ClickHouse Server IP 填写连接到阿里云EMR ClickHouse服务器的IP地址。通常是运行ClickHouse的主机IP地址。
影响小对象迁移速度的关键因素有哪些？ 在迁移小对象的过程中，以下是一些可能影响小对象迁移速度的因素以及相应的建议： 迁移集群的CPU负载：集群的CPU负载过高，可能会减慢处理小对象迁移的速度。 建议：优化集群的CPU资源分配，或者增加更多的迁移节点来分散负载。 源端和目的端的QP
凭证管理 凭证是资源采集的唯一认证方式，本节介绍如何添加用于发现云上资源（公网发现）所需要的凭证。内网发现、手动添加所需的凭证添加方式请参考在Edge添加凭证。 认证方式 当前仅支持添加公有云资源类型的凭证。支持的认证方式参见表1。 表1 公有云认证方式 资源类型 认证方式 说明
添加资源凭证 凭证是资源采集的唯一认证方式，在进行资源采集前，您需要在Edge上添加源端资源凭证。连接迁移中心后，资源凭证会同步至迁移中心。在Edge上添加的凭证都会加密存储在您本地，同步时密码、密钥等凭证信息并不会上传至迁移中心。 在Edge添加的资源凭证存储有效期为60天，超过60天后，凭证会过期，需要重新添加。
步骤一：下载并安装Edge 迁移工具Edge是一款专为配合MgC设计的软件，用于源端资源发现与信息采集，同时还提供了工作流模块，用于支持云端迁移工作流任务的执行。 操作步骤 建议在源端内网环境中准备一台Windows主机，用于安装迁移工具Edge，对该主机的要求以及Edge的安装
格为C系列规格，大小是8U16G。 规格选定后，后续无法更改。 设置的节点数量需要同时满足如下要求： 迁移节点数+列举节点数+1 ≤100 迁移节点数+列举节点数+1 ≤子网可用IP数 列举节点ECS规格 列举节点用于执行列举动作，推荐规格为C系列规格，大小是8U16G。 网络配置
预估月均用量 由于资源总用量无法体现资源具体是账单区间内哪个时间点消耗的，迁移中心采用平均时间进行计算，即假设该资源在账单区间内全程都在使用，如果账单区间是2个月，即假设这个资源2个月内都在使用。 月均用量的单位并没有沿用资源总用量的单位，其含义是一个比值，即没有单位，具体计算过程如下：
度限制说明 在OBS、NAS和SMB存储系统之间进行异构迁移时，不同系统对文件夹和路径长度的限制存在不同。了解并遵守每个系统的对象长度限制是成功执行异构迁移的关键。根据具体的迁移方向，确保对象的路径长度符合目的端系统的要求，以避免迁移失败或数据不一致的问题。 不同存储系统对路径和文件夹长度的限制参见下表：
存储类型介绍 各云厂商的对象存储服务针对用户业务对存储性能、成本的不同诉求，将对象的存储级别进行了区分，区分的普遍依据是对象的访问频度、访问时延、最低存储时间、最低存储单元、数据可靠性、数据可用性等。根据以上依据，华为云OBS提供了以下四种存储类型： 标准存储 访问时延低和吞吐量
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
