如需了解国际站更多云产品，请访问国际站。https://www.huaweicloud.com/intl/
不再显示此消息
如需了解国际站更多云产品，请访问国际站。https://www.huaweicloud.com/intl/
不再显示此消息
本文将详细介绍如何使用前缀列表文件（包含多个前缀的列表文件）来筛选并批量迁移OBS桶内的对象。 准备工作 使用MgC之前，您需要拥有一个华为账号或一个可用于访问MgC的IAM用户，获取方法请参见准备工作。 在MgC控制台创建应用迁移项目。项目类型选择“应用迁移”。 将源端云平台账号对应的AK/SK添加至MgC，
资源列表”，进入资源列表页面。 在主机资源列表，单击列表上方的“添加资源”按钮，弹出添加主机窗口。 图1 添加主机 根据表1，填写相应参数后，单击“确认”，系统会自动检查凭证绑定状态和进行信息采集。 表1 添加主机参数说明 参数 说明 名称 用户自定义 迁移中心Agent绑定 选择源端注册的MgC
钮。支持添加多个步骤。 迁移阶段中的步骤添加完成后，单击“确认”按钮，完成迁移阶段的添加。 只有自行添加的阶段，可以进行修改、删除操作，模板中的迁移阶段无法进行修改和删除。 添加步骤 在迁移工作流详情页面，将鼠标移动到步骤名称上，选择添加前置步骤/添加后置步骤，弹出添加步骤窗口。
钮。支持添加多个步骤。 迁移阶段中的步骤添加完成后，单击“确认”按钮，完成迁移阶段的添加。 只有自行添加的阶段，可以进行修改、删除操作，模板中的迁移阶段无法进行修改和删除。 添加步骤 在迁移工作流详情页面，将鼠标移动到步骤名称上，选择添加前置步骤/添加后置步骤，弹出添加步骤窗口。
Linux主机默认22端口，可根据实际情况修改。 凭证 选择源端主机凭证，如未提前在Edge上添加源端主机凭证，请前往Edge控制台添加，并同步至迁移中心。 添加成功后，在资源列表页面的主机页签，可以查看添加的主机资源。 添加数据库 登录迁移中心管理控制台。 单击左侧导航栏的“调研>资源采集”，进入
创建表组并添加数据表 将源端数据表加入表组中，为后续对数作业做准备。 使用须知 每次最多支持导入10,000张表。 待导入的表必须属于同一个元数据来源。 导入数据表时，系统不会校验数据表加入的分组数量和对数标准。为保持对数的准确性，建议同一数据表加入的分组不超过3个，并避免加入对数标准相同的分组。
创建表组并添加数据表 将源端数据表加入表组中，为后续对数作业做准备。 使用须知 每次最多支持导入10,000张表。 待导入的表必须属于同一个元数据来源。 导入数据表时，系统不会校验数据表加入的分组数量和对数标准。为保持对数的准确性，建议同一数据表加入的分组不超过3个，并避免加入对数标准相同的分组。
AK/SK适用于添加华为云、阿里云、AWS、腾讯云、七牛云和金山云等云平台凭证。 配置文件适用于添加谷歌云平台凭证。配置文件需要上传谷歌云服务账号凭据，该凭证必须为json格式文件，且大小不能超过4KB。配置文件获取方法请参考获取谷歌云账号凭证配置文件。 ID/密钥适用于添加Azure
文件存储工作流的顺利运行。创建方法请参考创建集群。 创建目的端弹性文件系统。 在目的端创建相应的弹性文件系统，用于迁移后的数据存储和管理，方法请参见创建弹性文件系统或创建高性能文件系统。 注意事项 一个方案只能创建一个迁移工作流。 一个方案最多添加100个文件存储。 同一方案下的目的端文件存储必须处于同一区域。
文件存储工作流的顺利运行。创建方法请参考创建集群。 创建目的端弹性文件系统。 在目的端创建相应的弹性文件系统，用于迁移后的数据存储和管理，方法请参见创建弹性文件系统或创建高性能文件系统。 注意事项 一个方案只能创建一个迁移工作流。 一个方案最多添加100个文件存储。 同一方案下的目的端文件存储必须处于同一区域。
高级选项参数配置中勾选“CDN迁移支持”，输入对应的鉴权信息即可。当默认域名不能满足您的迁移需求，比如您需要一个自定义域名以便使用CDN降低源端出口下载流量的费用，可以勾选此选项。在域名输入框中输入自定义域名，并选择传输协议。HTTP协议安全级别低于HTTPS协议，推荐使用HTTPS协议。
弹性资源池为DLI作业运行提供所需的计算资源（CPU和内存）。购买方法请参考创建弹性资源池。 在弹性资源池中添加队列。 创建完弹性资源池后，需要为弹性资源池分别添加一条通用队列和一条SQL队列，用于后续作业的运行。添加方法请参考添加队列。 创建DLI增强型跨源连接 登录DLI管理控制台，在左侧导航栏单击“资源管理
Agent并与迁移中心连接。 步骤二：添加主机 登录迁移中心管理控制台。在左侧导航栏的项目下拉列表中选择创建的应用迁移项目。 单击左侧导航栏的“采集 > 资源列表”，进入资源列表页面。 在主机资源列表，单击列表上方的“添加资源”按钮，弹出添加主机窗口。 图1 添加主机 根据表1，填写相应参数
当您迁移Windows主机时，需要确保源端主机能够解析相关云服务的接口域名。这通常涉及到在每台源端主机上编辑hosts文件。如果迁移的主机数量众多，手动编辑将非常耗时。为了简化这一过程，我们提供了一个批量修改的脚本示例。您可以利用这个脚本，快速地将域名解析IP批量追加写入到所有源端主机的hosts文件中。
据存储系统。 获取方法：需要您根据需求自行获取并编译，方法请参考Spark Connector。 购买弹性资源池并添加队列 弹性资源池为DLI作业运行提供所需的计算资源（CPU和内存）。购买方法请参考创建弹性资源池。 创建完弹性资源池后，需要为弹性资源池分别添加一条通用队列和一条
当您迁移Linux主机时，需要确保源端主机能够识别并解析相关云服务的接口域名。这通常涉及到在每台源端主机上编辑hosts文件。如果迁移的主机数量众多，手动编辑将非常耗时。为了简化这一过程，我们提供了一个批量修改的脚本示例。您可以利用这个脚本，快速地将域名解析IP批量推送到所有源端主机的hosts文件中。
码格式修改UTF-8编码的方法。 方法一（适用于Windows操作系统） 选择csv文件，鼠标右键，打开方式选择“记事本”。 在记事本窗口左上角选择“文件 > 另存为”，在弹出的“另存为”窗口中，找到编码下拉菜单，选择“UTF-8”，然后保存即可。 方法二（适用于Windows操作系统）
Agent的Linux主机，并确保该Linux主机满足以下要求： 可以连接外网，并检查是否能够访问MgC和IoTDA服务的域名，具体需要检查的域名请查看域名。 检查是否已开放MgC Agent（原Edge）需要的端口，所需端口请查看通信矩阵。 安全组的出方向规则中，需要包含8883端口。
大数据-Hive Metastore凭证文件获取方法 参考访问FusionInsight Manager登录Manager，进入系统页面。 在左侧导航栏，选择“权限>用户”，进入用户页面。 在用户列表，选择要在MgC Agent（原Edge）添加凭证的用户，单击操作列“更多>下载认证凭据”，可以下载凭证文件中的krb5
华为账号准备 使用MgC之前，您需要拥有一个华为账号或一个可用于访问MgC的IAM用户，并获取账号/IAM用户的访问密钥（AK/SK）。获取方法请参考准备工作。 在创建元数据连接时，如果要使用“采集资源使用信息”功能和查看资源概览，需要为IAM账号的AK/SK添加MRS服务和DLI服务的只读权限（ReadOnly）。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
您即将访问非华为云网站，请注意账号财产安全
