检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据迁移失败，提示超过DLI网管流控上限 问题描述 进行大数据数据迁移失败，在数据湖探索的Spark作业查看报错信息为：The throttling thershold has been reached 问题分析 出现该问题，是因为您创建的资源数量已达到DLI服务流控限制阈值。 解决方法 请联系DLI服务技术支持人员，调整流控上限。
进行主机采集。 表1 添加主机参数说明 参数 说明 名称 用户自定义 采集设备 选择源端注册的Edge设备。 类型 主机实际系统类型 IP 填写主机IP。 如果采集的主机与安装Edge的主机处于同一VPC内，可以填写私有IP，否则需要填写公网IP。 端口 主机开放端口。 Wind
则此选项无效。 ca 是 CA证书文件的路径。 cert 是 客户端证书文件的路径。 key 是 客户端私钥文件的路径。 cipher 否 要使用的加密算法。 check_hostname 否 如果设置为True，则在SSL连接时验证服务器的主机名。如果未指定证书，则此选项无效。
如果c7规格有CPU和内存不小于源端且在阈值内（8U12G）的规格在售，则推荐最接近源端的规格；如果C7规格中没有找到合适的规格，系统将按照性能顺序，向下一个性能等级的虚拟机规格类型进行搜索。如果性能略低的规格类型中仍然没有找到合适的规格，系统将继续搜索更低性能的计算增强型虚拟机，直到按照性能顺序检索
（可选）清理集群 当您完成数据迁移并且集群不再需要时，可以直接删除闲置的集群以释放资源。 在左侧导航栏选择“部署>迁移集群”，进入迁移集群页面。 在集群列表，选择需要清理的集群，单击操作列的“更多 > 删除”，弹出删除集群窗口。 选择是否同步删除关联资源后，单击“确认”，删除集群。
推荐的目的端规格在满足要求的前提下尽量节约成本。 偏好设置 虚拟机规格偏好 选择期望的目的端主机规格类型，支持多选。 系统盘规格偏好 选择期望的目的端系统盘规格类型。 数据盘规格偏好 选择期望的目的端数据盘规格类型。 虚拟机规格调整 选择主机性能规格的推荐策略。 详细的推荐逻辑说明参见主机评估策略推荐逻辑说明。
动迁移时，单击操作列的“运行”，手动启动迁移。 迁移任务运行后，单击操作列的“查看实例”，进入任务进度页签，可以查看该任务产生的运行实例以及迁移进度。 单击状态列的“重新运行”，可以多次运行迁移实例。 单击进度统计列的“查看”，进入进度详情页面。可以查看迁移的数据表清单、状态以及该任务下所创建的迁移子任务。
为什么存储迁移工作流进度长时间没有变化？ 问题分析 出现迁移进度长时间未更新的情况通常是因为以下几个原因： 子任务处理：迁移工作流会自动将大型任务拆分为多个子任务来执行。只有当这些子任务完成后，系统才会更新显示的进度。 大对象迁移：如果子任务中包含了大型文件或对象，可能需要较长时间来迁移。
步骤五：创建主机迁移工作流 当完成所有准备工作和步骤一~步骤四的操作后，即可前往迁移工作流界面，创建主机迁移工作流。 父主题： 阿里云主机迁移至华为云
实例。 单击操作列的“查看实例”，进入任务实例管理页签。可以查看该任务的运行记录，以及每条任务实例的状态和采集结果。当元数据同步任务的实例状态为“已完成”且采集结果有数值时，在库表清单页签可以查看采集到的元数据列表。 元数据采集完成后，在元数据列表单击血缘列的“去采集”，可以创建血缘采集任务。
为什么不能手动选择主机规格和磁盘类型？ 主机未评估时，无法手动选择规格和磁盘类型，进行一次评估后，即可手动选择想要的主机规格和磁盘类型。 父主题： 规格评估
可以查看已创建的数据湖元数据同步任务列表以及参数配置信息。单击操作列的“更多>修改”，可以修改任务参数配置。 单击操作列的“运行任务”，即可触发一次任务执行。每执行一次任务，会生成一条任务实例。 单击操作列的“查看实例”，进入任务实例管理页签。可以查看该任务的运行记录，以及每条
要启动迁移时，单击操作列的“运行”，手动启动迁移。 迁移任务运行后，单击操作列的“查看实例”，进入任务进度页签，可以查看该任务的迁移进度以及产生的所有运行实例。 单击进度统计列的“查看”，进入进度详情页面。可以查看迁移的数据表清单、状态以及该任务下所创建的迁移子任务。 （可选）数
通过创建迁移项目，可以实现不同迁移资源间的隔离。例如：您可以为迁移阿里云资源、AWS资源分别创建项目，通过项目将不同来源的资源进行隔离。 操作步骤 登录迁移中心管理控制台。 单击左侧导航栏的“配置管理”，进入配置管理页面。选择“项目管理”页签，单击“创建项目”。 在弹出的窗口中，自定义项目名称，
细检查并确保任务类型与队列类型相匹配。 元数据迁移与库的数量 在进行元数据迁移时，MgC会根据识别到的源端数据库的数量，在DLI中自动创建相应的库。如果是整库迁移，通常只会创建一个库；而表迁移可能需要创建多个库。通常，DLI的库数量上限为10。如果DLI空间不足，可能会导致元数据
建议使用采集器提供的默认规则文件进行采集，如果需要自定义采集规则，请在默认规则文件基础上进行修改。 config_path 是 填写配置文件（yaml文件）的存储路径。 注意： 配置文件所在文件夹仅能存放与采集相关的yaml配置文件，可以存放多个配置文件，但不能存放与采集无关的其它yaml文件。
Spark应用每个Executor的CPU核数。该配置项会替换“sc_type”中对应的默认参数。 numExecutors 1-100 Spark应用Executor的个数。该配置项会替换“sc_type”中对应的默认参数。 executorMemory 1-16 G Spark应用的Executor内存，参数配置例如：2G
在资源配置明细的主机页签，单击主机资源绑定目的端列的“去绑定”，弹出绑定目的端窗口。 选择源端主机关联的应用所在区域以及区域下的项目，在所选项目下，选择要绑定的目的端主机。您可以参考源端主机磁盘信息并结合实际情况，选择一台磁盘容量小于源端、磁盘数量少于源端的目的端主机。 需要确保所绑定的目的端主机磁盘容量大于源端实际使用量。
为采集凭证，本节介绍获取Azure“存储账户”和“密钥”的方法。 登录 Azure 门户中转到存储账户。 在左侧导航栏选择“安全性和网络 > 访问密钥” ，即可看到“存储账户名称”和“密钥”。 在“key1”下单击密钥后的“显示”按钮，即可显示访问密钥，并出现复制按钮。 分别复制
单击目的端规格配置框中的“目的端配置表”按钮，进入目的端配置表页面。 在资源配置明细区域的主机页签，单击已完成规格评估主机购买状态列的“添加至购买列表”，购买状态变为“待购买”。 添加完成后，在页面上方的购买列表框中，单击“查看列表”按钮，进入购买列表页面。 在操作流程区域，单击“查看我的模板”
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
