检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
外部知识。 例如，在构造泛化问题的任务中，需要基于原问题改写为相同含义的问题，而不是生成相似的问题。当提示词使用“请生成10个跟“手机银行怎么转账”相似的问题”时，模型会认为实体/关键词/场景一致则是相似（在这个例子里实体为手机银行），而不是任务需要的语义级别的相同含义，所以输出内容会发散。
在“数据集选择”页签选择需要评估的加工数据集，并设置抽样样本的数量与字符数。 单击“下一步”，选择评估标准。单击“下一步”设置评估人员，单击“下一步”填写任务名称。 单击“完成创建”，将返回至“数据评估”页面，评估任务创建成功后状态将显示为“已创建”。 单击操作列的“评估”，进入评估页面。
在“数据集选择”页签选择需要评估的加工数据集，并设置抽样样本的数量。 单击“下一步”，选择评估标准。单击“下一步”设置评估人员，单击“下一步”填写任务名称。 单击“完成创建”，将返回至“数据评估”页面，评估任务创建成功后状态将显示为“已创建”。 单击操作列的“评估”，进入评估页面。
在左侧导航栏中选择“模型开发 > 模型训练”，单击右上角“创建训练任务”。 在“创建训练任务”页面，参考表1完成训练参数设置。 其中，“训练参数”展示了各场景涉及到的全部参数，请根据具体前端页面展示的参数进行设置。 表1 预测大模型微调参数说明 参数分类 训练参数 说明 训练配置 模型来源 选择“盘古大模型”。
Administrator 统一身份认证服务（除切换角色外）所有权限。 图3 添加用户组权限 设置最小授权范围。 根据授权项策略，系统会自动推荐授权范围方案。 可以选择“所有资源”，即用户组内的IAM用户可以基于设置的授权项限使用账号中所有的企业项目、区域项目、全局服务资源。 可以选择“指定区域
拖动左侧任意节点至画布中，以显示开始节点。 单击画布中的开始节点以打开节点配置页面。 开始节点的参数默认已配置，不支持修改开始节点的参数。 图1 开始节点配置图 步骤3：配置大模型节点 大模型节点提供了使用大模型能力，可在节点中配置已部署的模型，用户可以通过编写Prompt、设置参数让模型处理相应任务。
应用与部署：当大模型训练完成并通过验证后，进入应用阶段。主要包括以下几个方面： 模型优化与部署：将训练好的大模型部署到生产环境中，可能通过云服务或本地服务器进行推理服务。此时要考虑到模型的响应时间和并发能力。 模型监控与迭代：部署后的模型需要持续监控其性能，并根据反馈进行定期更新或再训练。随着
入所需空间。 在左侧导航栏中选择“模型开发 > 模型评测”，单击界面右上角“创建评测任务”。 在“创建评测任务”页面，参考表1完成部署参数设置。 表1 NLP大模型自动评测任务参数说明 参数分类 参数名称 参数说明 选择服务 模型来源 选择“NLP大模型”。 服务来源 支持已部署
清洗。 训练参数设置：若数据质量存在问题，且因训练参数设置的不合理而导致过拟合，该现象会更加明显。请检查训练参数中的 “训练轮次”或“学习率”等参数的设置，适当降低这些参数的值，降低过拟合的风险。 推理参数设置：请检查推理参数中的“温度”或“核采样”等参数的设置，适当减小其中一个
属的问题，模型生成的结果不完整，出现了异常截断。这种情况可能是由于以下几个原因导致的，建议您依次排查： 推理参数设置：请检查推理参数中的“最大Token限制”参数的设置，适当增加该参数的值，可以增大模型回答生成的长度，避免生成异常截断。请注意，该参数值存在上限，请结合目标任务的实际需要以及模型支持的长度限制来调整。
单击左侧导航栏“工作台”，在“应用”页签，单击右上角“创建应用”。 在“创建应用”页面，填写应用名称与应用描述，单击页面左下角的图片可修改应用图标，单击“确定”，进入应用编排页面。 图1 应用编排页面 步骤2：配置Prompt 创建应用后，需要撰写提示词（Prompt），为Agent设定人设、目标、核心技能、执行步骤。
于以下几个原因导致的，建议您依次排查： 训练参数设置：您可以通过绘制Loss曲线查询来确认模型的训练过程是否出现了问题，这种情况大概率是由于训练参数设置的不合理而导致了过拟合。请检查训练参数中的 “训练轮次”或“学习率”等参数的设置，适当降低这些参数的值，降低过拟合的风险。 数据
因导致的，建议您依次排查： 训练参数设置：您可以通过绘制Loss曲线查询来确认模型的训练过程是否出现了问题，这种情况大概率是由于训练参数设置的不合理而导致了欠拟合，模型没有学到任何知识。请检查训练参数中的 “训练轮次”或“学习率”等参数的设置，适当增大“训练轮次”的值，或根据实际
量信息，候选提示词中关联的变量也会进行展示，候选提示词相关操作请参见设置候选提示词。 同一个提示词工程中，定义的变量不能超过20个。 在“模型”区域，单击“设置”，设置提示词输入的模型和模型参数。 图4 模型设置 父主题： 撰写提示词
推理参数设置：请检查推理参数中的“话题重复度控制”或“温度”或“核采样”等参数的设置，适当增大其中一个参数的值，可以提升模型回答的多样性。 数据质量：请检查训练数据中是否存在文本重复的异常数据，可以通过规则进行清洗。 训练参数设置：若数据质量存在问题，且因训练参数设置的不合理而
Studio大模型开发平台，在“我的空间”模块，单击进入所需空间。 在左侧导航栏中选择“模型开发 > 模型部署”，完成创建CV大模型部署任务后，可以查看模型的部署状态。 当状态显示为“运行中”时，表示模型已成功部署。此过程可能需要较长时间，请耐心等待。 可单击模型名称可进入详情页，查看模型的部署详情、部署事件、部署日志等信息。
模块，单击进入所需空间。 在左侧导航栏中选择“模型开发 > 模型部署”，完成创建科学计算大模型部署任务后，可以查看模型的部署状态。 当状态显示为“运行中”时，表示模型已成功部署。此过程可能需要较长时间，请耐心等待。 可单击模型名称可进入详情页，查看模型的部署详情、部署事件、部署日志等信息。
”模块，单击进入所需空间。 在左侧导航栏中选择“模型开发 > 模型部署”，完成创建NLP大模型部署任务后，可以查看模型的部署状态。 当状态显示为“运行中”时，表示模型已成功部署。此过程可能需要较长时间，请耐心等待。 可单击模型名称可进入详情页，查看模型的部署详情、部署事件、部署日志等信息。
Studio大模型开发平台，在“我的空间”模块，单击进入所需空间。 在左侧导航栏中选择“模型开发 > 模型部署”，完成创建预测大模型部署任务后，可以查看模型的部署状态。 当状态显示为“运行中”时，表示模型已成功部署。此过程可能需要较长时间，请耐心等待。 可单击模型名称可进入详情页，查看模型的部署详情、部署事件、部署日志等信息。
Studio大模型开发平台，在“我的空间”模块，单击进入所需空间。 在左侧导航栏中选择“模型开发 > 模型部署”，完成创建专业大模型部署任务后，可以查看模型的部署状态。 当状态显示为“运行中”时，表示模型已成功部署。此过程可能需要较长时间，请耐心等待。 可单击模型名称可进入详情页，查看模型的部署详情、部署事件、部署日志等信息。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
