检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
图1 人工评测示例 在“人工测评”页面,评测任务的状态将显示为“已完成”,单击操作列“评测报告”查看模型评测结果。 父主题: 评测NLP大模型
如果任务状态为“运行失败”,可能由以下原因导致: 文件后缀校验不通过,需要检查文件后缀是否一致。例如,选择创建csv格式的数据集时,文件后缀应为“.csv”。 文件内容校验不通过,需要检查上传的文件数据格式是否正确。可以在“创建导入任务”页面下载数据样例进行比对。
请检查数据是否已标注或标注是否符合算法要求。 父主题: 训练科学计算大模型
最终生成详细的质量评估报告,这些报告能够帮助用户检验数据的准确性、完整性和一致性,确保数据在进行模型训练前的高质量标准,以保证模型在实际应用中的可靠性和稳定性。 数据配比:平台支持对文本、图片类数据进行数据配比。
请检查数据是否已标注或标注是否符合算法要求。
分步推理与反馈:通过分步推理,模型能够在每个步骤后检查和修正自己的思考过程。 例如,在给定一个复杂的逻辑推理问题时,可以要求模型每完成一小步推理,就提供中间结论和推理过程。这样,模型不仅能增加解题的准确性,还能增强理解和自我校正的能力。
比如,随着对话轮数的增加,模型出现了遗忘,可以检查构造的训练数据中轮数是否普遍较少,建议根据实际情况增加数据中的对话轮数。 父主题: 大模型微调训练类
是,审核员会检查标注员的标注内容,若发现问题,审核员可注明原因并驳回标注数据,标注员需重新标注。 审核员 添加审核人员与数量。 审核要求 全部审核:要求审核员对全部数据,逐条进行人工审核,才能完成审核任务。
是,审核员会检查标注员的标注内容,若发现问题,审核员可注明原因并驳回标注数据,标注员需重新标注。 审核员 添加审核人员与数量。 审核要求 全部审核:要求审核员对全部数据,逐条进行人工审核,才能完成审核任务。
数据评估:数据评估通过对数据集进行系统的质量检查,依据评估标准评估数据的多个维度,旨在发现潜在问题并加以解决。 数据发布:将单个数据集发布为特定格式的“发布数据集”的过程,用于后续模型训练等操作。 支持发布的数据集格式为标准格式、盘古格式(适用于训练盘古大模型时)。
是,审核员会检查标注员的标注内容,若发现问题,审核员可注明原因并驳回标注数据,标注员需重新标注。 审核员 添加审核人员与数量。 审核要求 全部审核:要求审核员对全部数据,逐条进行人工审核,才能完成审核任务。
若调整推理参数不生效,则检查数据质量,确认数据中不存在重复数据和高度相似数据。 父主题: 从基模型训练出行业大模型