盘古大模型 PANGULARGEMODELS-查看NLP大模型训练状态与指标:查看训练指标

时间:2024-12-03 10:25:01

查看训练指标

对于已完成训练,训练状态是“训练完成”状态的任务,单击任务名称,可在“训练结果”页面查看训练指标,模型的训练指标介绍请参见表2

图1 查看训练指标
表2 训练指标说明

模型

训练指标

指标说明

NLP大模型

训练损失值

训练损失值是一种衡量模型预测结果和真实结果之间的差距的指标,通常情况下越小越好。

一般来说,一个正常的Loss曲线应该是单调递减的,即随着训练的进行,Loss值不断减小,直到收敛到一个较小的值。

困惑度

用来衡量大语言模型预测一个语言样本的能力,数值越低,准确率也就越高,表明模型性能越好。

指标看板

  • bleu-1:模型生成句子与实际句子在单字层面的匹配度,数值越高,表明模型性能越好。
  • bleu-2:模型生成句子与实际句子在词组层面的匹配度,数值越高,表明模型性能越好。
  • bleu-3:模型生成结果和实际句子的加权平均精确率,数值越高,表明模型性能越好。
support.huaweicloud.com/usermanual-pangulm/pangulm_04_0170.html