AI开发平台MODELARTS-推理精度测试:Step2 查看精度测试结果
Step2 查看精度测试结果
默认情况下,评测结果会按照result/{model_name}/的目录结果保存到对应的测试工程。执行多少次,则会在{model_name}下生成多少次结果。benchmark_eval下生成的log中记录了客户端产生结果。数据集的打分结果在result/{model_name}/...目录下,查找到summmary目录,有txt和csv两种保存格式。总体打分结果参考txt和csv文件的最后一行,举例如下:
npu: mmlu:46.6 gpu: mmlu:47
NPU打分结果(mmlu取值46.6)和GPU打分结果(mmlu取值47)进行对比,误差在1%以内(计算公式:(47-46.6)/47*100=0.85%)认为NPU精度和GPU对齐。
- 性能测试使用教程_性能测试操作步骤_性能测试快速入门-华为云
- 软件测试流程_测试计划CodeArts TestPlan_测试平台-华为云
- 性能测试使用流程_性能测试怎么样_性能测试 CodeArts PerfTest-华为云
- GaussDB测试_GaussDB数据库测试_高斯数据库测试-华为云
- 性能测试产品优势_性能测试应用场景_性能测试CodeArts PerfTest-华为云
- 测试管理平台有什么优势_测试计划CodeArts TestPlan_软件测试-华为云
- 什么是性能测试_性能测试作用_性能测试 CodeArts PerfTest-华为云
- 性能测试有哪些特性_性能测试特点_性能测试 CodeArts PerfTest-华为云
- ModelArts自动学习是什么_自动学习简介_零代码完成AI开发
- 性能测试基本概念_性能测试有什么作用_性能测试 CodeArts PerfTest-华为云