AI开发平台MODELARTS-推理精度测试:Step1 准备数据集

时间:2024-09-24 10:50:17

Step1 准备数据集

精度测试需要数据集进行测试。推荐公共数据集mmlu和ceval。下载地址:

表1 精度测试数据集

数据集名称

下载地址

下载说明

mmlu

https://huggingface.co/datasets/cais/mmlu

下载其中的data.tar解压到得到data文件夹,为表示区分,将data文件夹重命名为mmlu-exam。

ceval

https://huggingface.co/datasets/ceval/ceval-exam

下载其中的ceval-exam.zip压缩包,解压到ceval-exam文件夹。

support.huaweicloud.com/bestpractice-modelarts/modelarts_10_1944.html