AI开发平台MODELARTS-SFT全参微调数据处理:下载数据

时间:2024-11-05 09:54:16

下载数据

SFT全参微调涉及的数据下载地址:https://huggingface.co/datasets/tatsu-lab/alpaca/resolve/main/data/train-00000-of-00001-a09b74b3ef9c3b56.parquet

如果在准备数据章节已下载数据集,此处无需重复操作。

SFT全参微调和LoRA微调训练使用的是同一个数据集,数据处理一次即可,训练时可以共用。

support.huaweicloud.com/bestpractice-modelarts/modelarts_10_1612.html