华为云首页用户手册

AI开发平台MODELARTS-上传数据和算法至SFS（首次使用时需要）:准备数据

AI开发平台MODELARTS-上传数据和算法至SFS（首次使用时需要）:准备数据

时间：2024-11-12 16:42:34

AI开发平台MODELARTS 单机多卡

准备数据

登录coco数据集下载官网地址：https://cocodataset.org/#download
下载coco2017数据集的Train（18GB）、Val images（1GB）、Train/Val annotations（241MB），分别解压后并放入coco文件夹中。
下载完成后，将数据上传至SFS相应目录中。由于数据集过大，推荐先通过obsutil工具将数据集传到OBS桶后，再将数据集迁移至SFS。
1. 在本机机器上运行，通过obsutil工具将本地数据集传到OBS桶。
```
# 将本地数据传至OBS中
# ./obsutil cp ${数据集所在的本地文件夹路径} ${存放数据集的obs文件夹路径} -f -r
# 例如
./obsutil cp ./coco obs://your_bucket/ -f -r
```
2. 登录E CS 服务器，通过obsutil工具将数据集迁移至SFS，样例代码如下：
```
# 将OBS数据传至SFS中
# ./obsutil cp ${数据集所在的obs文件夹路径} ${SFS文件夹路径} -f -r
# 例如
./obsutil cp obs://your_bucket/coco/ /mnt/sfs_turbo/ -f -r
```
  /mnt/sfs_turbo/coco文件夹内目录结构如下：
```
coco
|---annotations
|---train2017
|---val2017
```
  更多obsutil的操作，可参考obsutil简介。
3. 将文件设置归属为ma-user：
```
chown -R ma-user:ma-group coco
```

上一篇：AI开发平台MODELARTS-使用Notebook进行代码调试:背景信息

下一篇：AI开发平台MODELARTS-监控资源

华为云11.11 2核1G 2M 云服务器

29元/年

立即注册领万元上云礼券

抽奖赢11111元免单

续费同价 L实例 2核2G 4M

98元/年

热门域名 1元随心购

1元/年

AI开发平台MODELARTS-上传数据和算法至SFS（首次使用时需要）:准备数据

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

推荐文章

解决方案
相关专题