AI开发平台MODELARTS-在ModelArts Standard运行GPU训练作业的准备工作:在ECS服务器挂载SFS Turbo存储

时间:2025-01-03 09:38:53

在E CS 服务器挂载SFS Turbo存储

在ECS服务器挂载SFS Turbo存储后,支持将训练所需的数据通过ECS上传至SFS Turbo。

  1. 检查云服务环境。
    • ECS服务器和SFS的共享硬盘在相同的VPC或者对应VPC能够互联。
    • ECS服务器基础镜像用的是Ubuntu 18.04。
    • ECS服务器和SFS Turbo在同一子网中。
  2. 在ECS服务器中设置华为云镜像源。
    sudo sed -i "s@http://.*archive.ubuntu.com@http://repo.huaweicloud.com@g" /etc/apt/sources.list
    sudo sed -i "s@http://.*security.ubuntu.com@http://repo.huaweicloud.com@g" /etc/apt/sources.list
  3. 安装NFS客户端,挂载对应盘。
    sudo apt-get update
    sudo apt-get install nfs-common
  4. 获取SFS Turbo的挂载命令。
    1. 进入弹性文件服务SFS管理控制台。
    2. 选择“SFS Turbo”进入文件系统列表,单击文件系统名称,进入详情页面。
    3. “基本信息”页签获取并记录“Linux挂载命令”
  5. 在ECS服务器中挂载NFS存储。

    确认对应目录存在后,输入对应指令,命令如下。

    mkdir -p /mnt/sfs_turbo
    mount -t nfs -o vers=3,nolock 192.168.0.169:/ /mnt/sfs_turbo
support.huaweicloud.com/bestpractice-modelarts/modelarts_20_2003.html