检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
高性能弹性文件服务数据迁移 方案概述 通过云专线迁移(rclone工具) 跨服务器迁移(rclone工具) 通过云专线迁移(rsync工具) 文件系统之间迁移数据 SFS容量型文件系统迁移至SFS Turbo文件系统
文件系统管理 创建文件系统 查看文件系统 目录配额 删除文件系统
其他操作 SFS Turbo性能测试 使用非root的普通用户挂载文件系统到Linux云服务器 挂载NFS文件系统子目录到云服务器(Linux) 数据迁移
数据迁移 迁移说明 通过云专线迁移 使用公网迁移 父主题: 其他操作
容灾备份 备份
监控与审计 使用CES监控SFS Turbo文件系统 使用CTS审计SFS Turbo文件系统
AITurbo AI场景加速 加速保存与加载checkpoint 父主题: 数据管理
训练 上传数据至OBS并预热到SFS Turbo中 创建训练任务 父主题: 实施步骤
区域和可用区 目前,华为云已在全球多个地域开放云服务,您可以根据需求选择适合自己的区域和可用区。更多信息请参见华为云全球站点。 如何选择区域? 选择区域时,您需要考虑以下几个因素: 地理位置 一般情况下,建议就近选择靠近您或者您的目标用户的区域,这样可以减少网络时延,提高访问速度。 在除
网络管理 配置DNS
数据安全 加密 加密传输
数据管理 扩容 存储联动 服务配额 AITurbo AI场景加速
加速保存与加载checkpoint 加速原理与安装AITurbo SDK 适配pytorch 父主题: AITurbo AI场景加速
Turbo的AI云存储解决方案,如图所示,华为云高性能文件服务SFS Turbo HPC型支持和OBS数据联动,您可以通过SFS Turbo HPC型文件系统来加速对OBS对象存储中的数据访问,并将生成的结果数据异步持久化到OBS对象存储中长期低成本保存。 图1 基于OBS+SFS Turbo的华为云AI云存储解决方案
Turbo文件系统来加速OBS对象存储中的数据访问。SFS Turbo文件系统支持无缝访问存储在OBS对象存储桶中的对象。您可以指定SFS Turbo内的目录与OBS对象存储桶进行关联,然后通过创建导入导出任务实现数据同步。您可以在上层训练等任务开始前将OBS对象存储桶中的数据提前导入到SFS
变更计费模式 变更计费模式概述 按需转包年/包月 包年/包月转按需
基本概念 产品基本概念 项目和企业项目 区域和可用区
权限管理 创建用户并授权使用SFS Turbo 创建SFS Turbo自定义策略 文件系统权限管理
使用CES监控SFS Turbo文件系统 监控指标说明 创建告警规则 父主题: 监控与审计
典型应用举例 高性能计算 企业网站/APP后台 日志打印