检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
实施步骤 创建资源 基本配置 训练 例行维护 父主题： 面向AI场景使用OBS+SFS Turbo的存储加速实践
配置ModelArts网络关联SFS Turbo ModelArts网络关联SFS Turbo后，可直接在ModelArts的Notebook开发及训练环境中挂载SFS Turbo共享文件系统，并访问其中的数据。 登录ModelArts管理控制台，创建网络并打通创建资源中创建的创
启用WAF进行静态网站防护 如果您需要使用OBS静态网站托管功能，为进一步提升您网站的安全性，建议您使用华为云的WAF服务对您的域名进行保护，降低网站被网络攻击的风险。详情请参见管理防护域名。 启用态势感知服务（SA）保障OBS资源安全 态势感知通过“安全上云合规检查1.0”、“等保2.0三级
境外数据传输回国场景下的丢包和网络稳定性问题 在数据跨境传输场景下，由于您所在的网络环境可能处在运营商网络边缘节点，向运营商网络请求成功率比较低，所以可能会出现丢包和网络稳定性问题。 建议您先使用跨区域复制或者云连接 CC将数据传输回国，然后再从国内访问和下载数据。 父主题： 产品咨询
默认是16Gbit/s，如果导入导出速度受到OBS读写带宽上限影响，可提交工单联系技术支持人员申请调大OBS服务的读写带宽。 父主题： 实施步骤
报错NetworkOnMainThreadException NetworkOnMainThreadException 一般是因为网络请求在MainThread类中产生的异常。建议和网络请求有关比较耗时的操作，放到一个子线程里，然后用Handler消息机制与主线程通信。 父主题： 异常处理
限、桶策略、ACL、防盗链等多种方式和技术确保数据传输与访问的安全。 支持敏感操作保护，针对删除桶等敏感操作，可开启身份验证。 需自行承担网络信息安全、技术漏洞、误操作等各方面的数据安全风险。 可靠性 通过五级可靠性架构，保障数据持久性高达99.9999999999%，业务连续性高达99
HPC文件系统和ModelArts资源池就近选择在同一个Region的同一个可用区（AZ）。 创建VPC 虚拟私有云可以为您构建隔离的、用户自主配置和管理的虚拟网络环境，操作指导请参考创建虚拟私有云和子网。 创建SFS Turbo HPC型文件系统 创建SFS Turbo文件系统，文件系统类型选择“HPC型”，操作指导请参考创建SFS
基本配置 配置ModelArts和SFS Turbo间网络直通 配置SFS Turbo和OBS联动 配置SFS Turbo数据自动导出到OBS桶 配置SFS Turbo数据淘汰策略 父主题： 实施步骤
创建训练任务 基于SFS Turbo共享文件存储创建ModelArts训练任务。 登录ModelArts管理控制台。 在左侧导航栏中选择“训练管理 > 训练作业”，进入“训练作业”列表。 单击右上角的“创建训练作业”，进入“创建训练作业”页面，在该页面填写训练作业相关参数信息。
"控制面板" 中，查看方式选择“类别”，依次单击"网络和Internet"、“网络和共享中心”和“更改适配器设置”。 右键单击要配置的连接，然后单击"属性 "。 单击 "Internet 协议版本 4 (TCP/IP) ， 单击"属性"，可查看具体的DNS服务器地址配置。 可以调整DNS服务器地址为8
th环境变量中增加npm的安装目录（一般为Node.js的安装目录）。 您可能需要重启电脑使环境变量生效。 如果您使用npm安装依赖时出现网络错误，请使用代理。 父主题： 快速入门
配置SFS Turbo和OBS联动 SFS Turbo HPC型文件系统支持无缝访问存储在对象存储OBS存储桶中的对象，您可以指定SFS Turbo内的文件目录与OBS对象存储桶进行关联。 登录SFS管理控制台，在左侧导航窗格中选择“SFS Turbo”。 在文件系统列表中，单击
timeout、EOF报错是两种常见的因为网络原因导致请求失败的场景，通常是由于网络波动等原因导致；常见的定位思路包括： 通过ping桶域名（bucketName.endpoint）判断本地到指定访问的桶域名之间的网络是否不通；如果不通优先排查本地网络问题。 如果问题出现概率较大，且域名
训练 上传数据至OBS并预热到SFS Turbo中 创建训练任务 父主题： 实施步骤
虚拟私有云（VPC） VPC主要负责为ECS构建隔离的、用户自主配置和管理的虚拟网络环境，提升用户云中资源的安全性，简化用户的网络部署。 子网是VPC中用来为ECS提供IP地址管理、DNS服务的一个网络，子网内ECS的IP地址都属于该子网。 云解析服务（DNS） DNS提供内网DN
配置SFS Turbo数据淘汰策略 SFS Turbo HPC型文件系统绑定OBS后端之后，建议配置缓存数据淘汰功能。SFS Turbo会自动释放设定时间内没有访问过的文件数据内容，仅保留文件元数据，数据内容释放后不占用SFS Turbo文件系统上的存储空间，再次访问该文件时，将重新从OBS中加载文件数据内容。
下载对象失败 检查本地与OBS的网络是否正常，如果存在网络故障，解决网络故障，确保网络正常。 请检查账号是否已通过实名认证。如果没有，请先实名认证。 登录OBS管理控制台。 在顶部导航栏单击用户名，即可查看用户认证状态。 图1 账号认证状态 如果您没有实名认证，请参考个人账号如何
配置SFS Turbo数据自动导出到OBS桶 配置自动导出后，训练过程中周期性写入SFS Turbo文件系统的Checkpoint模型文件会自动以异步方式导出到关联的OBS桶中进行长期保存，无需手工导出，异步导出方式不会占用上层训练任务时间。 SFS Turbo的自动导出功能当前
上传数据至OBS并预热到SFS Turbo中 上传数据至OBS 下载ImageNet21K数据集，并上传ImageNet21K数据集至OBS，详细操作指导请参考上传数据至OBS。 OBS针对不同场景提供了多种数据上云方案，您可根据数据量、耗时、费用等需求选择适合的方案上传数据至OBS，更多内容请参考数据上云方案。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
