检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
将数据从OBS预热到SFS Turbo中 SFS Turbo HPC型文件系统绑定OBS桶后，可以使用数据预热功能，以减少后续训练首次访问数据耗时。 训练任务开始前可通过数据预热功能将文件元数据和数据内容全部从OBS导入到SFS Turbo高性能文件存储中，数据预热功能的具体操作请参考创建SFS
任意目录下都可以运行命令，您可以参考将obsutil设为系统内置命令。 更多操作 如果您需要在华为云的弹性云服务器（ECS）上使用obsutil，您可以参考在Linux ECS上使用obsutil通过内网访问OBS，配置内网访问以节省流量费用。 相关参考 如何快速使用obsutil请参见快速使用章节。
S Browser+上传文件或文件夹。 单击待操作的桶名称，进入桶对象页面。 单击“上传对象”，系统将弹出如下所示对话框。 图3 上传对象 添加待上传的文件。 不可加密上传静态网站文件。 存储类别建议选择“标准存储”。如果静态网站文件的存储类别为“归档存储”，则需要先恢复才能被访
设置了桶的默认存储类型之后，如果上传对象、复制对象和初始化多段上传任务时未指定对象的存储类型，则该对象的存储类型取桶的默认存储类型。 未配置桶的默认存储类型时，桶的默认存储类型为STANDARD（标准存储）。 请求消息样式 1 2 3 4 5 6 7 8 9 PUT /?storageClass HTTP/1
文件上传 开发过程中，您有任何问题可以在github上提交issue，或者在华为云对象存储服务论坛中发帖求助。接口参考文档的“上传对象”章节详细介绍了参数和使用方法。 文件上传使用本地文件作为对象的数据源。以下代码展示了如何进行文件上传： // 创建ObsClient实例 var
操作指导请参考创建虚拟私有云和子网。 创建SFS Turbo HPC型文件系统 创建SFS Turbo文件系统，文件系统类型选择“HPC型”，操作指导请参考创建SFS Turbo文件系统。 创建OBS桶 创建OBS桶，存储类别为“标准存储”，桶策略为“私有”，操作指导请参考创建OBS桶。
警时，您需要及时清理SFS Turbo存储空间、或缩短冷数据淘汰时间加速冷数据淘汰、或对SFS Turbo进行空间扩容。详情可参见SFS Turbo监控指标说明和创建告警规则。 SFS Turbo性能监控 您可以在CES云监控服务上监控和SFS Turbo文件系统的性能使用情况。
环境准备 资源准备 下载并安装obsfs 初始化obsfs
上传文件或文件夹 上传文件操作可将本地文件或文件夹存储至OBS，对象的存储类别默认与桶的存储类别一致。 背景信息 OBS Browser+使用分段上传功能上传文件。通过分段上传功能，OBS Browser+支持上传最大为48.8TB的单个文件。 文件或文件夹名称长度不能超过102
API 桶的基础操作 桶的高级配置 静态网站托管 对象操作 多段操作 服务端加密 Data+
设置桶访问权限为公共读，默认是私有读写 'ACL' => ObsClient::AclPublicRead, // 设置桶的存储类型为标准存储类型 'StorageClass' => ObsClient::StorageClassStandard,
服务端加密简介 开发过程中，您有任何问题可以在github上提交issue，或者在华为云对象存储服务论坛中发帖求助。接口参考文档详细介绍了每个接口的参数和使用方法。 OBS支持服务端加密功能，使对象加密的行为在OBS服务端进行。 更多关于服务端加密的内容请参考服务端加密。 父主题：
创建VPC：创建1个虚拟私有云和子网。 创建SFS Turbo HPC型文件系统：创建1个SFS Turbo文件系统，文件系统类型选择“HPC型”,存储类型请根据存储容量和性能需求选择，AI场景建议选择250MB/s/TiB及以上的存储类型。 创建OBS桶：创建1个OBS桶，存储类别为“标准存储”，桶策略为“私有”。
配置OBS客户端 开发过程中，您有任何问题可以在github上提交issue，或者在华为云对象存储服务论坛中发帖求助。接口参考文档详细介绍了每个接口的参数和使用方法。 您可通过初始化参数对ObsClient进行配置，可以配置的参数见下表： 参数 描述 建议值 access_key_id
下载并安装obsfs obsfs工具于2024年7月1日下线，下线后OBS不再对此工具提供维护和客户支持服务，请使用s3fs将OBS对象桶挂载至Linux系统，给您带来不便敬请谅解。如有问题请提交工单寻求技术支持。 配置运行环境 obsfs的运行环境依赖openssl-devel
作业根据您的自身情况选择。 资源池：专属资源池，选择创建资源中创建的ModelArts资源池。 SFS Turbo：增加挂载配置，选择创建资源中创建的SFS Turbo HPC型文件系统。 图1 创建训练作业参数 单击“提交”，完成训练作业的创建。 训练作业创建完成后，后台将自动
使用场景 现在越来越多的行业使用OBS存储图片、视频、软件包等静态资源文件，并将OBS作为网站、论坛、APP、游戏等业务的存储源。在需要获取这些静态资源时，用户会通过URL直接从OBS请求数据，但一般情况下文件只存储在一个区域，距离文件存储区域较远的用户访问OBS时，响应速度可能
相关操作 libfuse安装指导
创建文件夹 开发过程中，您有任何问题可以在github上提交issue，或者在华为云对象存储服务论坛中发帖求助。接口参考文档详细介绍了每个接口的参数和使用方法。 OBS本身是没有文件夹的概念的，桶中存储的元素只有对象。创建文件夹实际上是创建了一个大小为0且对象名以“/”结尾的对象
Log4j2开源库提供了日志功能，Log4j2框架按照优先级将日志进行了分级处理，您可以配置存储某个级别以上的日志，自行决定存储日志的范围。 OBS Java SDK默认将WARN及WARN以上级别的日志保存到本地。 配置日志存放路径 否 配置日志在本地的存储路径。 父主题： 初始化(Java SDK)
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
