检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
务的不错选择。 obsutil工具指南 obsfs obsfs是OBS提供的一款基于FUSE的文件系统工具，主要用于将并行文件系统挂载至Linux系统，让用户能够在本地像操作文件系统一样直接使用OBS海量的存储空间。 obsfs工具指南 SDK SDK是对OBS服务提供的REST
拖拽上传 OBS Browser+提供强大的拖拽上传功能，您可以将本地的一个或多个文件或者文件夹拖拽到对象存储的对象列表或者并行文件系统的对象列表中；同时您也可以将文件或文件夹拖拽到指定的目录上，这样可以上传到指定的目录中。拖拽上传可以轻松便捷地帮你把本地文件上传到OBS中。 父主题：
所有的任务能够后台运行。这时候，您可以单击关闭OBS Browser+工具，并选择后台运行；这时候您的所有任务将进入后台运行模式；您可以在系统托盘中双击OBS Browser+的图标，显示UI界面。 父主题： 最佳实践
创建桶 桶是OBS全局命名空间，相当于数据的容器、文件系统的根目录，可以存储若干对象。以下代码展示如何新建一个桶： OBSCreateBucketRequest *request = [[OBSCreateBucketRequest alloc] initWithBucketName:@"bucketname"];
快速使用 本章节以Linux操作系统为例，介绍如何通过obsutil在OBS上完成基本的数据存取操作，具体操作流程如图1所示。 图1 obsutil快速使用流程 前提条件 已获取到obsutil工具，并完成了初始化配置。 已进入obsutil工具所在目录。 操作步骤 运行./obsutil
列举示例 本章节案例中的所有命令均以Linux操作系统为例，提供列举操作指导。 假设bucket-test桶内包含如下对象： obs://bucket-test/test1.txt obs://bucket-test/test2.txt obs://bucket-test/test3
象，提高删除效率。 对于并行文件系统目录，大数据场景下（目录层级深、目录下文件多）的删除，可能会因超时而删除失败，建议使用： hadoop 客户端（嵌套OBS客户端插件OBSA）删除目录：hadoop fs - rmr obs://{并行文件系统名}/{目录名}。 给目录配置生命周期，通过生命周期后台删除。
间后提示“max call stack size exceeded”。 使用OBS Browser上传文件夹，其中某个文件在上传完成后，操作系统返回IO状态异常，上传进度一直显示99.99%。 使用OBS Browser上传大文件，进度条没有反应，状态一直是“等待中”。 回答 出现以上问题都是由于OBS
恢复对象任务状态一直是恢复中 OBS Browser+中任务数量达到了百万级别及以上，系统会处于海量查找的状态中，因批量恢复的对象数量较多，browser+在这种数量级的恢复请求下，获取真实的恢复状态会很慢，实际恢复请求已经成功。建议通过服务端或者其他途径进行查询对象的实际状态，
SDK生成的日志文件路径是通过Log4Net.config配置文件指定的，一般将该配置文件放于工程编译生成的可执行文件所在目录。 日志级别 当系统出现问题需要定位且当前的日志无法满足要求时，可以通过修改日志的级别来获取更多的信息。其中DEBUG日志信息最丰富，ERROR日志信息最少。
obsutil是一款命令行工具，对于熟悉命令行的用户，obsutil能在执行批量处理、自动化任务的场景中为您带来更优体验。 本章节以Linux操作系统为例，以上传一个文件至“bucket-test”桶为例，帮助您快速通过obsutil使用OBS的基础功能，包括创建桶、上传对象、下载对象、分享对象。
--trusted-host pypi.org命令执行安装。 如果您的环境尚未安装pip，请参见pip官网安装。 如果您使用的是Windows操作系统，当运行pip命令时提示“不是内部或外部命令”，请在Path环境变量中增加pip的安装目录（一般为Python所在目录的Scripts文件夹）。
求选择适合的方案上传数据至OBS，更多内容请参考数据上云方案。 将数据从OBS预热到SFS Turbo中 SFS Turbo HPC型文件系统绑定OBS桶后，可以使用数据预热功能，以减少后续训练首次访问数据耗时。 训练任务开始前可通过数据预热功能将文件元数据和数据内容全部从OBS导入到SFS
同步复制示例 本章节案例中的所有命令均以Linux操作系统为例，提供同步复制操作指导。 假设源桶bucket-src内包含如下对象： obs://bucket-src/src1/ obs://bucket-src/src1/test3.txt obs://bucket-src/src1/src2/
配置SDK日志(Java SDK) OBS Java SDK基于Apache Log4j2开源库提供了日志功能，SDK默认会将WARN级别的日志记录到JDK系统变量user.dir所代表的路径下，您可以通过修改日志配置文件定制日志功能。 操作步骤 找到OBS Java SDK开发包中的log4j2
配置SFS Turbo数据自动导出到OBS桶 配置自动导出后，训练过程中周期性写入SFS Turbo文件系统的Checkpoint模型文件会自动以异步方式导出到关联的OBS桶中进行长期保存，无需手工导出，异步导出方式不会占用上层训练任务时间。 SFS Turbo的自动导出功能当前
资源池：专属资源池，选择创建资源中创建的ModelArts资源池。 SFS Turbo：增加挂载配置，选择创建资源中创建的SFS Turbo HPC型文件系统。 图1 创建训练作业参数 单击“提交”，完成训练作业的创建。 训练作业创建完成后，后台将自动完成容器镜像下载、代码目录下载、执行启动命令
同步上传示例 本章节案例中的所有命令均以Linux操作系统为例，提供同步上传操作指导。 假设本地文件夹的格式如下： └── src1 ├── src2 ├── test1.txt └── test2.txt ├── src3
过以下方式获取最近一次运行结果的返回码，然后根据返回码分析并处理问题。 macOS/Linux操作系统，执行以下命令获取最近一次运行结果的返回码： echo $? Windows操作系统，执行以下命令获取最近一次运行结果的返回码： echo %errorlevel% 表1 返回码
request) 在当前账号按照用户指定的并行文件系统名称创建一个新并行文件系统，接口支持根据用户诉求，在创建并行文件系统的同时配置并行文件系统的区域及桶的访问权限等参数。 PFSBucketAndObjectOperationSample 列举并行文件系统 obsClient.listBuc
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
