检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用OBS SDK Java Python C Go BrowserJS .NET Android iOS PHP Node.js 使用图形化工具OBS Browser+ 登录OBS Browser+。 选中待配置的桶,单击“更多 > 生命周期规则”,如图2所示。 图2 生命周期规则
境变量AccessKeyID和SecretAccessKey。 // 前端本身没有process对象,可以使用webpack类打包工具定义环境变量,就可以在代码中运行了。 // 您可以登录访问管理控制台获取访问密钥AK/SK,获取方式请参见https://support
初始化curl失败。 OBS_STATUS_InternalError 内部错误。 OBS_STATUS_OutOfMemory 本地环境内存不足。 OBS_STATUS_FailedToIInitializeRequest 初始化请求失败。 OBS_STATUS_ConnectionFailed
初始化curl失败。 OBS_STATUS_InternalError 内部错误。 OBS_STATUS_OutOfMemory 本地环境内存不足。 OBS_STATUS_FailedToIInitializeRequest 初始化请求失败。 OBS_STATUS_ConnectionFailed
操作流程 本文档介绍面向AI场景如何使用OBS+SFS Turbo的存储加速,流程如图1所示。 图1 面向AI场景使用OBS+SFS Turbo的存储加速方案步骤 表1 面向AI场景使用OBS+SFS Turbo的存储加速流程说明 序号 步骤 说明 1 规划组网和资源 此步骤请提交工单联系技术支持人员进行支撑配置。
修改对象元数据 使用SDK Java Python C Go BrowserJS .NET Android iOS PHP Node.js 使用命令行工具obsutil 命令结构: Windows操作系统 设置单个对象属性 obsutil chattri obs://bucket/key [
初始化curl失败。 OBS_STATUS_InternalError 内部错误。 OBS_STATUS_OutOfMemory 本地环境内存不足。 OBS_STATUS_FailedToIInitializeRequest 初始化请求失败。 OBS_STATUS_ConnectionFailed
初始化curl失败。 OBS_STATUS_InternalError 内部错误。 OBS_STATUS_OutOfMemory 本地环境内存不足。 OBS_STATUS_FailedToIInitializeRequest 初始化请求失败。 OBS_STATUS_ConnectionFailed
初始化curl失败。 OBS_STATUS_InternalError 内部错误。 OBS_STATUS_OutOfMemory 本地环境内存不足。 OBS_STATUS_FailedToIInitializeRequest 初始化请求失败。 OBS_STATUS_ConnectionFailed
初始化curl失败。 OBS_STATUS_InternalError 内部错误。 OBS_STATUS_OutOfMemory 本地环境内存不足。 OBS_STATUS_FailedToIInitializeRequest 初始化请求失败。 OBS_STATUS_ConnectionFailed
初始化curl失败。 OBS_STATUS_InternalError 内部错误。 OBS_STATUS_OutOfMemory 本地环境内存不足。 OBS_STATUS_FailedToIInitializeRequest 初始化请求失败。 OBS_STATUS_ConnectionFailed
初始化curl失败。 OBS_STATUS_InternalError 内部错误。 OBS_STATUS_OutOfMemory 本地环境内存不足。 OBS_STATUS_FailedToIInitializeRequest 初始化请求失败。 OBS_STATUS_ConnectionFailed
并行文件系统相关接口(Harmony SDK) 并行文件系统(Parallel File System)是对象存储服务(Object Storage Service,OBS)提供的一种经过优化的高性能文件系统,提供毫秒级别访问时延,TB/s级别带宽和百万级别的IOPS,能够快速处理高性能计算(HPC)工作负载。
列举桶内对象 使用SDK Java Python C Go BrowserJS .NET Android iOS PHP Node.js 使用命令行工具obsutil 命令结构: Windows操作系统 obsutil ls obs://bucket[/prefix] [-s] [-d][-fs]
最佳实践 拖拽上传 目录分享 后台运行 定时上传 上传/下载性能优化
实施步骤 获取OBS SDK开发包和IAM SDK开发包。 OBS SDK请在SDK开发指南中获取。 IAM SDK开发包请在IAM开发工具包获取。 模拟应用服务器向IAM请求临时安全凭证和返回安全凭证。 过程如下: 获取用户的IAM用户Token。 API请参见获取IAM用户
资源和成本规划 本节介绍最佳实践中资源规划情况,包含以下内容: 表1 资源和成本规划内容说明 维度 说明 资源规划 OBS:存放训练数据集、预训练模型等数据资源的桶,桶存储类别为“标准存储”,桶策略为“私有”。 SFS Turbo:文件系统类型为“HPC型”,存储类型请根据存储容
创建自定义策略 OBS自定义策略样例 示例1:给用户授予OBS的所有权限 此策略表示用户可以对OBS进行任何操作,使用方式包括API、SDK、控制台及工具。 由于用户登录OBS控制台时,会访问一些其他服务的资源,如CTS审计信息,CDN加速域名,KMS密钥等。因此除了配置OBS的权限外,还需
Flume对接OBS 概述 Flume是一个分布式的、可靠的和高可用的服务,用于收集、聚合以及移动大量日志数据,具体请参见Apache Flume。OBS在大数据场景中可以替代Hadoop系统中的HDFS服务。 注意事项 多sink写同一文件 OBS和HDFS在一致性保证上是有差
并行文件系统约束限制 操作限制 不支持将已有的OBS桶修改为并行文件系统,创建并行文件系统方法请参见创建并行文件系统。 不支持控制台设置并行文件系统的自定义域名,API设置方法参见设置自定义域名。 功能限制 暂不支持通过图片处理特性对存放在并行文件系统中的图片进行瘦身、缩放、添加水印等操作。