检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
rts √ √ 取消多段上传任务 取消多段上传任务 obs:object:AbortMultipartUpload √ √ 配置对象级WORM保护策略 配置对象级WORM保护策略 obs:object:PutObjectRetention √ √ 获取对象级WORM保护策略 获取对象元数据
望能方便快捷的构建AI训练系统时,可以选择只使用SFS Turbo高性能文件存储支撑AI训练。 可以基于OBS对象存储支撑AI自动驾驶、大模型训练吗? OBS为容量型存储,在时延、带宽等存储性能上无法满足高性能AI训练,建议使用SFS Turbo HPC型高性能文件系统加速AI训
Browser。 在页面左上方单击“添加桶”,系统弹出“添加桶”对话框。 选择“创建新桶”。 设置“区域”。 选择“存储类别”。 设置桶策略:您可以为桶配置私有、公共读、或公共读写策略。 多AZ:开启多AZ后,数据冗余存储至多个AZ中。归档存储的桶不支持多AZ功能。 输入“桶名”。可以单击桶名输入框后的了解桶的命名规则详情。
“未恢复”状态。 速率 对象的恢复速度。 加急:可在1-5分钟内恢复归档存储数据,3-5小时内恢复深度归档存储数据。 标准:可在3-5小时内恢复归档存储数据,5-12小时内恢复深度归档存储数据。 单击“确定”。 文件恢复状态可单击对象右侧的图标,在“对象属性”页面查看,如图1所示。
从账户余额中扣除,而不使用资源包进行抵扣。 存储单个对象小于64KB按64KB计算,大于64KB按实际大小计算。 深度归档存储数据容量(受限公测) OBS中存储的深度归档存储数据所占用的存储空间容量。 存储时间小于180天按180天计算,大于180天按实际天数计算。早于180天删
SDK) 修改对象元数据(Python SDK) 设置对象ACL(Python SDK) 获取对象ACL(Python SDK) 恢复归档或深度归档存储对象(Python SDK)
归档存储 归档存储适用于很少访问(平均一年访问一次)数据的业务场景。 OBS_STORAGE_CLASS_GLACIER 深度归档存储(受限公测) 深度归档存储(受限公测)适用于长期不访问(平均几年访问一次)数据的业务场景。 OBS_STORAGE_CLASS_DEEP_ARCHIVE
典型场景配置案例 权限典型场景一览 对当前账号下单个IAM用户授权 对当前账号下多个IAM用户或用户群组授权 对其他账号授权 对所有账号授权 临时授权访问OBS 让IAM用户只能看到被授权的桶 限制指定的IP地址访问桶
存在于桶的根目录下,其链接地址将不会有文件夹目录层级。如果您想了解域名是什么,请参见OBS域名。 图1 对象链接 对于存储类别为归档存储或深度归档存储的对象,如果要让匿名用户通过URL访问,则需要先确认对象的状态是否为“已恢复”。 父主题: 管理对象
对象存储与专属对象存储的收费不同,具体请参见产品价格详情。 功能限制 暂不支持并行文件系统 暂不支持多AZ 暂不支持低频存储、归档存储和深度归档存储 暂不支持归档数据直读 暂不支持碎片管理 暂不支持企业项目 暂不支持跨区域复制 暂不支持图片处理 暂不支持Data+(该功能已下线)
ect:GetObject权限,如果使用桶策略则需授予GetObject权限。相关授权方式介绍可参见OBS权限控制概述,配置方式详见使用IAM自定义策略、配置对象策略。 OBS支持的Region与Endpoint的对应关系,详细信息请参见地区与终端节点。 拥有对象读权限的用户可以
bject权限。相关授权方式介绍可参见OBS权限控制概述,配置方式详见使用IAM自定义策略、配置对象策略。 OBS支持的Region与Endpoint的对应关系,详细信息请参见地区与终端节点。 对于存储类别为归档存储或深度归档存储的对象,需要确认对象的状态为“已恢复”才能对其进行下载。
过OBS权限进行配置,只能在IAM权限中配置,OBS权限只能作用于资源级(桶和对象)。如果要同时授予OBS服务级权限和资源级权限,必须使用IAM权限,或者IAM权限与OBS权限结合使用。 图2 OBS权限与IAM权限的关系 OBS权限控制要素 OBS的权限控制模型中,以下几个要素共同决定了授权的结果:
每个桶都有自己的存储类别、访问权限、所属区域等属性,用户可以在不同区域创建不同存储类别和访问权限的桶,并配置更多高级属性来满足不同场景的存储诉求。 对象存储服务设置有四类桶存储类别,分别为:标准存储、低频访问存储、归档存储、深度归档存储(受限公测),从而满足客户业务对存储性能、成本的不同诉求。创建桶时可以
资源和成本规划 本节介绍最佳实践中资源规划情况,包含以下内容: 表1 资源和成本规划内容说明 维度 说明 资源规划 OBS:存放训练数据集、预训练模型等数据资源的桶,桶存储类别为“标准存储”,桶策略为“私有”。 SFS Turbo:文件系统类型为“HPC型”,存储类型请根据存储容量和性能
开发过程中,您有任何问题可以在github上提交issue,或者在华为云对象存储服务论坛中发帖求助。接口参考文档详细介绍了每个接口的参数和使用方法。 OBS允许您对桶配置不同的存储类型,桶中对象的存储类型默认将与桶的存储类型保持一致。不同的存储类型可以满足客户业务对存储性能、成本的不同诉求。桶的存储类型分为三类,见下表:
配置桶ACL 前提条件 配置桶ACL的账号需要是桶 的拥有者,或者具备该桶的ACL写权限。 使用方式 OBS支持通过控制台、API、SDK、OBS Browser+、obsutil方式配置桶ACL。 使用OBS控制台 在OBS管理控制台左侧导航栏选择“桶列表”。 在OBS管理控制
S权限控制概述,配置方式详见使用IAM自定义策略、配置对象策略。 OBS支持的Region与Endpoint的对应关系,详细信息请参见地区与终端节点。 当桶开启多版本控制时,最新版本的对象支持设置元数据,历史版本的对象不支持设置元数据。 对于存储类别为归档或深度归档存储的对象,不能对其设置对象的元数据。
不携带此头域表示为单az存储,仅使用1个可用区存储。 约束限制: 归档存储和深度归档存储不支持多AZ。如果桶所在区域不支持多AZ存储,则该桶的存储类型默认为单AZ。 取值范围: 如果桶配置为多AZ,则返回值为“3az”。如果桶配置为单AZ,则返回值为None。 默认取值: 无 Access-Control-Allow-Origin
选择目标存储类别,并单击“确定”。 在弹出的消息窗口中,单击“确定”关闭消息窗口。 深度归档存储的对象要先恢复,才可以修改为智能分级存储、标准存储、低频访问存储或归档存储。 对象存储类别修改为归档存储时,恢复状态为未恢复。 您也可以通过配置生命周期规则来转换对象的存储类别,详情请参见生命周期管理简介。