检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Turbo的Checkpoint数据异步导出到OBS,均不占用训练任务时长。 SFS Turbo和OBS存储服务之间数据直接导入导出,无需部署外部数据拷贝机器及工具。 4 冷热数据自动流动,降低存储成本 SFS Turbo支持自定义数据淘汰策略,冷数据自动分级到OBS,释放高性能存储空间用于接收新的热数据。
参见华为云服务事件发送流程 导出EG通知 在OBS管理控制台左侧导航栏选择“桶列表”。 在OBS管理控制台桶列表中,单击待操作的桶,进入“对象”页面。 在左侧列表页选择“基础配置 > 事件通知”,进入“EG通知”页签。 选择待导出的EG通知,单击“导出”。 父主题: 事件通知
操作。 前提条件 已下载obsutil软件包,具体请参见下载和安装obsutil。 已获取OBS当前开通的区域和终端节点地址,您可以从这里查看。例如,访问区域为华北-北京四,则实际的OBS服务地址为:https://obs.cn-north-4.myhuaweicloud.com。
[-t=xxx] 运行示例: 示例1:以Windows操作系统为例,运行obsutil ls obs://bucket-test -limit=10,查询桶内对象。 obsutil ls obs://bucket-test -limit=10 Start at 2024-09-30 08:18:50
SDK) 开发过程中,您有任何问题可以在github上提交issue,或者在华为云对象存储服务论坛中发帖求助。 桶是OBS全局命名空间,相当于数据的容器、文件系统的根目录,可以存储若干对象。以下代码展示如何新建一个桶: static void test_create_bucket(obs_canned_acl
使用跨区域复制功能将源桶数据复制到另一个区域的目标桶时所产生的流出流量费用。 批量恢复数据流量 restore_size_bk 数据恢复费用 归档存储对象执行批量恢复操作,根据对象大小产生的数据恢复费用。 标准恢复数据流量 restore_size_sd 数据恢复费用 归档存储对象
哪些资源包会按月更新额度,哪些不会? 购买了回源流量包是否还需要购买公网流出流量包? 如何购买专属对象存储? OBS账单为什么会出现0.01元的计费? 查询账单时,为什么会有大量的公网流出流量?
Viewer等系统权限后,实际上只允许执行一部分OBS操作,例如OBS OperateAccess可以执行列举桶、获取桶基本信息、获取桶元数据、列举对象(不包含多版本)、上传对象、下载对象、删除对象、获取对象ACL操作。 给用户配置了桶读写权限 通过桶策略给用户配置了桶的读写权限后,实际上授予的权限如下:
用英文句号(.)。 数据冗余存储策略 多AZ存储:数据冗余存储至多个可用区(AZ),可靠性更高。 单AZ存储:数据仅存储在单个可用区(AZ),成本更低。 多AZ和单AZ的性能对比请参见存储类别对比。 请根据业务情况提前规划数据冗余存储策略,桶一旦创建成功,数据冗余存储策略就确定了,后续无法更改。
返回码 通过进程等方式调用obsutil时,无法实时查看回显信息。obsutil支持在进程运行结束后,根据不同的运行结果生成不同的返回码,具体的返回码及其含义如表1所示。您可以通过以下方式获取最近一次运行结果的返回码,然后根据返回码分析并处理问题。 macOS/Linux操作系统
资源路径:*(*表示桶内所有对象) 授权操作 动作范围:模板配置 模板:对象只读 单击“创建”,完成桶策略创建。 权限配置信息可以在桶策略列表查看。 图3 查看桶策略列表权限配置信息 在左侧导航栏,单击“概览”,进入“概览”页面。 在左侧导航栏单击“基础配置>静态网站托管”,进入“静态网站托管”界面。
扣款是系统默认配置,您也可以根据需要修改此扣款日。 续费更多相关详情请参见续费管理。 如何查看资源到期时间 进入“续费管理”页面,可通过到期时间过滤即将到期的资源,在续费列表“倒计时”查看资源具体的到期时间。 图2 到期时间详情 父主题: 续费
指定的多段数据占用容量配额,用户上传的其他此多段任务对应的段数据如果没有包含在“合并段”操作指定的段列表中,“合并段”完成后系统将删除多余的段数据,且同时释放容量配额。 合并段时,OBS通过按升序的段编号规范化多段来创建对象。如果在初始化上传段任务中提供了任何对象元数据,则OBS
置Token的使用范围取值为domain,表示获取的Token可以作用于全局服务,全局服务不区分项目或者区域。 获取服务地址 您可以从这里查看OBS当前开通的服务地址和区域信息。 SDK支持带协议名和不带协议名两种方式传入服务地址,例如获取到的服务地址为“your-endpoin
则可以不指定区域;如果使用的终端节点归属于其他区域,则必须指定区域,且指定的区域必须与终端节点归属的区域一致。当前有效的区域名称可从这里查询。 您可以使用带参数创建方式,在创建桶时,指定桶的区域位置。 父主题: 快速入门
待上传对象的自定义元数据。OBS支持用户使用以“x-obs-meta-”开头的消息头来加入自定义的元数据,以便对对象进行自定义管理。当用户获取此对象或查询此对象元数据时,加入的自定义元数据将会在返回的消息头中出现。 约束限制: 所有自定义元数据大小的总和不超过8K。单个自定义元数据大小的计算方式为:每个键和值的UTF-8
选择动作: ListBucket(列举桶内对象,获取桶元数据) PutObject(可用作于PUT上传,POST上传,上传段,初始化上传段任务,合并段) 单击右下角的“创建”,完成桶策略创建。 权限配置信息可以在桶策略列表查看。 图3 查看桶策略列表权限配置信息 验证权限。 权限授予成功后,部门A、B的用户可以通过OBS
此提示框中单击“取消”,则不会下载密钥,后续也将无法重新下载。如果需要使用访问密钥,可以重新创建新的访问密钥。 获取服务地址 您可以从这里查看OBS当前开通的服务地址和区域信息。 SDK支持带协议名和不带协议名两种方式传入服务地址,例如获取到的服务地址为“your-endpoin
参数类型 是否必选 描述 QueryLocation boolean 可选 参数解释: 是否同时查询桶的区域位置。 约束限制: 无 取值范围: true:同时查询桶的区域位置 false:不查询桶的区域位置 默认取值: false BucketType string 可选 参数解释: 列举指定类型的桶。
AD等。 流量费用:源端下载数据时,会产生流量费用,流量由数据的实际大小决定,费用由源端数据所在云服务商收取;数据上传至华为云OBS不收取流量费用。 对象存储迁移服务暂不支持迁移多版本的对象存储数据。 OMS同样适用于OBS桶和并行文件系统桶之间的数据迁移。 迁移流程 迁移流程如