检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Turbo的AI云存储解决方案,如图所示,华为云高性能文件服务SFS Turbo HPC型支持和OBS数据联动,您可以通过SFS Turbo HPC型文件系统来加速对OBS对象存储中的数据访问,并将生成的结果数据异步持久化到OBS对象存储中长期低成本保存。 图1 基于OBS+SFS Turbo的华为云AI云存储解决方案
取值范围: 长度大于0且不超过255的字符串,只能由大写或小写的英文字母、数字、英文句号(.)、下划线(_)和连字符(-)组成。 默认取值: 如果未指定ID元素或者该值为空时,OBS会自动生成一个唯一ID。 Status 元素解释: 规则状态。如果规则处于禁用状态,则OBS不会执行规则中指定的任何操作。
对象相关命令 创建文件夹 上传对象 查询对象属性 设置对象属性 列举对象 复制对象 移动对象 下载对象 生成对象的下载链接 删除对象 增量同步上传对象 增量同步复制对象 增量同步下载对象 恢复归档存储对象 恢复失败的上传任务 恢复失败的复制任务 恢复失败的下载任务 列举分段上传任务
KMS托管密钥的服务端加密(SSE-KMS)和客户提供加密密钥的服务端加密(SSE-C)。上述两种方式都采用行业标准的AES256加密算法。 SSE-KMS方式,OBS使用KMS(Key Management Service)服务提供的密钥进行服务端加密。 SSE-C方式,OBS使用用户提供的密钥和密钥的MD5值进行服务端加密。
Turbo的自动导出功能当前处于受限使用状态,请提交工单联系技术支持人员进行配置。 文件导出速度受OBS服务的写入带宽上限影响,默认是16Gbit/s,如果大模型训练生成的Checkpoint文件过大、导出速度过慢,可提交工单申请调大OBS服务的写入带宽。 父主题: 基本配置
WARN ERROR 错误级别,如果设置为这个级别,仅打印发生异常时的错误信息。 LogConfigurator.ERROR 日志无法生成 如发现无法生成日志,检查AndroidManifest.xml文件中是否加入了以下权限: <uses-permission android:name="android
ket:ListBucket及一些控制台和OBS Browser+加载页面时需要调用的接口权限,会提示“拒绝访问,请检查相应权限”,或者“不允许在请求的资源上执行此操作”。 如果希望IAM用户能在控制台或OBS Browser+顺利完成桶和对象相关操作,建议至少在自定义策略中包含
禁止使用IP地址。 禁止以“-”或“.”开头及结尾。 禁止两个“.”相邻(如:“my..bucket”)。 禁止“.”和“-”相邻(如:“my-.bucket”和“my.-bucket”)。 同一用户在同一个区域多次创建同名桶不会报错,创建的桶属性以第一次请求为准。 默认取值: 无
到0.01元,10:00左右账户进行扣费0.01元。 由于存在话单延迟的情况,一般按需计费的结算周期有小时/天/月等,在结算周期结束后时,生成账单并执行扣款。当前查不到扣费记录,可能是因为还未到结算周期。 父主题: 计费相关
获取对象元数据时设置解密算法、密钥,用于解密对象。 SSE-C initiateMultipartUpload 初始化分段上传任务时设置加密算法、密钥,对分段上传任务最终生成的对象启用服务端加密。 SSE-KMS SSE-C uploadPart 上传段时设置加密算法、密钥,对分段数据启用服务端加密。 SSE-C
参数说明 基本属性 名称 任务的名称,修改后将体现在工作流编排区域。 必须以字母或数字开头 只能由字母、数字、下划线和中划线组成 长度范围为1~20个字符 不能和同一工作流中的其他任务重名 超时(秒) 任务超时时间,即任务执行的最长时间。 支持设置0~300秒的超时时间,如果设置为0,则表示超时时间为默认值30秒。
在OBS管理控制台桶列表中,单击待操作的桶,进入“对象”页面。 单击“碎片”,选中需要清理的碎片,单击右侧的“删除”。 也可选中多个碎片,单击对象列表上方的“删除”进行批量删除。 单击“确定”,确认删除碎片。 图1 删除碎片 使用API 您可以通过以下步骤来直接删除桶中碎片: 使用列举桶中已初始化多段任务接口
置等信息。 删除对象 删除指定的对象。也可以携带versionId删除指定版本的对象。 批量删除对象 将一个桶内的一部分对象一次性删除,删除后不可恢复。 恢复归档或深度归档存储对象 将归档和深度归档(受限公测)存储对象的内容恢复,恢复后才能下载。 追加写对象 在指定桶内的一个对象
Browser+上进行上传下载,还需要在IAM权限中额外配置obs:bucket:ListAllMyBuckets和obs:bucket:ListBucket权限,否则登录控制台和OBS Browser+时会报错,无法看到桶和桶内对象。 配置示例四:同时配置VPC终端节点策略与桶策略后,再授权其他云服务访问桶
SSE-OBS ObsClient.initiateMultipartUpload 初始化分段上传任务时设置加密算法、密钥,对分段上传任务最终生成的对象启用服务端加密。 SSE-KMS SSE-C ObsClient.uploadPart 上传段时设置加密算法、密钥,对分段数据启用服务端加密。
禁止使用IP地址。 禁止以“-”或“.”开头及结尾。 禁止两个“.”相邻(如:“my..bucket”)。 禁止“.”和“-”相邻(如:“my-.bucket”和“my.-bucket”)。 同一用户在同一个区域多次创建同名桶不会报错,创建的桶属性以第一次请求为准。 默认取值: 无
禁止使用IP地址。 禁止以“-”或“.”开头及结尾。 禁止两个“.”相邻(如:“my..bucket”)。 禁止“.”和“-”相邻(如:“my-.bucket”和“my.-bucket”)。 同一用户在同一个区域多次创建同名桶不会报错,创建的桶属性以第一次请求为准。 取值范围: 长度为3~63个字符。
禁止使用IP地址。 禁止以“-”或“.”开头及结尾。 禁止两个“.”相邻(如:“my..bucket”)。 禁止“.”和“-”相邻(如:“my-.bucket”和“my.-bucket”)。 同一用户在同一个区域多次创建同名桶不会报错,创建的桶属性以第一次请求为准。 默认取值: 无
禁止使用IP地址。 禁止以“-”或“.”开头及结尾。 禁止两个“.”相邻(如:“my..bucket”)。 禁止“.”和“-”相邻(如:“my-.bucket”和“my.-bucket”)。 同一用户在同一个区域多次创建同名桶不会报错,创建的桶属性以第一次请求为准。 默认取值: 无
9200,表示下载object1对象时限速为100 KB/s。 通过签名URL限速 项目 说明 文件类型 私有对象 限速方式 通过SDK在生成签名URL时,将限速参数x-obs-traffic-limit=<value>加入签名中一起计算。 限速值取值范围为819200~838860800,单位为bit/s。