检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
质量变换 此功能支持在控制台代码编辑模式和接口调用模式使用。 可以对输出格式为jpg的图片进行图片压缩,不使用压缩则可能会使图片占用的空间变大。具体参数说明如表1所示。 操作名称:quality 表1 图片压缩 参数 取值说明 代码样例 q 图片的相对质量,即将图片按照原图的q%进行压缩。取值范围为[1,100]。
通过控制台快速使用OBS 控制台是网页形式的操作平台,提供更直观的界面操作,简单易上手。 本章节以上传对象至“test-example-bucket”桶为例,帮助您通过控制台快速使用OBS的基础功能,包括创建桶、上传对象、下载对象、分享对象。 准备工作 使用OBS之前,您需要拥有
使用obsutil下载文件夹前期速度正常,下载到90%后速度变慢 出现此种现象有两种场景。 场景一:文件夹中存在部分大对象和大量小对象。对于大对象,下载速度很快;对于大量小对象,下载速度主要受TPS影响。如果下载到90%后都是小对象,此时下载速度一定程度上可能会降低。 场景二:文
配置SFS Turbo和OBS联动 SFS Turbo HPC型文件系统支持无缝访问存储在对象存储OBS存储桶中的对象,您可以指定SFS Turbo内的文件目录与OBS对象存储桶进行关联。 登录SFS管理控制台,在左侧导航窗格中选择“SFS Turbo”。 在文件系统列表中,单击
设置图片效果 设置亮度 此功能支持控制台图形界面模式和代码编辑模式使用,也支持通过接口调用模式使用。 具体的参数说明如表1所示。 操作名称:bright 表1 亮度参数说明 参数 取值说明 代码样例 value 调整图片亮度,取值范围为[-100,100]。 原始的亮度值为0。亮度从-100至100递增。
配置SFS Turbo数据淘汰策略 SFS Turbo HPC型文件系统绑定OBS后端之后,建议配置缓存数据淘汰功能。SFS Turbo会自动释放设定时间内没有访问过的文件数据内容,仅保留文件元数据,数据内容释放后不占用SFS Turbo文件系统上的存储空间,再次访问该文件时,将重新从OBS中加载文件数据内容。
方式导出到关联的OBS桶中进行长期保存,无需手工导出,异步导出方式不会占用上层训练任务时间。 SFS Turbo的自动导出功能当前处于受限使用状态,请提交工单联系技术支持人员进行配置。 文件导出速度受OBS服务的写入带宽上限影响,默认是16Gbit/s,如果大模型训练生成的Che
图片处理 图片处理概述 图片处理约束限制 图片处理基本概念 开始图片处理(控制台) 开始图片处理(API接口) 获取图片信息 获取图片平均色值 设置图片效果 设置缩略 旋转图片 剪切图片 设置水印 格式转换与渐进显示 质量变换 设置图片瘦身 处理图片持久化 父主题: 数据处理
配置ModelArts和SFS Turbo间网络直通 创建委托授权ModelArts云服务使用SFS Turbo 使用IAM管理员账号登录IAM控制台。 在IAM控制台的左侧导航窗格中选择“权限管理 > 权限”,单击右上角的“创建自定义策略”,进入自定义策略配置页面。 输入“策略
至OBS,更多内容请参考数据上云方案。 将数据从OBS预热到SFS Turbo中 SFS Turbo HPC型文件系统绑定OBS桶后,可以使用数据预热功能,以减少后续训练首次访问数据耗时。 训练任务开始前可通过数据预热功能将文件元数据和数据内容全部从OBS导入到SFS Turbo
单击“上传”,开始上传图片。上传完成后的图片会显示在对象列表。 在左侧导航栏,选择“数据处理 > 图片处理”。 单击“创建”,进入样式编辑界面。 输入样式名称为“style002”。在编辑页面,选中“代码编辑模式”。 在代码输入框中输入如下处理缩略命令和参数。 指定一个w和h为100的矩形,将图片进行等比
在使用访问密钥AK和SK访问OBS过程中,AK和SK是否可以更换或多个用户共享? 可以。 在使用过程中,访问密钥AK和SK可以随时更换。 不同的用户使用相同的一对AK和SK可以同时访问OBS中的资源,且访问到的资源相同。 父主题: 数据安全、迁移和备份
S禁止通过OBS的默认域名在线预览桶内对象,即使用分享链接从浏览器访问桶内对象(如视频、图片、网页等)时,不会显示对象内容,而是以附件形式下载。解决方案请参考:如何在浏览器中在线预览OBS中的对象? 使用命令行工具obsutil 使用obsutil指定桶名、对象名前缀和提取码,创建目录分享的授权码。
常见问题 常见编译问题 代理设置失效 示例代码常见问题
分段上传的主要目的是解决大文件上传或网络条件较差的情况。 通过使用UploadPartRequest.setOffset和UploadPartRequest.setPartSize来设置每段的起始结束位置。 下面的示例代码展示了如何使用分段上传并发上传大文件。 1 2 3 4
长度为32的字符串。 默认取值: 无,如果不设置则默认获取最新版本的对象。 ImageProcess string 可选 参数解释: 图片处理参数,描述针对对象的图片处理命令或处理样式。例如如果想表示对图片依次进行缩放、旋转,取值:image/resize,m_fixed,w_100,h_100/rotate
渐进显示 此功能仅支持通过控制台代码编辑模式和接口调用模式使用。 使用格式转换功能时,默认输出的jpg格式是标准型的jpg(Baseline JPEG)。如果需要输出能够渐进显示的jpeg(Progressive JPEG),使用此参数。具体参数说明如表2所示。 标准型jpg格式图片的呈现方式:自上而下显示。
异常处理 HTTP状态码 OBS服务端错误码 SDK公共结果对象 日志分析
问题处理 登录OBS Browser时,登录界面无反应 通过OBS Browser同时选中大量文件上传时,上传任务没有创建,界面无任何提示 使用OBS Browser上传文件时,出现蓝屏或黑屏现象 使用OBS Browser管理对象时,在任务列表中无相关任务显示 在ECS中,通过OBS
异常处理 OBS服务端错误码 日志分析 连接超时异常 签名不匹配异常 SDK自定义异常 SDK公共响应头