检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
大数据场景下使用OBS实现存算分离 方案概述 操作流程 对接大数据平台 对接大数据组件 迁移HDFS数据至OBS
对接大数据组件 支持的大数据组件简介 Hadoop对接OBS Hive对接OBS Spark对接OBS Presto对接OBS Flume对接OBS DataX对接OBS Druid对接OBS Flink对接OBS Logstash对接OBS 父主题: 大数据场景下使用OBS实现存算分离
实施步骤 创建资源 基本配置 训练 例行维护 父主题: 面向AI场景使用OBS+SFS Turbo的存储加速实践
训练 上传数据至OBS并预热到SFS Turbo中 创建训练任务 父主题: 实施步骤
基本配置 配置ModelArts和SFS Turbo间网络直通 配置SFS Turbo和OBS联动 配置SFS Turbo数据自动导出到OBS桶 配置SFS Turbo数据淘汰策略 父主题: 实施步骤
OBS域名管理 通过CDN加速访问OBS 使用自定义域名托管静态网站
最佳实践 拖拽上传 目录分享 后台运行 定时上传 上传/下载性能优化
在哪里可以获取AK和SK? 如何获取子用户IAM的用户ID? 是否可以同时装两个不同站点的OBS Browser+工具? OBS Browser+与OBS Browser的不同之处? OBS Browser+支持迁移OBS Browser保存的账号信息和任务信息吗? 为什么我运行了百万级别的任务后,感觉任务执行较慢?
桶的基本操作 本章介绍对桶的一系列管理操作。 创建桶 搜索桶 查看桶的基本信息 碎片管理 删除桶
生命周期管理 生命周期管理是指通过配置指定的规则,可实现定时删除桶中的对象或者定时修改对象的存储类别(转归档存储或者是低频访问存储)。本节介绍生命周期管理以及配置方法。 生命周期管理简介 配置生命周期管理策略 父主题: 桶的高级配置
对象操作 在OBS中,用户操作的基本数据单元是对象。本章介绍对象的一系列管理操作。 右键单击对象列表的空白处,通过快捷菜单中的创建文件夹,上传文件,上传文件夹选项管理对象。 新建文件夹 上传文件或文件夹 搜索文件或文件夹 下载文件或文件夹 复制文件或文件夹 移动文件或文件夹 删除文件或文件夹
任务管理 管理运行队列 管理已暂停队列 管理已完成队列 管理恢复中队列 管理失败队列
快速入门 使用前需知 OBS服务环境搭建 开发环境准备 安装SDK 获取服务地址 初始化OBS客户端 创建桶 上传对象 下载对象 列举对象 删除对象 OBS客户端通用示例
下载对象 对象下载简介 流式下载 范围下载 获取下载进度 限定条件下载 重写响应头 获取自定义元数据 下载归档存储对象 断点续传下载 图片处理
临时授权访问 使用临时URL进行授权访问
多版本控制 多版本控制简介 设置桶多版本状态 查看桶多版本状态 获取多版本对象 复制多版本对象 恢复多版本归档存储对象 列举多版本对象 多版本对象权限 删除多版本对象
服务端加密 服务端加密简介 加密说明 加密示例
常见问题 SDK是否支持批量上传、下载或复制对象?
下载对象简介(Go SDK) OBS Go SDK提供了丰富的对象下载接口,可以通过以下方式下载对象: 流式下载 范围下载 限定条件下载 断点续传下载 下载对象-流式下载(Go SDK) 下载对象-范围下载(Go SDK) 下载对象-限定条件下载(Go SDK) 下载对象-断点续传下载(Go
并行文件系统相关接口(Go SDK) 创建并行文件系统(Go SDK) 列举并行文件系统(Go SDK) 列举并行文件系统内对象(Go SDK) 重命名对象(Go SDK)