检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
大数据场景下使用OBS实现存算分离 大数据场景下使用OBS实现存算分离方案概述 操作流程 对接大数据平台 对接大数据组件 迁移HDFS数据至OBS
对接大数据组件 支持的大数据组件简介 Hadoop对接OBS Hive对接OBS Spark对接OBS Presto对接OBS Flume对接OBS DataX对接OBS Druid对接OBS Flink对接OBS Logstash对接OBS 父主题: 大数据场景下使用OBS实现存算分离
OBS数据安全 OBS安全配置建议 减少因误操作导致的数据丢失风险
实施步骤 创建资源 基本配置 训练 例行维护 父主题: 面向AI场景使用OBS+SFS Turbo的存储加速实践
基本配置 配置ModelArts和SFS Turbo间网络直通 配置SFS Turbo和OBS联动 配置SFS Turbo数据自动导出到OBS桶 配置SFS Turbo数据淘汰策略 父主题: 实施步骤
训练 上传数据至OBS并预热到SFS Turbo中 创建训练任务 父主题: 实施步骤
管理桶(Java SDK) 创建桶(Java SDK) 列举桶(Java SDK) 删除桶(Java SDK) 判断桶是否存在(Java SDK) 获取桶元数据(Java SDK) 设置桶ACL(Java SDK) 获取桶ACL(Java SDK) 设置桶策略(Java SDK)
下载对象(Java SDK) 对象下载简介(Java SDK) 流式下载(Java SDK) 范围下载(Java SDK) 获取下载进度(Java SDK) 限定条件下载(Java SDK) 重写响应头(Java SDK) 获取自定义元数据(Java SDK) 恢复归档或深度归档存储对象(Java
多版本控制(Java SDK) 多版本控制简介(Java SDK) 设置桶多版本状态(Java SDK) 获取桶多版本状态(Java SDK) 获取多版本对象(Java SDK) 复制多版本对象(Java SDK) 恢复多版本归档存储对象(Java SDK) 列举多版本对象(Java
设置访问日志(Java SDK) 日志简介(Java SDK) 设置桶日志规则(Java SDK) 获取桶日志规则(Java SDK)
异常处理(Java SDK) HTTP状态码(Java SDK) OBS服务端错误码(Java SDK) SDK自定义异常(Java SDK) SDK公共响应头(Java SDK) 日志分析(Java SDK)
下载对象简介(Go SDK) OBS Go SDK提供了丰富的对象下载接口,可以通过以下方式下载对象: 流式下载 范围下载 限定条件下载 断点续传下载 下载对象-流式下载(Go SDK) 下载对象-范围下载(Go SDK) 下载对象-限定条件下载(Go SDK) 下载对象-断点续传下载(Go
并行文件系统相关接口(Go SDK) 创建并行文件系统(Go SDK) 列举并行文件系统(Go SDK) 列举并行文件系统内对象(Go SDK) 重命名对象(Go SDK)
其他接口(Go SDK) 生成带授权信息的URL(Go SDK) 生成带授权信息的表单上传参数(Go SDK) 服务端加密(Go SDK)
相关操作 系统配置 账号管理 访问路径 更新客户端版本
配置对象ACL 操作步骤 登录OBS Browser。 单击待配置的桶,进入桶界面。 在待操作对象右侧,单击,选择“配置对象ACL”。 根据需求设置目标桶的ACL权限,单击“保存”,如图1所示。 图1 配置对象ACL 在弹出的消息窗口中,单击“确定”关闭消息窗口。 父主题: 权限控制
权限控制 概述 配置桶策略 配置对象策略 配置桶ACL 配置对象ACL
对象管理 对象管理方法介绍 新建文件夹 上传文件或文件夹 下载文件或文件夹 MD5检验 重命名文件 复制文件或文件夹 移动文件或文件夹 分享文件 分享文件夹 通过对象URL访问对象 搜索文件或文件夹 删除文件或文件夹 恢复归档存储文件
环境准备 资源准备 下载并安装obsfs 初始化obsfs
相关操作 libfuse安装指导