对象存储服务 OBS-操作流程

时间:2024-11-26 10:35:20

操作流程

大数据场景下使用OBS实现存算分离的操作流程如图1所示。

图1 操作流程
  1. 配置的核心是完成大数据平台与OBS对接,实现OBS作为大数据的统一 数据湖 存储。本文档提供三种主流大数据平台的对接指导,详情请参见支持的大数据平台简介
  2. (可选)OBS除了可以与主流大数据平台对接外,还可以直接与开源的大数据组件对接。当您使用开源的大数据组件时,可参考支持的大数据组件简介完成与OBS对接。
  3. (可选)如果您的数据仍存储在本地HDFS,需要先将数据迁移到华为云OBS中。详情请参见迁移HDFS数据至OBS
support.huaweicloud.com/bestpractice-obs/obs_05_1530.html