数据治理中心 DATAARTS STUDIO-场景介绍:场景任务

时间:2024-05-22 09:21:16

场景任务

根据客户原始数据采集处理系统中已有的H公司的数据(例如:贸易详单数据和基础信息数据),基于 CDM +OBS+ DLI 完成贸易统计分析。

图1 场景方案
DLI创建OBS外表,对OBS表数据存储格式有所要求:
  • 使用DataSource语法创建OBS表时,支持orc,parquet,json,csv,carbon,avro类型。
  • 使用Hive语法创建OBS表时,支持TEXTFILE, AVRO, ORC, SEQUENCEFILE, RCFILE, PARQUET, CARBON类型。

如果原始数据表存储格式不满足要求,您可以通过CDM将原始数据直接导入到DLI中进行分析,无需上传OBS。

support.huaweicloud.com/bestpractice-dataartsstudio/dataartsstudio_05_0208.html