数据湖探索 DLI-使用Temporal join关联维表的最新分区:功能描述
功能描述
对于随时间变化的分区表,我们可以将其读取为无界流,如果每个分区包含某个版本的完整数据,则该分区可以被视为时间表的一个版本,时间表的版本保留了分区的数据。Flink支持在处理时间关联中自动跟踪时间表的最新分区(版本)。
最新分区(版本)由 'streaming-source.partition-order' 选项定义。
这是在Flink 流应用作业中将 Hive 表用作维度表的最常见用例。
- GaussDB如何建主键_数据库索引设计规范_高斯数据库如何建主键-华为云
- 云数据库Gaussdb数据库索引_华为gaussdb__gaussdb 数据库
- 什么是数据湖探索服务_数据湖探索DLI用途与特点
- GaussDB(for MySQL)并行查询_GaussDB(for MySQL)内核_GaussDB(for MySQL)并行执行_PQ
- 什么是Spark SQL作业_数据湖探索DLISpark SQL作业
- MapReduce服务_什么是Hive_如何使用Hive
- 什么是Flink OpenSource SQL_数据湖探索_Flink OpenSource SQL
- MapReduce服务_什么是HDFS_HDFS特性
- 如何开通云审计服务_开通云审计的使用场景_CTS关联服务-华为云
- 什么是Manager_Manager的功能_MRS运维管理