MAPREDUCE服务 MRS-Flink应用开发简介:组件介绍

时间:2024-10-18 17:22:20

组件介绍

Flink是一个批处理和流处理结合的统一计算框架,其核心是一个提供了数据分发以及并行化计算的流数据处理引擎。它的最大亮点是流处理,是业界最顶级的开源流处理引擎。

Flink最适合的应用场景是低时延的数据处理(Data Processing)场景:高并发pipeline处理数据,时延毫秒级,且兼具可靠性。

Flink技术栈如图1所示。

图1 Flink技术栈

Flink在当前版本中重点构建如下特性,其他特性继承开源社区,不做增强。

  • DataStream
  • Checkpoint
  • 窗口
  • Job Pipeline
  • 配置表
support.huaweicloud.com/devg-lts-mrs/mrs_07_050002.html