Spark 面试组织者 - 解释什么是 Spark 流 - 1. 微批处理架构
最编程
2024-04-05 09:09:02
...
- 微批处理：Spark Streaming的核心是微批处理模型。它将实时输入的数据流切分为小的数据批（micro-batches），然后使用Spark引擎对这些批数据进行处理。
- 近实时处理：虽然不是纯粹的实时处理模型（如Apache Storm或Flink），但微批处理提供了近实时的处理能力，批处理间隔可以设置为几秒甚至更短。
下一篇： 优化大型数据卷的查询语句