知识卡片

流批区别在边界

专业/工作 · 499.d.1

内容

批处理面对有界数据集,可以等数据收齐后统一计算;流处理面对持续到达的数据,必须边到边算并持续产出。发散:两者不是快慢之分,而是输入是否有天然终点、结果是否需要持续更新的建模差异。

参考来源

- 位置:《Flink原理与实践》第1章《大数据技术概述》(源文件:_epub-src/OEBPS/Text/chapter04.xhtml) - 结论依据:原文围绕“批处理和流处理的区别”给出定义、流程、对比或限制条件,本卡片据此提炼其可迁移的框架机制,并补充了使用边界或工程启发。 - 原始内容:主要专注于批处理。 读完本章之后,读者可以了解以下内容。 大数据的特点、大数据分而治之的处理思想。 批处理和流处理的区别。 流处理的基础概念。 流处理框架的技术更迭和架构演进。 Flink开发的常用编程语言。 1.1 什么是大数据 1.1.1 大数据的5个“V” 大数据,顾名思义,就是拥有庞大体量的……