返回主题:框架与集成:Storm、Spark 与消息系统怎么接

知识卡片

普通读书笔记卡

Streams在应用内构建处理拓扑

理解等级:中级

本书 Kafka 2.0.0 的 Kafka Streams 是嵌入应用程序的流处理客户端库:从输入主题读取记录,按转换操作组成处理拓扑,再把结果写入输出主题或外部系统。它能做逐事件处理、窗口、连接和有状态聚合,而不仅把 Kafka 当数据来源。书中的单词统计拓扑从 streams-plaintext-input 读取文本,拆词、按词分组计数,再写入 streams-wordcount-output;输入 hello kafka streams 后输出各词计数 1,继续输入 I love kafka streams 后 kafka 和 streams 更新为 2。application.id 用于协调应用实例并命名内部资源,不能把不同应用随意共用同一 ID。此卡解释原书示例,未运行程序。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《深入理解Kafka:核心设计与实践原理 2019》第9章《Kafka应用》9.4 节及代码清单 9-2(源文件:`_epub-src/OEBPS/Text/chapter10.xhtml`;图片:`_epub-src/OEBPS/Images/340_4.jpg`、`340_5.jpg`、`341_2.jpg`、`342_1.jpg`) - 结论依据:原文定义 Streams 客户端库、输入转换输出和 `application.id` 作用;代码图及输出图核对主题、分组计数与 1→2 的结果。代码截图使用 `StreamsBuilder`,正文在同处写 `KStreamBuilder`,卡片不依赖这一类名。 - 原始内容:这个示例程序将从主题 streams-plaintext-input 中读取消息,然后对读取的消息执行单词统计,并将结果持续写入主题streams-wordcount-output。