知识卡片

普通读书笔记卡

流处理并行需连接器

理解等级:中级

在程序里单独启动 RocketMQ Consumer、再启动 Spark 或 Flink 客户端,只完成消息收发与框架接入。若要使用流处理框架自身的并行任务分配,需要适配 Connector。接入成功和进入框架的并行调度是两级能力;原书所列连接器项目状态仅反映出版时,不当作现状。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《RocketMQ实战与原理解析 (云栖社区系列)》第8章《和其他系统交互》8.3节(源文件:_epub-src/OEBPS/text00087.html) - 结论依据:原文先说明可在同一程序中分别启动RocketMQ与流处理客户端,随后明确利用框架自身并发处理须实现Connector。 - 原始内容:同时再启动Spark或Flink的Client程序,负责和Spark或Flink交互。 如果需要利用Spark、Flink本身的并发处理,需要实现相应的Connector