知识卡片

结构图卡

RocketMQ的核心架构:NameServer、Broker、Producer、Consumer

理解等级:未标注

RocketMQ是阿里开源、专为互联网高并发大流量场景设计的分布式消息中间件(前身MetaQ,2017年成为Apache顶级项目),相比遵循JMS规范的ActiveMQ这类企业级消息中间件,RocketMQ对分布式特性(顺序消息、事务消息、亿级消息堆积、高吞吐、高可用扩展性)的支持要强得多,更适合互联网场景。它的整体网络架构由四部分构成,理解各自职责能看出一套典型的、职责分离的分布式消息系统该如何设计。NameServer:本质是一个注册中心,Broker、Producer、Consumer启动时都会向它注册,主要功能是负责客户端的寻址操作;NameServer集群内各节点互相无状态,因为读写操作不频繁、几乎没有负载压力,生产环境部署时不需要太多节点。Broker:消息服务端,负责消息的管理、存储和分发;一个Topic会被均匀分布到集群内所有Broker节点上,真正负责消息存储的最小逻辑单元是Queue(包含在Topic内部);每个Broker启动时会与NameServer集群所有节点建立长连接并定时发送心跳和Topic信息,若指定时间内NameServer未收到心跳,会主动关闭该Broker的会话连接。Producer:消息生产者,向Broker推送消息。Consumer:消息消费者,负责消费Broker中的消息;Producer和Consumer在启动时只需与集群中某一个NameServer节点建立长连接、定时轮询Topic信息,若连接的NameServer节点宕机则自动重连其他节点,同时它们也会定时向Broker发送心跳,超时未收到心跳则Broker会主动关闭该客户端连接。这套架构的核心设计思想是”寻址”与”存储/传输”职责分离——NameServer只管”东西在哪”,Broker只管”东西怎么存怎么发”,两者可以独立进行集群扩展和容错,互不牵连。

结构图:

flowchart TD
    NS[NameServer集群<br/>注册中心,负责寻址,节点间无状态]
    P[Producer<br/>消息生产者] -->|注册+定时轮询Topic信息| NS
    C[Consumer<br/>消息消费者] -->|注册+定时轮询Topic信息| NS
    B[Broker<br/>消息服务端,存储管理分发] -->|注册+定时心跳| NS
    P -->|推送消息| B
    B -->|Push/Pull消息| C
这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《超大流量分布式系统架构解决方案:人人都是架构师2.0》第3章《削峰填谷——流控方案》"3.4.2 常见消息中间件的使用"节(源文件:OEBPS/Text/0008.xhtml) - 结论依据:原文说明"RocketMQ由NameServer、Broker、Producer及Consumer四部分构成……NameServer其实就是一个注册中心……它的主要功能是负责客户端的寻址操作……Broker为消息服务端,提供消息的管理、存储及分发等功能",并说明Producer/Consumer与NameServer/Broker之间的注册、心跳机制,直接支撑本卡片结构。 - 原始内容:RocketMQ由NameServer、Broker、Producer及Consumer四部分构成,每个部分都可以采用集群部署……NameServer其实就是一个注册中心,Broker、Producer及Consumer在启动时都会向其进行注册,它的主要功能是负责客户端的寻址操作。