知识卡片
消息队列的详细设计
选定“集群加 MySQL”后,还要细化到能动手:日志表先落盘即算发布成功,后台线程再搬到每队列一张的消息表,保留 30 天;复用 MySQL 主从复制,只同步消息表;用 ZooKeeper 临时节点做主备决策,主机节点消失即由备机接管;SDK 轮询写入,出错改发下一台;服务端为每个消费者维护进度;通信用 TCP 加 ProtocolBuffer 兼顾多语言。详细设计要让每个环节都有明确答案。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 3 处
- 架构设计流程:详细方案设计 · 查看原书依据
数据库设计两类表,一类是日志表,用于消息写入时快速存储到 MySQL 中;另一类是消息表,每个消息队列一张表
- 架构设计流程:详细方案设计 · 查看原书依据
采用 ZooKeeper 来做主备决策,主备服务器都连接到 ZooKeeper 建立自己的节点
- 架构设计流程:详细方案设计 · 查看原书依据
考虑到消息队列系统后续可能会对接多种不同编程语言编写的系统,为了提升兼容性,传输协议用 TCP,数据格式为 ProtocolBuffer。
参考来源
- 位置:《从零开始学架构》第13讲《架构设计流程:详细方案设计》"详细方案设计实战"(源文件:_epub-src/OEBPS/text00001.html)
- 结论依据:原文逐条列出"细化设计点1:数据库表如何设计?""细化设计点2:数据如何复制?""细化设计点3:主备服务器如何倒换?""细化设计点4:业务服务器如何写入消息?""细化设计点5:业务服务器如何读取消息?""细化设计点6:业务服务器和消息队列服务器之间的通信协议如何设计?"六个具体细化点及其设计答案,直接支撑本卡片结论。
- 原始内容:数据库设计两类表,一类是日志表,用于消息写入时快速存储到 MySQL 中;另一类是消息表,每个消息队列一张表……采用 ZooKeeper 来做主备决策,主备服务器都连接到 ZooKeeper 建立自己的节点……考虑到消息队列系统后续可能会对接多种不同编程语言编写的系统,为了提升兼容性,传输协议用 TCP,数据格式为 ProtocolBuffer。