主题对照

拉取、积压与消费能力:拉得动吗

拉得动吗:推模式与拉模式、长轮询、预取与批量、流控与反压、积压阈值与监控、扩缩容与优先级。

58 张卡片 · 21 本书

本层 58 张卡片 · 含下级覆盖 58 张卡片

本主题的卡片

Java系统分析与架构设计 (肖海鹏 王荣芝 张天怡 王化宇 周洪翠) · 软件架构设计

先通知再拉取

院线排片后只发一条简短通知(院线编号、消息编号、内容),网络代售收到后再主动调用院线的 Web 服务接口拉取详细数据。通知可走消息中间件,也可按配置逐个回调代售方接口并记录日志。发散:通知只说“变了”,数据由需要方按需去取,发送方不必知道每家要什么。

查看卡片与原书出处

RabbitMQ实战指南 · 第3章 客户端开发向导

推模式与拉模式的性能鸿沟

消费分推模式(Basic.Consume)和拉模式(Basic.Get)。推模式下RabbitMQ持续推送消息,个数受Basic.Qos限制;拉模式每次请求单条。把Basic.Get放进循环代替Basic.Consume会严重影响RabbitMQ性能,高吞吐应使用推模式。功能等价的两个API,底层开销未必对等。

查看卡片与原书出处

RocketMQ分布式消息中间件:核心原理与最佳实践 2020 · RocketMQ的消费流程和最佳实践

Push本质是Pull

DefaultMQPushConsumer让人感觉是Broker主动推送,实际是后台拉取到本地缓存,再以回调交给业务代码,本质和Pull消费者一样。Push省去手写拉取循环和提交位点,却让出了对拉取节奏的控制。排查消费慢或限流问题要看拉取线程和本地缓存。5.x的PushConsumer仍是内置长轮询拉取。

查看卡片与原书出处

RocketMQ实战与原理解析 (云栖社区系列) · 用适合的方式发送和接收消息

Push与Pull边界

Push Consumer 把拉取、负载均衡和 Offset 保存交给客户端框架,业务只写处理函数;Pull Consumer 把读取队列、读取位置和节奏交给使用者。前者省心,后者自由,选择依据是业务是否需要精细控制消费进度。

查看卡片与原书出处

RocketMQ实战与原理解析 (云栖社区系列) · 用适合的方式发送和接收消息

Push实为可控Pull

RocketMQ 的 PushConsumer 不是 Broker 主动无限推送,而是在客户端以 Pull 为核心,再用线程池和阈值做流量控制。这种设计把背压能力留在消费端,避免 Broker 按固定速度灌消息导致慢消费者崩溃。

查看卡片与原书出处

RocketMQ实战与原理解析 (云栖社区系列) · DefaultMQPushConsumer的处理流程

长轮询让拉取及时返回

在本书所述的 RocketMQ 实现中,消费者主动发起拉取;暂无新消息时,Broker 暂时挂起请求,期间一旦有消息便沿现有连接返回,超时才返回空结果。它兼顾了拉取方控制节奏和消息到达后的及时响应,但挂起请求会占用服务端资源,连接规模仍须评估。这个机制补充了[[Push实为可控Pull]]的实现条件。

查看卡片与原书出处

RocketMQ实战与原理解析 (云栖社区系列) · 吞吐量优先的使用场景

Pull消费自行管队列

原书版本的 DefaultMQPullConsumer 会暴露全部 Message Queue,应用自己选择读取的队列和 Offset,因此能定制负载均衡,也必须负责分配与进度管理。它和自动重平衡的 PushConsumer 形成取舍:控制权越多,客户端要承担的协调工作也越多。

查看卡片与原书出处

System Design Interview – An insiders guide, Second Edition · 云盘

文件变更通知触发拉取

通知服务告诉客户端文件有变化,客户端再取元数据并下载所需块;离线客户端回来后补取变更。通知不承担传输完整文件的职责,低频单向变更通知可用长轮询,不必一律采用双向 WebSocket。

查看卡片与原书出处

分布式实时计算框架原理及实践案例 · 消息队列MQ

Kafka保留消息拉取消费

Kafka 与传统消息队列不同:已消费的消息不删除,按时间或分区文件大小清理旧数据。生产者推送消息到 broker,消费者主动拉取;ZooKeeper 负责集群配置、选举 leader 和消费组变化时的再均衡。同一消费组内一条消息只被一个消费者消费,不同消费组可以同时消费同一条消息,因此可同时接实时流处理和离线批处理。

查看卡片与原书出处

架构师之路 · 微信为啥不丢"离线消息"?

离线消息按接收方批量拉取

逐个发送方拉取离线消息,客户端请求数会随好友数增加。改为按接收方一次批量查询,再由客户端按发送方分组,可减少往返;消息量大时仍需分页或按需拉取,不能把“一次请求”当作无容量上限。查询索引应匹配实际拉取条件。

查看卡片与原书出处

架构师之路 · QQ状态同步究竟是推还是拉?

非实时通知可按需拉取

系统消息或开屏内容若无强实时要求,可由活跃客户端在登录或进入页面时拉取,避免一次集中推送触达大量离线用户。拉取负载会随用户访问分布展开,但登录高峰仍可能同步形成尖峰;需要按实际访问曲线评估,并不能保证自然削峰。

查看卡片与原书出处

架构师之路 · QQ状态同步究竟是推还是拉?

群状态进入页面时再拉取

群成员状态扇出大,即一次状态变化可能触发许多通知,而用户登录后未必进入每个群。书中假设每人加入 20 个群、每群 200 人且 20% 在线,则一次变化可能产生约 20×200×20%=800 次通知;这是忽略重复成员的示意估算,不是实测。

把拉取时机延后到用户打开某个群,可避免为未查看的群做查询或广播,并在真正需要展示时取得较新状态。

代价是首次进入群的请求延迟和离开页面期间的状态陈旧。

查看卡片与原书出处

深入理解Kafka:核心设计与实践原理 2019 · 消费者

poll不只是拉取

KafkaConsumer 的 poll 表面上是拉取消息,内部还牵涉位移、协调器、组成员、分区分配、再均衡和心跳。业务线程如果长时间阻塞在消息处理上,不只是处理变慢,还可能影响消费者与组协调机制的互动。消费循环应被当作协议驱动循环,而不只是 while 读数据。

查看卡片与原书出处

深入理解Kafka:核心设计与实践原理 2019 · 消费者

工作队列满时反压拉取

消费者拉取快于工作线程处理时,若继续把批次无界提交给线程池,待处理记录会积压。书中线程池使用有界队列,并设置 CallerRunsPolicy:队列和工作线程都满时,由提交任务的消费线程自己执行处理任务,使它暂时放慢后续 poll(),形成简易反压。这能限制任务堆积,却也会延长消费线程再次轮询的间隔;设计时仍要核对消费组的轮询时限、单批处理耗时与业务失败处理。

查看卡片与原书出处

深入理解Kafka:核心设计与实践原理 2019 · 消费者

凑够拉取量也要设等待上限

fetch.min.bytes 指定服务端响应一次拉取请求前希望积累的最小数据量;调大可减少小批次响应、提高吞吐,但低流量时会增加等待。fetch.max.wait.ms 给这种等待设置上限,避免达不到最小数据量就一直不返回。调参时应把两者一起看:吞吐优先可接受更大批次与等待,低延迟场景则不能只调高最小字节数。书中 Kafka 2.0.0 语境的默认值分别为 1 B 和 500 ms,实际部署应按所用版本核对。

查看卡片与原书出处

深入理解Kafka:核心设计与实践原理 2019 · 消费者

拉取大小上限保留首条例外

fetch.max.bytes 限制一次拉取请求整体返回量,max.partition.fetch.bytes 限制每个分区的返回量;两者都是控制批次大小的参数,不能误作消息绝对大小上限。本书说明:如果第一个非空分区的首条消息大于配置上限,Kafka 仍可返回它,让消费者继续推进。服务端能接受多大消息另由 message.max.bytes 或主题的 max.message.bytes 控制。因而排查大消息消费时,要分别看生产/服务端接收限制与消费者批次限制。

查看卡片与原书出处

深入理解Kafka:核心设计与实践原理 2019 · 深入服务端

拉取会话省状态

FetchRequest 在大量分区场景下会反复携带相同订阅状态,造成固定网络开销。fetch session 用 session_id 和 epoch 在两端缓存稳定状态,首次或变更时发全量,稳定后发增量。高频协议优化的关键,是把“不变的信息”从每次请求中拿出去。

查看卡片与原书出处

深入理解Kafka:核心设计与实践原理 2019 · 深入服务端

延时拉取先读再等再读

拉取请求到达时,Kafka 先读一次日志。如果可返回的数据不足 fetch.min.bytes,服务端创建 DelayedFetch 等新数据或超时;被唤醒后再读一次日志并返回当时的结果。第二次读很关键:等待期间日志可能已有新消息,不能把首次读到的空结果直接返回。若首次读取已达到最小字节数,就立即响应,不进入延时管理器。这个机制减少分区暂时没有新消息时的连续空拉取。

结构图:

flowchart LR
    A[收到拉取请求] --> B[第一次读日志]
    B --> C{达到最小字节数?}
    C -- 是 --> D[立即返回]
    C -- 否 --> E[创建 DelayedFetch]
    E --> F[新消息事件或超时]
    F --> G[第二次读日志]
    G --> H[返回当前结果]
查看卡片与原书出处

深入理解Kafka:核心设计与实践原理 2019 · 深入服务端

拉取唤醒取决于可见进度

同为 DelayedFetch,可唤醒它的外部进度取决于拉取方:follower 复制副本时看 leader 本地日志是否追加消息;普通消费者通常看高水位 HW 是否增长;设置 read_committed 的消费者还须避开未完成事务,其可见上界由最后稳定偏移量 LSO 限制,因此看 LSO 增长。已追加、已复制和已对已提交读取可见,是三个不同条件;把它们混用会让等待提前返回,或错过可以返回的数据。这里记录的是本书 Kafka 2.0.0 的触发路径,事务细节仍须结合后文复核。

查看卡片与原书出处

深入理解Kafka:核心设计与实践原理 2019 · 高级应用

推拉消费权衡流控

推模式由 broker 主动发送,通常能减少等待,但必须限制下游可承受的速率;拉模式由消费者主动请求,可按自身处理能力控制批量,却会受到轮询间隔等因素影响。比较两者不能只看“实时性”:当下游偶尔变慢,推模式要有反馈或限流,拉模式要有合适的拉取节奏和堆积监测。这里讨论的是书中的模式取舍,具体产品仍可能组合长轮询、预取等机制。

查看卡片与原书出处

高可用架构·硅谷篇 · Twitter高性能分布式日志系统架构解析

长轮询合并读操作

普通读取可分别获取指定Entry与最新LAC;单独读LAC需等待多数Bookie答复。Twitter在书中版本把两种操作合成长轮询:Bookie等待写者推进LAC,再同时返回新LAC和对应Entry,省去多轮网络交互。长轮询也使用[[推测读降尾延迟]]机制,以减少慢副本造成的尾延迟。

查看卡片与原书出处

高可用架构(第1卷) · 大数据与数据库

拉式批量消费

某音乐公司最初的数据流架构,是清洗后的数据由数据实时清洗平台(ETL)直接、实时地推(Push)写入HDFS——这个架构需要维持长连接,运行起来非常不稳定,隔三差五就出现数据异常,进而导致下游的计算结果也跟着异常。团队最初尝试了很多具体的技术手段去优化这个问题:保证长连接的稳定性、连接断开后的重试机制、调整HDFS服务端参数,但这些局部优化都没能彻底解决问题——每天异常不断,旧异常还没处理完,新异常又冒出来了。真正的转折点是团队意识到不能再停留在”优化具体技术点”这个层面,而要从架构本身入手:在数据实时清洗平台之后加入了一层Kafka(数据缓存重用层),清洗后的数据先写入Kafka,离线计算不再依赖直接、实时、长连接的推送方式,而是改为由新开发的KG-Camus组件(参考LinkedIn的Camus实现),通过作业调度系统按固定间隔定时拉取数据到HDFS——数据消费模式从”推”彻底转变为”拉”,不再需要维持HDFS Client的长连接,不同业务还可以根据自己的实际需求配置不同的拉取时间间隔。这次架构调整上线之后,此前反复出现的那类异常基本再也没有出现过。这个案例揭示了一条排查”持续性、反复出现的系统性故障”的重要经验:当针对具体技术细节的一轮又一轮优化(调整参数、加重试逻辑)始终无法根治一类反复发生的问题时,这往往是一个信号,说明问题的根源不在某个具体的实现细节,而在于架构本身的通信模式选择(这里是”推”这种要求维持长连接、实时性强但容错性差的模式)——遇到这种情况,与其在同一个架构模式内部持续打补丁,不如认真评估是不是应该切换到一种从设计上就天然更健壮的通信模式(这里是”拉”模式的定时批量消费,不依赖脆弱的长连接、可以自然容忍短暂的网络波动)。

查看卡片与原书出处

Building Distributed Systems Designing scalable architectures with microservices, event-driven patterns, and robust deployment… · Event-driven Systems

批量预取控制在途量

批量一次取多条减少往返,预取让工作者提前缓存下一批,提高吞吐。批量越大越可能增加单条等待、内存和故障重投量,慢工作者占住消息也影响公平;需同时控制在途数量。

查看卡片与原书出处

RocketMQ实战与原理解析 (云栖社区系列) · 吞吐量优先的使用场景

批量消费与堆积丢弃

提高消费吞吐有两招:多条一起处理远快于逐条时(如批量更新数据库),把consumeMessageBatchMaxSize从默认1调大,一次收到N条;发生短时间无法消除的严重堆积时,丢弃不重要的消息,如某队列堆积超过9万条就直接丢,让Consumer追上Producer。后者以个别消息的完整性换整体不落后,只适用于可丢的消息。

查看卡片与原书出处

RocketMQ技术内幕 RocketMQ架构设计与实现原理 · RocketMQ消息发送

批量消息复用单条处理路径

批量发送把同一主题的多条消息打包,减少网络调用。实现上不另起一套逻辑:调用batch()把消息封装成MessageBatch,每条消息按固定格式编码后聚合成一个byte数组放进消息体,服务端按同样格式切分解码。这样批量与单条的发送流程完全一样。让批量对象在类型上像单个对象,避免两套路径长期分裂。

查看卡片与原书出处

微服务实战 · 构建可复用的微服务框架

预取限制未确认消息窗口

prefetch=10限制消费者可持有的未确认投递数,达到上限后等待确认释放名额。它不是固定一次给一个实例连续十条、也不是必须十条全部完成才继续;合适消费者之间通常按轮转等规则分发,且受可用窗口影响。2026-10-27对照RabbitMQ官方确认文档核对。

可联系[[作业队列让消费者分担任务]]理解条件与边界。

查看卡片与原书出处

深入理解Kafka:核心设计与实践原理 2019 · 生产者

在途请求限制连接积压

InFlightRequests 按节点保存已发送但尚未收到响应的请求。max.in.flight.requests.per.connection 限制单个连接同时在途的请求数:达到上限后,要等先前请求收到响应才能继续向该连接发送。这个计数可反映请求积压,但积压本身不能单独证明是 broker 负载高还是网络故障。书中 Kafka 2.0.0 的默认上限为 5;严格顺序场景还需结合 [[重试可能破坏顺序]] 考虑在途并发。

查看卡片与原书出处

深入理解Kafka:核心设计与实践原理 2019 · 生产者

最低负载按在途数判断

本书中的 leastLoadedNode 是当前在途请求最少的 broker 节点,依据是 InFlightRequests 里各节点尚未确认的请求数,不是 CPU、磁盘或网络的综合负载。图例中 Node0、Node1、Node2 分别有 3、2、4 个在途请求,因此选 Node1。元数据请求等操作可优先向它发送,以减少排队风险;这只是客户端当时可见请求量的判断,不能据此断定节点整体最空闲。

查看卡片与原书出处

深入理解Kafka:核心设计与实践原理 2019 · 消费者

每轮记录数约束处理批量

max.poll.records 控制一次 poll() 向应用返回的记录数上限,影响单轮需要处理的工作量。调大可能减少轮询开销并提高小消息场景吞吐,但如果业务逐条处理较慢,也会拉长下一次轮询前的处理时间。它与按字节控制服务端拉取响应的 fetch.max.bytes、max.partition.fetch.bytes 作用层次不同;不能只靠增大记录数解决处理能力不足。书中所列默认值 500 条属于 Kafka 2.0.0 语境。

查看卡片与原书出处

RabbitMQ实战指南 · 第4章 RabbitMQ进阶

Qos限流像TCP滑动窗口

RabbitMQ默认按取余轮询分发,不管消费者是否已确认前面的消息,可能一个忙死一个闲着。channel.basicQos的prefetchCount限制信道上消费者可持有的最大未确认消息数,达到上限就不再推送,确认后才继续。它像TCP滑动窗口,用在途量这个动态信号匹配供需。

查看卡片与原书出处
辅助阅读:卢曼编号

按卢曼编号阅读

点击箭头逐层展开,点击卡片标题查看详情。路径上下文仅用于连接层级,不计入主题卡片数。

  • 348 队列积压触发批处理 主题成员 Serverless架构应用开发:Python实现-2021 · 设置Serverless架构 理解等级:未标注
  • 591 推模式与拉模式的性能鸿沟 主题成员 RabbitMQ实战指南 · 第3章 客户端开发向导 理解等级:未标注
  • 展开或收起下级: 592 消息路由失败时的三种应对方案 路径上下文 RabbitMQ实战指南 · 第4章 RabbitMQ进阶 理解等级:未标注
  • 展开或收起下级: 599 消费模式定进度存放 路径上下文 RocketMQ分布式消息中间件:核心原理与最佳实践 2020 · RocketMQ的消费流程和最佳实践 理解等级:未标注
    • 599.c Push本质是Pull 主题成员 RocketMQ分布式消息中间件:核心原理与最佳实践 2020 · RocketMQ的消费流程和最佳实践 理解等级:未标注
  • 展开或收起下级: 607 Push与Pull边界 主题成员 RocketMQ实战与原理解析 (云栖社区系列) · 用适合的方式发送和接收消息 理解等级:未标注
    • 607.a Push实为可控Pull 主题成员 RocketMQ实战与原理解析 (云栖社区系列) · 用适合的方式发送和接收消息 理解等级:未标注
  • 展开或收起下级: 610 顺序只需局部 路径上下文 RocketMQ实战与原理解析 (云栖社区系列) · 可靠性优先的使用场景 理解等级:未标注
    • 610.e 三种方式模拟优先级 主题成员 RocketMQ实战与原理解析 (云栖社区系列) · 可靠性优先的使用场景 理解等级:未标注
  • 展开或收起下级: 611 过滤前移省带宽 路径上下文 RocketMQ实战与原理解析 (云栖社区系列) · 吞吐量优先的使用场景 理解等级:未标注
    • 611.e 批量消费与堆积丢弃 主题成员 RocketMQ实战与原理解析 (云栖社区系列) · 吞吐量优先的使用场景 理解等级:未标注
  • 展开或收起下级: 1219 操作系统标准指标该被记录但不该被直接告警 路径上下文 监控运维实践 原则与策略-2021 · 服务器监控 理解等级:未标注
  • 展开或收起下级: 1721 镜像同步拖慢队列 路径上下文 分布式系统与一致性 · 第6章 消息系统RabbitMQ 理解等级:未标注
  • 展开或收起下级: 1980 事件建模范式针对状态迁移建模 路径上下文 解构领域驱动设计 理解等级:未标注
    • 展开或收起下级: 1980.z 事件流化跨界为本地 路径上下文 解构领域驱动设计 理解等级:未标注
      • 展开或收起下级: 1980.z.4 消费者拥有查询模型 路径上下文 Building Event-Driven Microservices Leveraging Organizational Data at Scale (Adam Bellemare) · Why Event-Driven Microservices 理解等级:中级
        • 展开或收起下级: 1980.z.4.b 流表对偶与物化 路径上下文 Building Event-Driven Microservices Leveraging Organizational Data at Scale (Adam Bellemare) · Event-Driven Microservice Fundamentals 理解等级:中级
          • 展开或收起下级: 1980.z.4.b.2 确定性的输入边界 路径上下文 Building Event-Driven Microservices Leveraging Organizational Data at Scale (Adam Bellemare) · Deterministic Stream Processing 理解等级:高级
            • 展开或收起下级: 1980.z.4.b.2.e 重放要隔离现实副作用 路径上下文 Building Event-Driven Microservices Leveraging Organizational Data at Scale (Adam Bellemare) · Deterministic Stream Processing 理解等级:高级
              • 1980.z.4.b.2.e.1 应用重置与Lag扩缩 主题成员 Building Event-Driven Microservices Leveraging Organizational Data at Scale (Adam Bellemare) · Supportive Tooling 理解等级:高级
  • 展开或收起下级: 2274 企业IT建设四阶段 路径上下文 中台架构与实现:基于DDD和微服务 理解等级:未标注
    • 展开或收起下级: 2274.e 微服务是手段 路径上下文 中台架构与实现:基于DDD和微服务 理解等级:未标注
      • 展开或收起下级: 2274.e.1 微服务以独立能力协作 路径上下文 生产微服务 · 微服务简介 理解等级:中级
        • 展开或收起下级: 2274.e.1.a 横向与纵向扩展 路径上下文 生产微服务 · 微服务简介 理解等级:初级
          • 展开或收起下级: 2274.e.1.a.5 异步化释放同步等待 路径上下文 高并发系统设计40问 · 高并发系统:它的通用设计方法是什么? 理解等级:未标注
            • 展开或收起下级: 2274.e.1.a.5.b 队列缓冲生产消费速率差 路径上下文 高并发系统设计40问 · 消息队列:秒杀时如何处理每秒上万次的下单请求? 理解等级:未标注
              • 2274.e.1.a.5.b.2 延迟等于已生产减已消费 主题成员 高并发系统设计40问 · 消息队列:如何降低消息队列系统中消息的延迟? 理解等级:未标注
              • 2274.e.1.a.5.b.3 条数堆积看不出等待时长 主题成员 高并发系统设计40问 · 消息队列:如何降低消息队列系统中消息的延迟? 理解等级:未标注
              • 2274.e.1.a.5.b.5 单消费者内用线程池并行 主题成员 高并发系统设计40问 · 消息队列:如何降低消息队列系统中消息的延迟? 理解等级:未标注
              • 2274.e.1.a.5.b.6 拉空时退避避免空转 主题成员 高并发系统设计40问 · 消息队列:如何降低消息队列系统中消息的延迟? 理解等级:未标注
              • 2274.e.1.a.5.b.9 有队列就要监控堆积 主题成员 高并发系统设计40问 · 消息队列:如何降低消息队列系统中消息的延迟? 理解等级:未标注
            • 2274.e.1.a.5.d 消费并发受等待与容量夹限 主题成员 高并发系统设计40问 · 消息队列:秒杀时如何处理每秒上万次的下单请求? 理解等级:未标注
  • 展开或收起下级: 2313 组成派与决策派 路径上下文 软件架构设计:程序员向架构师转型必备 · 解析软件架构概念 理解等级:未标注
    • 展开或收起下级: 2313.e 架构由四个维度定义 路径上下文 Fundamentals of Software Architecture · Introduction 理解等级:中级
      • 展开或收起下级: 2313.e.5 架构风格封装已知权衡 路径上下文 Fundamentals of Software Architecture · Part Architecture Styles 理解等级:初级
        • 展开或收起下级: 2313.e.5.f 分布式能力伴随网络代价 路径上下文 Fundamentals of Software Architecture · Foundations 理解等级:中级
          • 展开或收起下级: 2313.e.5.f.10 分布式系统的统一外观 路径上下文 Building Distributed Systems Designing scalable architectures with microservices, event-driven patterns, and robust deployment… · Distributed Systems Fundamentals 理解等级:初级
            • 展开或收起下级: 2313.e.5.f.10.c 异构系统需要互操作 路径上下文 Building Distributed Systems Designing scalable architectures with microservices, event-driven patterns, and robust deployment… · Distributed Systems Fundamentals 理解等级:初级
              • 展开或收起下级: 2313.e.5.f.10.c.1 分布式通信的抽象 路径上下文 Building Distributed Systems Designing scalable architectures with microservices, event-driven patterns, and robust deployment… · Distributed Systems Fundamentals 理解等级:中级
                • 展开或收起下级: 2313.e.5.f.10.c.1.c 事件驱动解耦消费者 主题成员 Building Distributed Systems Designing scalable architectures with microservices, event-driven patterns, and robust deployment… · Distributed Systems Fundamentals 理解等级:中级
                  • 展开或收起下级: 2313.e.5.f.10.c.1.c.2 队列与保留日志的区别 路径上下文 Building Distributed Systems Designing scalable architectures with microservices, event-driven patterns, and robust deployment… · Event-driven Systems 理解等级:中级
                    • 2313.e.5.f.10.c.1.c.2.f 批量预取控制在途量 主题成员 Building Distributed Systems Designing scalable architectures with microservices, event-driven patterns, and robust deployment… · Event-driven Systems 理解等级:中级
                    • 展开或收起下级: 2313.e.5.f.10.c.1.c.2.g Kafka分区是并行边界 路径上下文 Building Distributed Systems Designing scalable architectures with microservices, event-driven patterns, and robust deployment… · Event-driven Systems 理解等级:中级
                      • 展开或收起下级: 2313.e.5.f.10.c.1.c.2.g.1 消费组分担分区工作 路径上下文 Building Distributed Systems Designing scalable architectures with microservices, event-driven patterns, and robust deployment… · Event-driven Systems 理解等级:中级
                        • 2313.e.5.f.10.c.1.c.2.g.1.a 消费积压阈值看处理时长 主题成员 Building Distributed Systems Designing scalable architectures with microservices, event-driven patterns, and robust deployment… · Choosing Platform and Technologies 理解等级:高级
  • 展开或收起下级: 2344 心跳处理半开 路径上下文 App后台开发运维和架构实践 · App后台架构剖析 理解等级:未标注
    • 展开或收起下级: 2344.c Feed推拉取舍 路径上下文 App后台开发运维和架构实践 · App后台架构剖析 理解等级:未标注
      • 展开或收起下级: 2344.c.1 扩散系数衡量推送扇出 路径上下文 架构师之路 · QQ状态同步究竟是推还是拉? 理解等级:未标注
  • 展开或收起下级: 2383 架构是整体到部分的草图 路径上下文 Java系统分析与架构设计 (肖海鹏 王荣芝 张天怡 王化宇 周洪翠) · 软件架构设计 理解等级:未标注
    • 2383.s 消费者用客户确认 主题成员 Java系统分析与架构设计 (肖海鹏 王荣芝 张天怡 王化宇 周洪翠) · 软件架构设计 理解等级:未标注
    • 2383.w 先通知再拉取 主题成员 Java系统分析与架构设计 (肖海鹏 王荣芝 张天怡 王化宇 周洪翠) · 软件架构设计 理解等级:未标注
  • 展开或收起下级: 2475 三种发送模式的可靠性与性能权衡 路径上下文 RocketMQ技术内幕 RocketMQ架构设计与实现原理 · RocketMQ消息发送 理解等级:未标注
  • 展开或收起下级: 2526 监控不止状态码 路径上下文 Serverless架构:从原理、设计到项目实战 · Web与监控告警场景实践 理解等级:未标注
    • 2526.a 服务监控看积压 主题成员 Serverless架构:从原理、设计到项目实战 · Web与监控告警场景实践 理解等级:未标注
  • 展开或收起下级: 2542 伸缩延迟三段论 路径上下文 Serverless核心技术和大规模实践 · FaaS弹性伸缩 理解等级:未标注
    • 2542.b 堆积策略只扩不缩 主题成员 Serverless核心技术和大规模实践 · FaaS弹性伸缩 理解等级:未标注
  • 展开或收起下级: 2802 消息队列解耦削峰 路径上下文 分布式实时计算框架原理及实践案例 · 消息队列MQ 理解等级:未标注
  • 展开或收起下级: 2947 AMQP消息模型 路径上下文 名师讲坛——Java微服务架构实战 · RabbitMQ消息组件 理解等级:未标注
    • 2947.a 消费端可横扩 主题成员 名师讲坛——Java微服务架构实战 · RabbitMQ消息组件 理解等级:未标注
  • 展开或收起下级: 2958 控制总线管运行态 路径上下文 响应式架构:消息模式Actor实现与Scala、Akka应用集成 · 系统管理和基础结构 理解等级:未标注
    • 2958.g 净化器清理积压 主题成员 响应式架构:消息模式Actor实现与Scala、Akka应用集成 · 系统管理和基础结构 理解等级:未标注
  • 展开或收起下级: 3912 负载分型优化 路径上下文 高可用架构·硅谷篇 · Twitter高性能分布式日志系统架构解析 理解等级:中级
    • 3912.b 长轮询合并读操作 主题成员 高可用架构·硅谷篇 · Twitter高性能分布式日志系统架构解析 理解等级:中级
  • 展开或收起下级: 4278 统一数据入口 路径上下文 高可用架构(第1卷) · 大数据与数据库 理解等级:高级
    • 4278.c 拉式批量消费 主题成员 高可用架构(第1卷) · 大数据与数据库 理解等级:高级
  • 4501 文件变更通知触发拉取 主题成员 System Design Interview – An insiders guide, Second Edition · 云盘 理解等级:中级

未编号或编号待整理

来源书籍

来源书籍

RabbitMQ实战指南

消息中间件产品实战类

Skill 版本:v8

书籍类型:未标注

清单覆盖 9/9

53 张卡片

来源书籍

微服务实战

Skill 版本:v23

书籍类型:未标注

389 张卡片

来源书籍

架构师之路

系统架构类

Skill 版本:v15

书籍类型:未标注

类别清单尚未核对

317 张卡片

来源书籍

高可用架构·硅谷篇

系统架构类

Skill 版本:v15

书籍类型:工程实践

清单覆盖 3/7

57 张卡片

来源书籍

高并发系统设计40问

系统架构类

Skill 版本:v8

书籍类型:工程实践

清单覆盖 7/7

442 张卡片

主题索引

过载保护与优雅降级

比较限流、减载、退避重试、分级依赖与防御成本的过载应对手段。

386 张卡片 · 68 本书

主题索引

指标与监控

时序模型与拉推采集、黄金指标与分位、探针与 APM、容量与负载、监控分层。

382 张卡片 · 58 本书

主题索引

容量规划与资源调度

比较冗余容量、故障域、逻辑与物理资源解耦等容量规划与调度方法。

344 张卡片 · 74 本书

主题索引

无服务器平台

无服务器平台在 Kubernetes 之上补齐的原语:构建、请求路由、事件交付与伸缩至零,以及事件格式标准化。

211 张卡片 · 27 本书

主题索引

背压与流控:生产速率怎么被下游约束

背压的成因与实现手段:下游余量怎样反馈给上游、有界队列与拉取模型、缓冲放在哪一层、哪些缓冲只是把过载推迟,以及吞吐由最慢节点决定的后果。

35 张卡片 · 18 本书