主题索引
存储模型选型
比较关系型、键值、列式、文档与全文检索等存储模型的特性取舍与适用场景。
来源书籍
7/7
执行模式:light
本次执行规则:book-workflow v4 / book-notes v23;保留首次v8及历史评级。
建档进度:done
| 章节号 | 章节标题 | 精读/略读 | 状态 | 卡片数 |
|---|---|---|---|---|
| I1 | 简介:课程目标与学习路线 | 全文已读:课程宣传与订阅资料,无独立技术机制 | done | 0 |
| 00 | 开篇词:为什么你要学习高并发系统设计? | 全文已读:背景、动机与路线;缓存和消息观点并入后续卡 | done | 0 |
| 01 | 高并发系统:它的通用设计方法是什么? | 全文已读:三种路径与架构演进边界逐单元核对 | done | 5 |
| 02 | 架构分层:我们为什么一定要这么做? | 全文已读:职责、局部扩展、原子能力、相邻依赖与成本逐单元核对 | done | 6 |
| 03 | 系统设计目标(一):如何提升系统性能? | 全文已读:目标、优化原则、分位值、容量拐点与瓶颈诊断逐单元核对 | done | 7 |
| 04 | 系统设计目标(二):系统怎样做到高可用? | 全文已读:度量、故障转移、超时、降级、限流、变更与配置服务目标逐单元核对 | done | 11 |
| 05 | 系统设计目标(三):如何让系统易于扩展? | 全文已读:容量线性、瓶颈转移、无状态、存储与业务拆分及团队代价逐单元核对 | done | 8 |
| 06 | 面试现场第一期 | 全文已读:EPUB此项仅标题,无正文 | done | 0 |
| 07 | 池化技术:如何减少频繁创建数据库连接的性能损耗? | 全文已读:建连成本、容量与失效、线程池队列和预热逐单元核对 | done | 9 |
| 08 | 数据库优化方案(一):查询请求增加时,如何做主从分离? | 精读:涵盖读写扩展与主从延迟问题 | done | 10 |
| 09 | 数据库优化方案(二):写入数据量增加时,如何实现分库分表? | 精读:分析数据分片的策略与约束 | done | 10 |
| 10 | 发号器:如何保证分库分表后 ID 的全局唯一性? | 精读:比较分布式 ID 生成方案的取舍 | done | 11 |
| 11 | NoSQL:在高并发场景下,数据库和 NoSQL 如何做到互补? | 精读:讨论存储选型与能力互补 | done | 12 |
| 12 | 缓存:数据库成为瓶颈后,动态数据的查询要如何加速? | 精读:说明缓存的性能价值与一致性代价 | done | 13 |
| 13 | 缓存的使用姿势(一):如何选择缓存的读写策略? | 精读:比较多种缓存读写模式 | done | 15 |
| 14 | 缓存的使用姿势(二):缓存如何做到高可用? | 精读:涵盖缓存集群可用性与故障处理 | done | 12 |
| 15 | 缓存的使用姿势(三):缓存穿透了怎么办? | 精读:从异常场景分析穿透及防护方案 | done | 12 |
| 16 | CDN:静态资源如何加速? | 精读:解释边缘分发的架构与调度机制 | done | 10 |
| A1 | 加餐:数据的迁移应该如何做? | 精读:提供架构变更中数据迁移的可执行方案 | done | 9 |
| 17 | 消息队列:秒杀时如何处理每秒上万次的下单请求? | 精读:分析削峰、异步化与队列堆积 | done | 7 |
| 18 | 消息投递:如何保证消息仅仅被消费一次? | 精读:涉及投递语义、幂等与一致性 | done | 11 |
| 19 | 消息队列:如何降低消息队列系统中消息的延迟? | 精读:分析端到端延迟来源与优化权衡 | done | 9 |
| 20 | 面试现场第二期 | 全文已读:当前EPUB只有标题,无面试正文 | done | 0 |
| U1 | 用户故事:从“心”出发,我还有无数个可能 | 全文已读:技术例子并入原卡,学习方法另保留 | done | 1 |
| T1 | 期中测试:10 道高并发系统设计题目自测 | 全文已读:只有测试入口,无题目正文 | done | 0 |
| 21 | 系统架构:每秒 1 万次请求的系统要做服务化拆分吗? | 精读:辨析拆分触发条件与成本 | done | 9 |
| 22 | 微服务架构:微服务化后系统架构要如何改造? | 精读:系统讲解微服务改造的配套能力 | done | 10 |
| 23 | RPC 框架:10 万 QPS 下如何实现毫秒级的服务调用? | 精读:解释 RPC 调用链与性能设计 | done | 14 |
| 24 | 注册中心:分布式系统如何寻址? | 精读:分析服务发现的一致性与可用性 | done | 12 |
| 25 | 分布式 Trace:横跨几十个分布式组件的慢请求要如何排查? | 精读:讲解链路追踪数据与定位流程 | done | 10 |
| 26 | 负载均衡:怎样提升系统的横向扩展能力? | 精读:比较负载算法与扩展性影响 | done | 12 |
| 27 | API 网关:系统的门面要如何做? | 精读:说明网关职责、边界与高可用设计 | done | 15 |
| 28 | 多机房部署:跨地域的分布式系统如何做? | 精读:涵盖跨地域容灾、延迟与数据一致性 | done | 11 |
| 29 | Service Mesh:如何屏蔽服务化系统的服务治理细节? | 精读:解释治理能力下沉的架构逻辑 | done | 13 |
| 30 | 给系统加上眼睛:服务端监控要怎么做? | 精读:构建指标选择、采集、处理和展示链路 | done | 12 |
| 31 | 应用性能管理:用户的使用体验应该如何监控? | 精读:讨论用户侧体验的量化与定位 | done | 13 |
| 32 | 压力测试:怎样设计全链路压力测试平台? | 精读:分析全链路压测的隔离、标记与风险控制 | done | 15 |
| 33 | 配置管理:成千上万的配置项要如何管理? | 精读:讲解配置发布、变更与一致性 | done | 8 |
| 34 | 降级熔断:如何屏蔽非核心系统故障的影响? | 精读:分析隔离故障的触发条件与代价 | done | 13 |
| 35 | 流量控制:高并发系统中我们如何操纵流量? | 精读:系统比较限流与流量调度方案 | done | 14 |
| 36 | 面试现场第三期 | 全文已读:当前EPUB只有标题,无面试正文 | done | 0 |
| 37 | 计数系统设计(一):面对海量数据的计数器要如何做? | 精读:从规模问题推导计数架构 | done | 13 |
| 38 | 计数系统设计(二):50 万 QPS 下如何设计未读数系统? | 精读:完整案例展示计数、存储与一致性取舍 | done | 14 |
| 39 | 信息流设计(一):通用信息流系统的推模式要如何做? | 精读:分析推模式的写放大与存储成本 | done | 11 |
| 40 | 信息流设计(二):通用信息流系统的拉模式要如何做? | 精读:分析拉模式的读放大并与推模式对比 | done | 14 |
| E1 | 结束语:学不可以已 | 全文已读:基础体系与案例迁移另保留 | done | 1 |
| S1 | 春节特别策划:高并发下如何发现和排查问题? | 精读:从真实故障场景组织发现与排查流程 | done | 9 |
| S2 | 春节特别策划:我们如何准备抵抗流量峰值? | 精读:整合容量评估、预案和流量治理 | done | 11 |
| T2 | 结课测试:高并发系统设计的相关知识,你都掌握了吗? | 全文已读:测试说明与外链入口,无题目正文 | done | 0 |
| spine项 | 类型 | 排除理由 |
|---|---|---|
0 / titlepage.xhtml |
封面 | 仅封面图与样式,无课程正文。 |
1 / text/part0000.html |
目录 | 章节链接索引,无独立论述。 |
228 / text/part0047.html |
名单 | 结课问卷获奖用户名单与致谢,无系统设计正文。 |
原书重新解包后,spine 共 240 项,其中封面、纯目录和获奖名单 3 项有明确排除理由;其余 237 项均在 _coverage.md 建立 pending 单元。新增简介 I1 行;历史 48 行缺当前规则的逐单元取舍记录,全部恢复 pending,保留旧卡数作为待核基线。首次写入的 Skill 版本 v8 保持原值。
| 序号 | 实践标题 | 实践方式 | 状态(pending/done) | 关联章节 | 产出 |
|---|---|---|---|---|---|
| 1 | [[复盘一次故障的证据时间线]] | 证据验证 | done | S1 | 脱敏的故障时间线与根因假设/反证对照表;仅分析已结束且有权查看的材料 |
| 2 | [[为一条服务链路做峰值预案推演]] | 真实任务 | done | S2 | 链路级峰值预案矩阵;只读推演,不执行压测、切流或配置变更 |
全书实践候选筛选已完成:保留两项有直接原文依据、可立即开始且不要求实际改动系统的计划——S1只读故障证据时间线与S2只读峰值预案推演。其余技术章节虽可延伸为源码阅读或系统设计练习,但当前没有明确授权的现实对象和经过核实的目标项目,且与两项既有实践目标重叠;不再新增候选,避免虚构现实场景或扩大卡片范围。所有计划均不代表实践已执行。
实践候选筛选:done
| 术语名 | 出现章节 | 一句话语境 |
|---|---|---|
| Elasticsearch | 18 | 用来做商品和店铺搜索,正文未讲索引或查询机制。 |
| 审核系统 | 18 | 作为消息队列解耦的外部系统被提到,未讲审核流程。 |
| Pulsar | 18 | 与 Kafka 0.11 并列提到生产端幂等,未展开序号去重的实现。 |
| 五彩石 | 21 | 作为淘宝架构演进项目被点名,正文未讲拆分过程。 |
| JMX | 30 | 作为 Java 中间件获取统计和监控数据的接口被举例,未展开其机制。 |
| 标题 | 类型(书/论文/框架/源码项目) | 出现章节 | 一句话语境 |
|---|---|---|---|
| Mcrouter | 框架 | 14 | Facebook 的缓存中间代理,正文只点名,未展开路由或高可用实现。 |
| 人月神话 | 书 | 21 | 用来说明团队沟通渠道约等于 n(n-1)/2,未展开书中其他论点。 |
| gRPC | 框架 | 23 | 作为 RPC 框架的例子出现,本讲未展开其内部设计。 |
| Dubbo | 框架 | 23 | 作为成熟 RPC 框架和源码阅读对象出现,未展开具体实现。 |
| Motan | 框架 | 23 | 在课程小结中作为成熟 RPC 源码阅读对象被点名,未展开机制。 |
| ZooKeeper | 框架 | 24 | 被列为注册中心候选,未展开其注册实现。 |
| etcd | 框架 | 24 | 被列为注册中心候选,未展开其实现机制。 |
| Nacos | 框架 | 24 | 被列为注册中心候选,未展开其实现机制。 |
| Eureka | 框架 | 24 | 以注册中心候选及批量摘除保护的类比出现,未展开内部设计。 |
| Zipkin | 框架 | 25 | 作为分布式追踪开源方案点名,未展开实现机制。 |
| Jaeger | 框架 | 25 | 作为分布式追踪开源方案点名,未展开实现机制。 |
| nginx_upstream_check_module | 框架 | 26 | 作为后端健康探测模块给出配置示例,未展开其内部实现。 |
| Ribbon | 框架 | 26 | 仅以响应时间加权策略为例,未展开框架实现。 |
| Kong | 框架 | 27 | 介绍基于 Nginx/Lua 的实现及团队选择背景;其性能排名是原文时点观点。 |
| Zuul | 框架 | 27 | 介绍过滤器链及 Zuul 1⁄2 的 I/O 模型差异,属于历史版本说明。 |
| Tyk | 框架 | 27 | 介绍 Go 实现、轻量定位与插件生态,未展开插件用法。 |
| Protobuf | 框架 | 29 | 作为跨语言友好序列化协议的例子,未展开其编码机制。 |
| Thrift | 框架 | 29 | 与 Protobuf 并列作为跨语言序列化协议示例,未展开协议细节。 |
| Cilium | 框架 | 29 | 仅提到可从 Socket 层转发以避开 iptables 的开销,未展开实现。 |
| OkHttp | 框架 | 31 | 用 EventListener 暴露网络请求阶段事件,举例计算 DNS 耗时。 |
| Filebeat | 框架 | 30 | 作为访问日志采集工具示例,未展开其配置与内部机制。 |
| Apache Flume | 框架 | 30 | 与 Fluentd、Filebeat 并列为日志采集工具示例,未展开实现。 |
| Fluentd | 框架 | 30 | 作为日志采集工具示例,未展开其配置与内部机制。 |
| Elasticsearch | 框架 | 30、31 | 配合 Kibana 查询服务端原始监控数据,也保存客户端 APM 原始记录。 |
| Kibana | 框架 | 30 | 用于展示和查询 Elasticsearch 中的原始监控数据,未展开用法。 |
| Spark | 框架 | 30 | 与 Storm 并列为消费监控消息并做流式处理的中间件示例。 |
| Storm | 框架 | 30 | 与 Spark 并列为消费监控消息并做流式处理的中间件示例。 |
| InfluxDB | 框架 | 30 | 作为按时间存储递增监控数据的时序数据库示例,未展开机制。 |
| OpenTSDB | 框架 | 30 | 作为监控数据时序存储示例,未展开内部设计。 |
| Graphite | 框架 | 30 | 作为监控数据时序存储示例,未展开内部设计。 |
| Grafana | 框架 | 30 | 连接时序数据库并绘制监控报表,未展开产品用法。 |
| GoReplay | 框架 | 32 | 被介绍为本机端口流量复制、存档并加速回放的轻型工具;版本能力未核验。 |
| HBase | 框架 | 32 | 与 MongoDB、Amazon S3 并列作为流量数据工厂的存储示例,未展开产品机制。 |
| MongoDB | 框架 | 32 | 作为流量数据工厂的 NoSQL 存储示例,未展开产品机制。 |
| Amazon S3 | 框架 | 32 | 作为流量数据工厂的云存储示例,未展开产品机制。 |
| Guava | 框架 | 35 | 作为使用令牌桶算法实现限流的Java库示例,未展开实现细节。 |
| Pika | 框架 | 37 | 作为支持以SSD承接冷数据的开源组件示例,原文建议了解其实现,未展开细节。 |
| SSDB | 框架 | 37 | 与Pika并列为SSD替代内存存储冷数据的开源组件示例,未展开细节。 |
| Memcached | 框架 | 38 | 与Redis并列为关注者帖子计数快照的缓存存储示例,未展开机制与版本能力。 |
| 问题标题 | 问题卡 | 解决方案卡(如有) | 出现章节 | 一句话说明 |
|---|---|---|---|---|
| 并发缓存余额更新丢失 | [[缓存改余额会丢失并发更新]] | [[余额更新应以数据库原子写为准]] | 13 | 两个请求基于同一旧余额计算并覆盖缓存,只保留一次加一;应以数据库为真源完成原子更新并失效缓存副本。 |
| 重试导致现金红包重复发放 | [[重试可能重复发放红包]] | [[入账去重需要业务身份]];[[版本冲突不能直接丢弃]] | 18 | 超时重传可能把已写入的红包消息再投递一次。去重要用业务消息标识并与处理同事务;乐观锁只防同版本重放,版本冲突不等于已入账。 |
| 必答项 | 状态 | 对应卡片/说明 |
|---|---|---|
| 服务拆分原则 | done | [[拆分让扩展针对局部]]、[[业务层按三维度拆分]]、[[拆分用协作成本换扩展性]]、[[拆分不由每秒请求数决定]]、[[应用扩容会打满数据库连接]]、[[用户服务收口数据库连接]]、[[公用能力下沉成独立服务]]、[[成本会成为架构决定因素]]、[[认证判断应留在用户服务]]、[[初拆服务宜粗不宜碎]]、[[先剥离独立的边界能力]]、[[按依赖方向安排拆分]]、[[服务边界要配团队边界]]、[[模块化可先于服务化]] |
| 通信机制 | done | [[消息会在三段链路上丢失]]、[[超时后只重传两到三次]]、[[处理完成后再提交消费进度]]、[[生产端按序号丢掉重复]]、[[分区约束同组消费者数]]、[[单消费者内用线程池并行]]、[[RPC封装远程调用]]、[[RPC调用经历四次编解码]]、[[五种IO模型区分处理阶段]]、[[序列化选型要看演进能力]]、[[统一入口屏蔽服务协议差异]]、[[Sidecar代理服务间通信]]、[[代理承接调用两端治理]]、[[数据面处理控制面下发策略]]、[[Nagle与延迟确认可能叠加]]、[[TCP_NODELAY减少等待]];覆盖同步RPC、异步消息及其确认/重试边界 |
| 一致性与事务权衡 | done | [[跨库事务成本随规模上升]]、[[异步复制用一致性换写入性能]]、[[主从延迟破坏写后读一致性]]、[[规避延迟优先消除即时回查]]、[[分片迫使跨库能力外移]]、[[本地缓存以短过期控制陈旧]]、[[缓存引入双写一致性风险]]、[[双写顺序无法保证并发一致]]、[[旁路写先落库再失效缓存]]、[[先删缓存会让旧值回填]]、[[先落库再删缓存仍有窄窗口]]、[[新数据回填缓存规避复制延迟]]、[[写回性能以丢失窗口为代价]]、[[漂移写入会留下脏值]]、[[重试可能重复发放红包]]、[[入账去重需要业务身份]]、[[版本冲突不能直接丢弃]]、[[幂等是多次与一次同结果]]、[[异地多活改为本地写入]]、[[复制与消息同步适用不同数据]]、[[用户归属机房改善读后写]]、[[缓存本地化需处理更新]];一致性模型、缓存/复制和消息处理边界均有对应章节覆盖 |
| 可观测性设计 | done | [[复制延迟必须被持续监控]]、[[命中率衡量缓存实际价值]]、[[同步延迟会把请求打回源站]]、[[CDN故障会放大成系统故障]]、[[条数堆积看不出等待时长]]、[[有队列就要监控堆积]]、[[追踪与监控回答不同问题]]、[[请求标识串联并发日志]]、[[追踪标识与调用片段分工]]、[[资源耗时并入调用链]]、[[采样控制追踪开销]]、[[四个黄金信号衡量服务健康]]、[[业务失败不一定返回错误码]]、[[RED压缩通用监控信号]]、[[组件专属指标补足通用信号]]、[[Agent从组件侧采集指标]]、[[埋点呈现调用方体验]]、[[先聚合埋点再上报]]、[[日志也是监控数据源]]、[[队列缓冲监控数据峰值]]、[[监控处理链路分成查询与聚合]]、[[报表按诊断层次分工]]、[[监控应覆盖业务故障信号]]、[[APM以用户体验为中心]]、[[服务端看不到未到达请求]]、[[LocalDNS会改变访问路径]]、[[SDK采集后采样上报]]、[[APM消息按层组织]]、[[RSA保护随机数据密钥]]、[[原书以摘要比对发现篡改]]、[[请求事件可分段计时]]、[[端到端耗时拆成请求阶段]]、[[客户端网络数据反映访问体验]]、[[端侧监控补齐CDN链路盲区]]、[[业务事件扩展体验监控]]、[[APM数据汇聚成客户端报表]];核心信号、采集、处理、定位与客户端体验均有对应卡片 |
| 容错设计 | done | [[故障应被当作常态]]、[[故障转移区分对等与主备]]、[[超时用局部失败防止雪崩]]、[[降级牺牲非核心保主链路]]、[[限流拒绝超量请求保系统]]、[[运维能力是存储选型条件]]、[[命中率微降打穿数据库]]、[[虚拟节点摊平故障流量]]、[[从库优先读主库兜底]]、[[副本组承接极端读带宽]]、[[仲裁通过后提升从节点]]、[[不存在的键会反复穿透]]、[[空值短过期挡住重复穿透]]、[[先问布隆再决定是否回源]]、[[热点失效会引发狗桩效应]]、[[分布式锁只放行一次回源]]、[[网关承接跨服务共性策略]]、[[线程池隔离阻止故障扩散]]、[[网关扩展需要隔离机制]]、[[治理策略不应绑定单一语言]]、[[边车代理抽离治理细节]]、[[代理承接调用两端治理]]、[[数据面处理控制面下发策略]]、[[Sidecar可代服务注册]]、[[多语言场景适用Mesh]]、[[慢依赖如何引发服务雪崩]]、[[为何慢服务比宕机更危险]]、[[熔断如何阻断连续失败]]、[[断路器用半开探测恢复]]、[[成功调用可重置失败计数]]、[[恢复计时后再试探依赖]]、[[降级以牺牲功能换可用性]]、[[功能开关如何快速关闭非核心依赖]]、[[读故障时返回缓存降级数据]]、[[轮询降级用降低频率减负]]、[[写故障时异步化换可用性]]、[[降级开关须在低峰演练]]、[[发布开关提供快速回滚通道]]、[[高峰流量为何需要限流]]、[[限流如何守住服务承载边界]]、[[系统与用户维度都可限流]]、[[TCP窗口反馈接收能力]]、[[固定窗口如何统计请求数]]、[[窗口边界会漏掉瞬时突发]]、[[滑动窗口统计滚动时间段]]、[[滑动窗口仍不能塑形瞬时流量]]、[[漏桶把突发排队平滑输出]]、[[令牌桶以令牌约束请求速率]]、[[令牌桶为低延迟保留突发余量]]、[[分布式令牌计数引入远程开销]]、[[批量领取令牌减少远程请求]]、[[限流阈值需用容量测试校准]];故障假设、隔离、恢复、保护及流量治理均有对应卡片 |
| 扩展性瓶颈与应对 | done | [[单机与集群如何选择]]、[[架构演进由问题驱动]]、[[分层支持局部扩展]]、[[串行比例限制并行加速]]、[[拐点标记系统容量边界]]、[[扩容会转移系统瓶颈]]、[[无状态服务更易扩展]]、[[存储先按业务再水平拆分]]、[[读写分离只扩展读流量]]、[[从库数量受主库复制能力限制]]、[[数据分片分摊存储与写入]]、[[垂直拆分按业务隔离故障]]、[[垂直拆分不解决单域膨胀]]、[[哈希分片追求数据均匀]]、[[时间分片聚集近期查询]]、[[查询缺少分区键会全局广播]]、[[分片时机需覆盖迁移成本]]、[[分片使自增主键失去全局唯一]]、[[位段宽度是容量预算]]、[[发号器部署权衡本地与集中]]、[[发号能力随规模逐步独立]]、[[NoSQL补足关系数据库边界]]、[[NoSQL内建分布式协作角色]]、[[自动再平衡降低扩容迁移成本]]、[[分布式缓存承接动态请求]]、[[本地缓存隔离极端热点]]、[[多级缓存优先拦截上层请求]]、[[取余分片扩缩时集体失效]]、[[一致性哈希只漂移相邻键]]、[[批量扇出限制分片规模]]、[[静态资源关键是就近访问]]、[[CDN把静态资源分到多地]]、[[负载均衡隐藏节点扩容]]、[[客户端分流贴近调用方]]、[[轮询分流忽略容量差异]]、[[加权轮询表达容量差异]]、[[动态分流利用运行信号]]、[[多机房共享数据承接流量]]、[[同城双活优先本地读写]]、[[异地多活改为本地写入]]、[[峰值治理是四类流量操控]];扩展瓶颈、分片、缓存、负载分流、机房和容量预案均有对应章节覆盖 |
| 部署与发布策略 | done | [[灰度发布分段暴露变更风险]]、[[多机房共享数据承接流量]]、[[跨机房往返会放大延迟]]、[[同城双活优先本地读写]]、[[切主使备用机房承接写入]]、[[同机房服务组减少远程调用]]、[[异地多活改为本地写入]]、[[用户归属机房改善读后写]]、[[容灾范围决定部署复杂度]]、[[降级开关须在低峰演练]]、[[发布开关提供快速回滚通道]]、[[容量资源应在高峰前备齐]];部署拓扑、流量切换、回滚与峰值准备均有对应章节覆盖 |
| 维度 | 覆盖状态(已覆盖/补充生成/未覆盖) | 关联卡片标题或未覆盖理由 |
|---|---|---|
| 服务拆分原则 | 已覆盖 | [[按依赖方向安排拆分]]、[[服务边界要配团队边界]]、[[初拆服务宜粗不宜碎]] |
| 通信机制 | 已覆盖 | [[RPC封装远程调用]]、[[消息会在三段链路上丢失]]、[[异步复制用一致性换写入性能]];覆盖同步调用、消息链路与异步复制的机制和代价 |
| 一致性与事务权衡 | 已覆盖 | [[先落库再删缓存仍有窄窗口]]、[[幂等是多次与一次同结果]]、[[异地多活改为本地写入]] |
| 可观测性设计 | 已覆盖 | [[四个黄金信号衡量服务健康]]、[[追踪与监控回答不同问题]]、[[客户端监控补足服务端盲区]]、[[全链路压测用于系统化找瓶颈]] |
| 容错设计 | 已覆盖 | [[慢依赖如何引发服务雪崩]]、[[断路器用半开探测恢复]]、[[功能开关如何快速关闭非核心依赖]]、[[降级策略应提前验证]] |
| 扩展性瓶颈与应对 | 已覆盖 | [[扩容会转移系统瓶颈]]、[[分片时机需覆盖迁移成本]]、[[切流方式换速度和依赖]]、[[峰值治理是四类流量操控]] |
| 部署与发布策略 | 已覆盖 | [[灰度发布分段暴露变更风险]]、[[发布开关提供快速回滚通道]]、[[同城双活优先本地读写]]、[[容量资源应在高峰前备齐]] |
核对结论:七项均有对应章节卡片覆盖,S1/S2特别策划补充了可观测性、容错、扩展性和部署规划内容;没有为凑清单而新增卡。以上为内容覆盖核对,不替代S3/S4的准确性、证据与质量审查。
本节新增卡片对系统架构类必答项的增量映射如下;原清单仍标 partial,最终状态需待全书 S3/S4 核验:
| 必答项 | 本讲新增卡片 | 说明 |
|---|---|---|
| 一致性与事务权衡 | [[读扩展为何转向Redis]] | 数据库与缓存双写不一致,案例转为Redis计数存储;持久性与恢复策略未在本讲展开。 |
| 扩展性瓶颈与应对 | [[计数系统先刻画业务要求]]、[[计数应与微博主体分开]]、[[小规模先用MySQL]]、[[分片应避开时间热点]]、[[读扩展为何转向Redis]]、[[消息合并减少计数写压]]、[[Redis计数内存放大]]、[[整数键可避免字符串开销]]、[[紧凑布局减少指针开销]]、[[双重散列探测冲突位置]]、[[多个计数共享微博ID]]、[[冷热分层降低全内存成本]]、[[优化应围绕真实痛点]] | 覆盖计数读写、分片、内存与冷热分层的演进取舍;均为原书案例,不构成当前产品能力或持久化保证。 |
| 容错设计 | [[缓存淘汰会把未读数归零]] | 原书在准确性要求较低的场景接受缓存淘汰导致计数归零;这是有条件的业务取舍,不是通用容错建议。 |
| 扩展性瓶颈与应对 | [[点对点未读可用通用计数]]、[[广播通知不宜逐用户扇出]]、[[全量扫描用户库代价高]]、[[离线名单仍有扇出与闲置浪费]]、[[共享通知列表用已读游标]]、[[清理闲置游标以节省内存]]、[[全员红点用全局时间戳]]、[[共享数据加用户游标可替代计数]]、[[大V发布会放大粉丝扇出]]、[[轮询把未读接口变成高QPS]]、[[关注者总数差减快照]]、[[查看时刷新关注计数快照]]、[[关注变更会让未读快照失准]]、[[缓存淘汰会把未读数归零]] | 覆盖通知广播、游标、推拉扩展与一致性权衡;50万QPS等数字仅作原书历史案例,不作为通用容量基准。 |
| 扩展性瓶颈与应对 | [[信息流聚合挤压响应时间]]、[[推模式把微博写入粉丝收件箱]]、[[大粉丝量拖慢发布响应]]、[[并行消费缓解收件箱写入峰值]]、[[写优化存储牺牲查询与删除]]、[[Feed与时间线按不同键分片]]、[[收件箱副本推高存储成本]]、[[分组时间线再次放大推送量]]、[[取消关注与删帖清理代价高]]、[[读取时过滤失效关注与内容]]、[[推模式适合粉丝数受限场景]] | 覆盖推模式的读取聚合、扇出写入、存储代价和适用边界;粉丝规模、请求量等数字仅为原书案例。 |
| 扩展性瓶颈与应对 | [[拉模式聚合关注者发件箱]]、[[拉模式消除逐粉丝推送]]、[[关注关系放大拉取聚合]]、[[按浏览窗口裁剪缓存数据]]、[[批量并行读取后本地归并]]、[[聚合请求会耗尽缓存带宽]]、[[缓存副本分摊主节点带宽]]、[[推拉结合降低存量改造成本]]、[[大V只推送给活跃粉丝]]、[[用近期操作定义活跃用户]]、[[有界活跃粉丝表控制扇出]]、[[用户活跃时补入大V名单]]、[[异步补齐保证信息流完整]]、[[推拉结合需权衡活跃态维护]] | 对照纯拉与推拉结合的读写放大、缓存边界和维护成本;97%、关注上限、QPS与粉丝阈值均为原书案例参数。 |
本节只记录本章对系统架构类必答项的增量,不替代后续S3/S4的全书核验:
| 必答项 | 本章新增卡片 | 说明 |
|---|---|---|
| 可观测性设计 | [[客户端监控补足服务端盲区]]、[[修复后压测验证问题是否复现]]、[[从故障表象推理根因]]、[[按时间和节点归纳故障共性]]、[[后台任务可能造成周期性抖动]]、[[时钟偏差会误判节点心跳]]、[[慢请求引发Redis淘汰循环]]、[[CPU排查要结合线程和调度信号]]、[[堆外内存泄漏要看进程映射]] | 从客户端/压力测试发现问题,并用监控、日志、资源与时间/节点特征定位;工具与Redis 3.0案例均保留历史版本边界。 |
本节只记录本章对系统架构类必答项的增量,不替代后续S3/S4的全书核验:
| 必答项 | 本章新增卡片 | 说明 |
|---|---|---|
| 可观测性设计 | [[入口带宽也会成为瓶颈]]、[[分层日志帮助定位慢请求层]]、[[全链路压测用于系统化找瓶颈]] | 从入口带宽、分层日志和全链路压测补充峰值期的瓶颈发现路径。 |
| 容错设计 | [[降级策略应提前验证]]、[[峰值治理是四类流量操控]] | 记录降级的验证要求及切流/扩容/降级/限流的适用边界,不构成具体生产操作指令。 |
| 扩展性瓶颈与应对 | [[业务增长前要准备峰值预案]]、[[调用链盘点不能漏掉依赖组件]]、[[入口带宽也会成为瓶颈]]、[[跨机房线路也需容量评估]]、[[全链路压测用于系统化找瓶颈]]、[[切流方式换速度和依赖]]、[[扩容要覆盖服务与基础设施]]、[[容量资源应在高峰前备齐]] | 覆盖从调用链建模、网络与依赖瓶颈到切流和扩容的容量准备;数字与架构均为原书场景,不泛化到其他系统。 |
| 部署与发布策略 | [[切流方式换速度和依赖]]、[[容量资源应在高峰前备齐]] | 增补多机房流量切换及高峰前预置资源的规划取舍;实际拓扑和DNS收敛需针对目标环境验证。 |
轻量模式;237项实际正文的既有阅读证据已核验,必要范围已回读;442张知识卡(历史440+新增学习方法2),2项实践计划。每卡唯一主要位置及真实原文出处见整书笔记。未执行笔记复核、独立审查及审查结果优化。历史审查报告不代表本次审查结果;已知必要准确性问题已按原文处置。
从本书的主题进入跨书阅读,对照其他书籍的讲解。下方数量包含主题关联的全部卡片与书籍。
主题索引
比较关系型、键值、列式、文档与全文检索等存储模型的特性取舍与适用场景。
主题索引
比较 GFS、HDFS、BigTable、MongoDB、RabbitMQ 等系统的租约、写确认、副本同步、选主与脑裂处理。
主题索引
比较微服务拆分的边界依据、粒度与非业务因素,以及从单体演进和持续重组的策略。
主题索引
比较主备、主从、集群、分区与异地多活等高可用架构的适用范围、数据同步与代价。
主题索引
比较限流、减载、退避重试、分级依赖与防御成本的过载应对手段。
主题索引
时序模型与拉推采集、黄金指标与分位、探针与 APM、容量与负载、监控分层。
主题索引
比较缓存穿透、雪崩、热点等问题的成因与应对方案。
主题索引
比较冗余容量、故障域、逻辑与物理资源解耦等容量规划与调度方法。
主题索引
比较分库分片主键选择、分布式数据库选型与跨库关联查询的解法。
主题索引
比较服务发现范式、注册中心的 CAP 取舍与实现路线、网关与 BFF,以及地域与区域的流量边界。
主题索引
比较边车代理、通信可靠性演进、流量劫持、xDS 与控制平面产品,以及网格层的安全与标准化。
主题索引
Trace/Span 模型、标识与上下文传播、采样取舍、OpenTelemetry 与采集器管道。
主题索引
比较分层、洋葱与六边形架构如何隔离核心业务逻辑与外部技术细节,以及各层职责与调用规则。
主题索引
比较负载均衡的分层组合方式与各类分配算法的取舍。
主题索引
跨进程互斥的分布式锁实现与取舍,以及全局唯一 ID 的生成方案和分布式计数。
主题索引
比较水平复制、按业务拆分与数据分片等不同维度的扩展手段及其适用问题。
主题索引
比较日志段与索引、页缓存与零拷贝、批次与压缩、保留清理与压实,以及副本放置对读写路径与堆积的影响。
主题索引
比较至少一次、最多一次、恰好一次与幂等的组合,确认、重投、死信与补偿怎样把「不丢不重」落成可实现的条件。
主题索引
比较配置外置到版本仓库、启动配置与业务配置的分离、按应用与环境匹配资源、敏感配置加密、配置服务高可用与消息总线动态刷新的做法与取舍。
主题索引
比较交换器与绑定、主题与标签过滤、订阅与广播扇出,以及 vhost、联邦与协议网关等多租户和跨集群寻址方式。
主题索引
比较排查系统问题时的假设管理、基线对比与复现方法。
主题索引
比较远程方法调用中代理、消息定界、编解码与传输分层,以及泛化调用如何复用框架链路。
主题索引
解耦、异步、削峰、缓冲四类价值各自的机制与代价:什么时候值得用队列,什么情况下队列并不救你,以及队列把复杂度转移到了哪里。
主题索引
拉得动吗:推模式与拉模式、长轮询、预取与批量、流控与反压、积压阈值与监控、扩缩容与优先级。
主题索引
比较全序与分区内有序的边界、序号与单写者怎样维持顺序,以及延时消息、时间轮和迟到事件的处理方式。
主题索引
消费到哪:位移为什么要持久化、提交的是下一位、同步与异步提交的取舍、重置与回溯、位移保留与清理、滞后量怎么算。
主题索引
谁在消费:消费组与队列的区别、竞争消费者、分区分配策略、再均衡的四阶段与代价、并行度受分区数约束。