此笔记位置已失效,请从目录继续阅读。
全书导读
大型分布式系统把工作交给多个会发生故障的部件。理解可靠性,不只是列出组件,更要说明部件之间怎样调用、怎样一致地修改数据、怎样识别故障,以及怎样在故障后继续提供服务。本书把这些问题放在架构演进的背景下,逐步展开到基础设施和技术决策。
阅读以下笔记可以先建立每类机制解决的问题,再进入卡片理解细节。出版于2021年的产品格局、接口与操作示例保留其历史语境,部署前须按实际版本核对。原书与缓存已逐字节匹配;本次按轻量模式重新通读并生成,未执行生成后的笔记复核、独立审查及审查结果优化。
全书主线
架构史首先提出一个贯穿全书的矛盾:拆分能获得自治和隔离,却增加远程协作的成本。第2至5章建立通信、事务、请求分流和安全的基础;第6至10章再处理共识、发现、治理与可观测性,让独立服务能够合作。第11至15章讨论容器、网络、存储、调度和服务网格,说明哪些重复责任可以交给基础设施。第16章回到组织与业务条件,决定拆分是否值得,附录用相同书店业务展示不同运行方式。
这些机制相互配合而非相互取代:共识不等于业务事务,故障隔离不等于数据正确,自动重建也不能恢复未持久化的业务事实。阅读时应持续追问一种技术解决了什么、又把哪些责任交给了别的组件。
自序
可靠性是系统整体在部件出错后仍能提供服务的能力。单个进程、机器乃至开发过程都可能失误;只要求每个部件不出错,无法在规模扩大后持续保证整体可靠。“凤凰”用部件能够退出、替换和重建来解释另一条路径:让故障成为架构预先处理的正常事件。
这不意味着可以放弃代码质量。它把个体质量与整体恢复分开考虑:前者减少故障,后者限制故障传播并恢复能力。Fenix’s Bookstore用同一书店需求演示不同架构,因此用于比较技术,不代表如此简单的业务必需部署全部组件。后文的隔离、流量治理和不可变基础设施,都围绕可替换部件怎样合作展开。
相关知识卡:用可替换部件构建可靠系统。
原书依据 · 1 处
前言
全书研究大型分布式系统如何可靠地运作,主要面向具有开发基础的读者。第一部分借架构史说明选择的动因,第二部分讨论远程访问、事务、分流和安全这些跨架构风格的问题,第三部分处理服务拆分以后新增的协作困难,第四部分说明基础设施如何承接这些责任,最后再讨论何时采用微服务。
五部分构成从问题到机制、再到决策的阅读路线,但各部分内的章节没有严格的线性依赖。配套的五种书店工程保持业务目标相近,借此观察技术实现差异。初学者可先运行附录A的示例,形成整体认识,再回到技术机制;运行示例和理解机制相互支撑,不能把工程跑通等同于理解架构。
第1章 服务架构演进史
架构风格是安排模块、服务和运行边界的方式。认识架构史的目的,是解释某种组织方式为什么在当时有效、后来又暴露了什么问题。以下六个时期围绕性能、自治、协作与复杂度反复权衡;它们帮助理解选择条件,并非宣称后出现的架构在所有场景都优于前者。
相关知识卡:服务架构六个时代。
原书依据 · 1 处
1.1 原始分布式时代
原始分布式尝试用多台机器合作,突破单机算力限制。DCE把远程调用、文件访问、服务认证等能力组织成体系,希望开发者可以像访问本地资源那样使用远程服务。“透明”在这里意味着调用接口的差异被隐藏,并不意味着网络的代价消失。
远程调用要处理位置发现、参数传输、权限、超时和局部故障,成本与本地调用相差很大。当开发者不得不把无关方法打包、故意延长单次工作以摊薄网络开销时,简单接口背后的复杂性重新暴露出来。教训是先核算分布式带来的收益和额外责任,不能把技术上可拆分当成应当拆分的理由。
相关知识卡:能分布式不等于该分布式。
原书依据 · 1 处
1.2 单体系统时代
单体应用把功能组合在一个程序和运行进程中,但内部仍可分层、拆模块,也可部署多个副本分担流量。它通过进程内调用获得简单、高效的通信,对于规模较小的应用,这些特点能明显降低开发和维护成本。
真正的限制在运行边界:模块共享进程资源,某处泄漏、阻塞或死循环可能拖累其他模块,不能像独立服务那样只停止和替换局部功能。规模扩大后,独立升级和故障隔离的需求变得更强,进程内调用的优势才需要与这些约束一同比较。这里建立的自治与隔离问题,将成为服务拆分的主要理由。
相关知识卡:单体短板在自治隔离。
原书依据 · 1 处
1.3 SOA时代
烟囱式架构把系统彻底分开,却难以共享人员、权限等主数据;微内核把公共能力收进核心,以插件扩展业务,但插件间不直接交互的假定在企业系统中常不成立;事件驱动通过事件管道让独立处理者协作。三种方式展示了拆开后仍需建立协作机制这一共同问题。
面向服务架构SOA进一步把调用、发现、治理与封装纳入标准体系。SOAP及其协议族处理通信,企业服务总线ESB承担消息中介,相关标准还试图规范数据访问和业务编排。这种统一性能够支撑异构系统集成,却也叠加了规范、工具与人员学习成本。其局限说明:体系完备与普遍易用不是同一目标。
相关知识卡:SOA前的三次拆分;SOA败于过度标准化。
原书依据 · 2 处
1.4 微服务时代
微服务把应用组织为围绕业务能力的独立进程,通过轻量通信和自动化部署协作。服务边界同时影响团队边界:若一个业务能力总要跨团队协同,沟通成本会推动产品与团队结构相互适应。服务团队既拥有技术选择权,也承担产品从开发到运行的长期责任。
数据分散管理使各领域能按自身需要建模,例如销售看价格、仓储看库存,减少共享模型引起的牵制;代价是跨服务一致性更难。强终端弱管道则让业务判断留在服务端点,避免通信总线承载所有复杂功能。容错设计接受服务会失败,演进设计接受服务将被替换,自动化让大量服务的交付和恢复可操作。
这种自由降低了单个服务必须背负的统一技术负担,却没有消除注册发现、治理和事务问题;它们重新成为架构师要按场景做的选择。因此微服务的价值要连同组织能力和运维成本一起衡量,不能只数拆出了多少服务。
相关知识卡:团队与服务边界相互塑造;服务团队负责产品全周期;业务能力留在服务端点;好服务应当能够被替换;服务数量要求交付自动化;微服务把决策交还架构师;数据去中心化的取舍。
1.5 后微服务时代
当容器、网络和存储可以被程序化管理,基础设施就有机会像应用代码一样灵活地响应变化。Kubernetes等编排系统把副本管理、发现和恢复的一部分责任移出业务代码,使开发团队更专注业务。这是本节所谓后微服务时代的主要变化。
但容器粒度的控制未必知道某一个接口是否出错:同一服务的B1正常、B2失败时,切断整个容器会连累B1。服务网格以边车代理接管通信,在数据平面处理请求,并根据控制平面下发的规则实施认证、度量和流量治理。它把更细的管理能力移到应用之外,但不能据此推论网络成本或所有分布式困难都已消失。文中产品竞争、组件名称及未来趋势,是出版时的判断。
相关知识卡:边车代理接管治理。
原书依据 · 1 处
1.6 无服务时代
无服务把业务函数与数据库、队列等后端设施交给云平台托管。后端即服务BaaS提供通用技术能力,函数即服务FaaS负责运行业务代码;“无服务”指开发者减少管理服务器的责任,而不是没有服务器。
按需运行与按量计费减少闲置资源,但也引入函数生命周期、状态存放和启动延迟等约束。书中因而倾向无状态、短连接、事件驱动的工作,并提醒复杂有状态、长连接或低延迟场景要谨慎评估。具体启动时间与产品能力受版本影响。无服务与微服务可以组合:前者安排运行设施,后者安排业务服务边界,它们没有必然的替代关系。
相关知识卡:无服务的适用边界。
原书依据 · 1 处
第2章 访问远程服务
远程服务把程序的协作范围从单机推进到网络。即使不是微服务系统,浏览器、移动端与服务器之间也要远程交互。因此理解远程调用的意义,是认识跨越进程和网络后新增的约束,再讨论具体协议,不能只因调用语法像本地方法便忽略实际通信。
2.1 远程服务调用
RPC最初追求让程序像调用本地方法一样调用远程能力,但它不是一个统一且万能的具体协议。要比较框架,须先明白它们共同处理的数据、通信和接口定位问题,以及各自优化的目标。本节从进程通信的历史与成本展开,为后面的取舍建立共同坐标。
2.1.1 进程间通信
本地调用依靠同一地址空间传递参数与结果,还依靠语言规则找到目标方法。跨进程后,本进程的栈地址对另一进程无效;跨语言后,方法签名也不再天然统一。IPC提供管道、信号、信号量、消息队列、共享内存和套接字等协作手段:它们的信息容量、同步能力和是否可跨主机各异。本机套接字可避开远程网络栈成本,但不能由此推断跨机同样廉价。
本地调用的两个前提进一步展开相关机制和边界。
六种进程间通信进一步展开相关机制和边界。
原书依据 · 2 处
2.1.2 通信的成本
套接字统一接口能隐藏通信细节,却不能消除网络的不可靠、时延、带宽和管理边界。把RPC完全伪装成本地调用会鼓励过于细碎的交互,并让异常和结果未知难以处理。分布式计算八种谬误把这些隐藏假设逐一列出,提醒设计者:调用语法可统一,故障语义与成本仍必须显式考虑。
分布式计算八宗罪进一步展开相关机制和边界。
原书依据 · 1 处
2.1.3 三个基本问题
RPC共同解决三个问题。表示数据要让不同语言和字节序的参数转换为双方能理解的序列;传递数据要约定端点间如何交换调用、异常、安全等信息;表示方法要有跨语言的名字或接口描述。序列化、Wire Protocol、IDL分别侧重这些问题,不能因为框架用了同一种传输协议就认为接口与数据格式也相同。
RPC的三个基本问题进一步展开相关机制和边界。
原书依据 · 1 处
2.1.4 统一的RPC
早期通用RPC试图跨操作系统、跨语言乃至支持远程对象。CORBA以复杂描述和代理实现换取普适性,却使实现成本与互通困难突出;Web Service用XML与一组附加协议覆盖更多需求,又承受信息冗余和学习负担。这里的结论是简单、普适与高性能之间存在取舍,标准覆盖更多问题不必然使开发和运行更轻松。
CORBA败于复杂进一步展开相关机制和边界。
简单普适高性能难兼得进一步展开相关机制和边界。
原书依据 · 2 处
2.1.5 分裂的RPC
后来的RPC框架各有侧重:有的保留对象模型,有的提高序列化效率和信息密度,有的牺牲功能以简化浏览器使用。插件化把部分序列化、传输选择留给使用者,让框架集中支持注册、均衡和观测,缓和固定选择的约束。DDS与WCF作为后续发展例子表明,早期技术的局限也可通过场景收敛或工具链改进来修补。
RPC框架的发展方向进一步展开相关机制和边界。
WCF统一远程调用体验进一步展开相关机制和边界。
原书依据 · 2 处
2.2 REST设计风格
REST与RPC的抽象对象不同:RPC围绕可调用的方法,REST围绕可标识的资源和统一操作。REST是一种架构风格,不能当成另一份RPC报文协议来比较。浏览器的通用HTTP支持有利于资源式接口,追求传输控制或远程对象的场景又有不同需求;选择应取决于实际边界和团队的建模能力。
REST与RPC的本质差异进一步展开相关机制和边界。
原书依据 · 1 处
2.2.1 理解REST
资源是要表达的信息,表征是HTML、JSON等交互形式;状态是理解一次操作所需的上下文,转移是应用在交互中进入新的状态。客户端每次提供所需上下文,可减少服务端保存会话的要求。统一接口用通用操作作用于资源,超文本驱动则让响应告知下一步可用动作;自描述消息让接收者知道如何解释内容。它们共同解释通用客户端如何与未预装专用业务流程的服务协作。
REST四个术语进一步展开相关机制和边界。
超文本驱动后续交互进一步展开相关机制和边界。
原书依据 · 2 处
2.2.2 RESTful的系统
REST六项约束分别处理关注点与依赖:客户端和服务端分离,服务端不保留请求间会话上下文,响应可按声明缓存,中间层对调用者透明,资源采用统一接口,并可选按需发送执行代码。无状态提高扩展性,却可能增加请求冗余,缓存和分层用来缓解成本。统一接口将多种业务行为归入资源操作,降低逐个学习方法的负担;这需要更高抽象能力,也不表示所有实际系统都能完全无状态。
无状态与可缓存的张力进一步展开相关机制和边界。
统一接口降低学习成本进一步展开相关机制和边界。
按需代码扩展客户端进一步展开相关机制和边界。
2.2.3 RMM
RMM把REST接口的演进分为四级:以单一服务入口调用动作,给资源独立身份,使用HTTP方法与状态码表达统一语义,再由响应中的超媒体链接驱动后续操作。医生预约例子说明,资源ID让调用围绕对象,标准状态码让通用错误更易处理,链接使客户端减少硬编码后续地址。级别是理解设计依赖的工具,不能仅看URL里是不是名词就判定接口质量。
REST成熟度模型进一步展开相关机制和边界。
原书依据 · 1 处
2.2.4 不足与争议
面向资源不等于只能机械映射数据库CRUD;恢复删除可通过任务或资源状态表达,也可按约定使用自定义动作。事务协调、可靠交付等能力并不会因为使用REST自动出现:结果未知时是否能重试取决于幂等性。部分字段与批量操作常需额外接口设计,GraphQL用明确查询协议表达数据需求,但也引入客户端协议适配成本。讨论局限时需区分HTTP未提供的能力与业务本身必须设计的保障。
REST事务局限的根源进一步展开相关机制和边界。
REST部分与批量处理短板进一步展开相关机制和边界。
原书依据 · 2 处
第3章 事务处理
事务服务于数据一致性,原子性保证一组修改整体生效,隔离性控制并发干扰,持久性保证提交结果可恢复。单一数据源能统一感知冲突和排序,跨数据源却缺少共同裁决者。书中用扣款、出库、收款这三项关联修改对比四类部署场景:相同业务不变量,在不同边界下需要不同协调机制。
内部与外部一致性进一步展开相关机制和边界。
原书依据 · 1 处
3.1 本地事务
本地事务依赖一个资源管理器的真实能力,应用中的开始、提交或回滚接口只是一层入口,不会给不支持事务的数据引擎凭空增加事务语义。理解其保障要下沉到数据库日志、恢复和并发控制。ARIES是后续讨论原子性、持久性与隔离实现的重要理论背景,而不是仅靠应用注解就能替代的工作。
本地事务依赖数据源进一步展开相关机制和边界。
原书依据 · 1 处
3.1.1 实现原子性和持久性
磁盘写入有中间状态,崩溃可能发生在事务完成前或完成后:前者要求撤销已经写入的部分,后者要求重做尚未写入的部分。提交日志先安全记录意图与提交决定,再修改实际数据;影子分页则保留旧页、修改副本,最后切换引用。WAL进一步允许未提交的脏页提前写出,用Undo保护回滚,用Redo保护已提交结果,NO-FORCE与STEAL分别刻画提交时刷页和提前刷页的策略。恢复操作还需能承受再次崩溃。
Commit Logging进一步展开相关机制和边界。
WAL的FORCE与STEAL进一步展开相关机制和边界。
影子分页切换引用进一步展开相关机制和边界。
未提交落盘留下半笔账进一步展开相关机制和边界。
已提交未落盘丢账进一步展开相关机制和边界。
3.1.2 实现隔离性
隔离处理并发事务之间的干扰。锁可保护单条数据,也可保护范围防止新增记录改变查询集合;两阶段锁约束获取和释放的顺序。书中用锁持有时长解释脏读、不可重复读和幻读,但具体数据库可能借助多版本机制实现更细的行为。MVCC保留不同版本以减少读取与写入互相阻塞;版本可见性必须按实现规则判定。写写竞争仍要协调,乐观策略是否划算取决于冲突率。
锁与两阶段锁进一步展开相关机制和边界。
隔离级别看锁持有时长进一步展开相关机制和边界。
MVCC读不加锁进一步展开相关机制和边界。
原书依据 · 3 处
3.2 全局事务
多个数据源依次独立提交,会出现前面的修改已提交、后面的失败却无法共同撤销的问题。XA定义事务管理器与资源管理器的协作,2PC先收集准备结果,再持久化统一决定并通知各参与者;等待决定期间资源不能随意释放。代价是阻塞、远程往返与恢复协调。3PC增加询问阶段并引入超时行为,减少某些等待与回滚浪费,但在网络分区下也可能让不同节点作出不同判断,不能当作消除全部风险的替代品。
XA全局事务分工进一步展开相关机制和边界。
两段式提交与缺陷进一步展开相关机制和边界。
三段式提交的得失进一步展开相关机制和边界。
多库顺序提交留半笔账进一步展开相关机制和边界。
3.3 共享事务
多个服务连接同一物理数据库,不等于自然共用同一个事务连接。要让跨进程操作落进一个本地事务,理论上可通过交易服务器按事务ID集中使用连接,或让消息消费者统一写库;这又增加了协调中介和耦合。书中质疑这种共享事务作为常规方案,因为数据库本已是伸缩瓶颈,拆服务后仍强依赖共库需重新解释拆分收益。
共享事务是伪需求进一步展开相关机制和边界。
原书依据 · 1 处
3.4 分布式事务
这里“分布式事务”特指多个服务共同访问多个数据源,与前文单服务协调多个资源的范围区分。服务各自自治、网络又可能失联,使单一数据库内的隔离与恢复保障无法直接延伸到整个调用链。后面转而讨论允许中间状态、通过重试或补偿达到最终结果的柔性事务。
3.4.1 CAP与ACID
网络分区时,要求每个请求及时响应与要求所有响应都体现同一最新状态会发生冲突。书中用余额和库存副本滞后说明:允许不同分区继续处理,可能发生超额消费或超售;等待同步则可能拒绝或延迟交易。最终一致性允许暂时差异,但需要在更新停止后收敛,绝不等于允许资金错误无期限存在。可用性工程指标与CAP的响应要求、数据库约束一致性与副本线性一致性应分别理解。
CAP的三类选择进一步展开相关机制和边界。
BASE与最终一致性进一步展开相关机制和边界。
余额副本滞后超额消费进一步展开相关机制和边界。
3.4.2 可靠事件队列
可靠事件队列把第一步业务修改和待发送消息放进同一个本地事务,避免业务完成却丢了后续工作。消息服务持续投递未完成事项,收到应答再改变状态;消息或应答丢失都会导致重复,因此下游必须以事务标识等机制实现幂等。它偏向重试推进到完成,而不自动撤回第一步;永久业务失败需人工或专门处理,单凭可靠投递也不能提供资源隔离。
可靠事件队列进一步展开相关机制和边界。
原书依据 · 1 处
3.4.3 TCC事务
TCC将业务显式拆为预留、确认和取消。Try检查可执行性并冻结资源,全部可行才Confirm消费已预留资源,否则Cancel释放;确认和取消都须支持重复调用。库存预留防止多个购买者各自通过库存检查却合计超出总量。它让应用控制资源粒度,但也要求业务能表达冻结状态、维护事务活动日志,且承担更大的侵入与开发成本。
TCC保留隔离性进一步展开相关机制和边界。
无预留并发购书超售进一步展开相关机制和边界。
原书依据 · 2 处
第4章 透明多级分流系统
透明多级分流让请求尽量在合适且较靠前的位置获得响应,减少到达难以扩展单点的流量。浏览器缓存、CDN、均衡器、服务节点与数据库承担不同职责,不能因为系统追求高可用就全部堆上去。规划应同时识别可横向扩展节点、全局关键依赖和不可避免的入口瓶颈,在满足需求前提下保持系统尽量简单。
分流优先保护单点进一步展开相关机制和边界。
原书依据 · 1 处
4.1 客户端缓存
客户端缓存用本地副本减少重复传输,但需要处理副本与源站变化之间的关系。强制缓存按有效期直接复用,协商缓存向源站检测是否变化;重定向和HSTS等状态也可在客户端保存。无状态通信减少服务器会话依赖,却带来重复信息,缓存是缓解网络成本的重要配套机制。
4.1.1 强制缓存
强制缓存让客户端在有效期内直接使用副本。Expires以绝对时间表达承诺,容易受客户端时钟影响;Cache-Control用更丰富的指令表达有效期、共享范围与重验证条件。public/private区分共享与私有缓存,no-cache要求使用前验证,no-store禁止存储。不同指令处理的风险不同,不能把“不要直接复用”与“完全不保存”混为一谈。
强制缓存的演进进一步展开相关机制和边界。
原书依据 · 1 处
4.1.2 协商缓存
协商缓存用修改时间或实体标签让服务端判断副本是否仍有效:未变化时返回304,省去正文传输;变化则返回新内容。时间标识受精度及重生成影响,ETag可由服务端按合适算法生成,不必等同于每次计算全文哈希。同一URL还可能因语言、格式或编码返回不同表征,Vary指定哪些请求头参与缓存区分,避免把适合一种客户端的版本错给另一种。
协商缓存的两种凭证进一步展开相关机制和边界。
Vary区分缓存表征进一步展开相关机制和边界。
原书依据 · 2 处
4.2 域名解析
DNS通过层级委托与缓存把域名转换成地址记录,客户端一般先问本地解析服务,再沿权威链找到最终答案。TTL让缓存减少查询,也意味着变更不能立即使所有旧副本失效。权威服务器还能依据地区、运营商等信息返回不同记录,为智能路由和CDN提供基础。预取可提前承担解析延迟,HTTPS形式的解析可保护到可信解析服务的链路,但仍要选定信任对象。
DNS解析与智能线路进一步展开相关机制和边界。
HTTPDNS绕开劫持进一步展开相关机制和边界。
原书依据 · 2 处
4.3 传输链路
链路优化不只取决于运营商带宽,也受应用如何使用协议影响。合并资源、域名分片、压缩、减少重定向与调整加载优先级,都曾用于降低连接或等待成本。它们依赖具体HTTP版本与资源分布,协议支持多路复用之后,旧规则的收益和副作用会变化,因此应先确认瓶颈再用技巧。
前端优化规则会过期进一步展开相关机制和边界。
原书依据 · 2 处
4.3.1 连接数优化
HTTP页面资源常多而短,TCP建连与慢启动使短连接成本突出。持久连接复用已有连接,但HTTP/1.x仍受响应顺序限制;管道化也不能完全避免队首阻塞。HTTP/2把报文分成带流标识的帧,可交错传送并在接收方重组,减少连接数与应用层顺序等待。然而底层同一TCP连接丢包仍会影响多个流,不能把应用层多路复用等同于所有队首阻塞都已消失。
HTTP/2多路复用进一步展开相关机制和边界。
原书依据 · 1 处
4.3.2 传输压缩
即时压缩可边生成边发送内容,降低传输量和首字节等待,但发送响应头时常无法预知最终长度。持久连接又不能以断开连接表示当前响应结束。HTTP/1.1分块编码给每块带长度,以零长度块结束响应,让未知总长度的内容也能流式传输;压缩与消息分界分别解决数据量和边界问题。
分块传输编码进一步展开相关机制和边界。
原书依据 · 1 处
4.3.3 快速UDP网络连接
QUIC在UDP上实现可靠传输与多个逻辑流,避免直接继承单条TCP有序字节流对所有请求的共同阻塞。它还用连接标识协助网络地址变化后的连接延续,适应移动设备切换网络。可靠性并非UDP自动提供,而是QUIC自己完成;部署仍受中间网络设备支持影响,因此书中也说明了向TCP回退的兼容思路。
QUIC自建可靠传输进一步展开相关机制和边界。
原书依据 · 1 处
4.4 内容分发网络
CDN把资源副本放到更接近用户的位置,减少源站出口带宽、跨运营商链路与物理距离造成的压力。它不能改变用户最后一段接入带宽,也不是只加一台缓存机器。完整工作要把请求路由到合适节点,确保节点有正确副本,并管理资源更新与失效;后面依次解释这些条件。
4.4.1 路由解析
CNAME把域名解析的后续调度交给CDN服务方。CDN权威DNS依据拓扑、负载和时延等因素选择节点IP,浏览器随后访问该节点,域名与访问方式无需改变。这种透明来自解析阶段的地址选择,而非客户端先到源站后再被神秘截获。节点是否已有资源则是分发机制需要继续解决的问题。
CDN靠CNAME导流进一步展开相关机制和边界。
原书依据 · 1 处
4.4.2 内容分发
主动推送在用户访问前把资源铺到边缘,适合大促等可预知场景,但源站要配合接口;被动回源在缓存未命中时按需拉取,对源站更透明,却可能让首次访问承受额外等待。资源更新通常结合生存期与发布时主动失效、预热。具体CDN是否依照某个HTTP缓存指令工作,必须结合服务实现和配置判断。
CDN推送与回源进一步展开相关机制和边界。
原书依据 · 1 处
4.4.3 CDN应用
CDN能在边缘代替源站做更多工作:缓存内容与状态,转换对外协议,压缩或调整响应头,按IP和引用来源控制访问,还可注入可选功能。它同时成为重要的安全与信任边界,源站暴露或缓存了不适合共享的内容仍会带来风险。功能越多越要明确由哪个节点执行,并在内容和状态改变时正确失效。
CDN扩展边缘职责进一步展开相关机制和边界。
原书依据 · 1 处
4.5 负载均衡
负载均衡以一个对外入口调度多个真实服务实例,既支持容量扩展,也使副本对用户透明。DNS可先选择数据中心,进入机房后还可能经过多级均衡。书中把低层保留端到端连接的转发模式与高层终止连接再发起调用的代理模式区分:前者通常转发成本较低,后者能够识别更多应用语义。
4.5.1 数据链路层负载均衡
数据链路层模式改写目标MAC,把请求交给同二层网络的真实服务器;原IP报文保持不变,服务器需配置相应虚拟IP。响应可由真实服务器直接回到客户端,形成DSR三角路径,避免大响应占用均衡器出口。性能收益伴随二层可达和地址配置约束,不能脱离网络拓扑单看吞吐量。
四层负载均衡模式进一步展开相关机制和边界。
原书依据 · 2 处
4.5.2 网络层负载均衡
网络层可通过IP隧道把原包封进新包,让真实服务器解封并直接响应;它能跨越二层边界,但仍需隧道与虚拟地址配合。NAT则改写目标地址,返回时需再经均衡器还原源地址,因此响应流量可能形成瓶颈。进一步改写源地址的SNAT减少服务器路由配置,却会隐藏原客户端地址。三者是在性能、透明度和运维约束之间取舍。
4.5.3 应用层负载均衡
应用层均衡作为反向代理分别维护客户端与后端连接,解析请求内容以做精细路由。它可直接返回缓存、按会话或路径选后端,并根据HTTP错误参与治理。代价是连接、CPU和带宽开销;若瓶颈是业务而非纯转发,这些内容感知能力可提升整体效果。正向、反向与透明代理的差别还在于由谁配置及对谁可感知。
七层均衡以代理换智能进一步展开相关机制和边界。
原书依据 · 1 处
4.5.4 均衡策略与实现
选择实例的策略应贴合工作负载:轮询或随机适合相近能力节点,权重体现处理能力差异,一致性哈希保持相同特征请求的亲和并减少节点变化时的重映射,最少连接适合处理时长差异较大的请求。响应探测测到的是均衡器到服务器的状态,不能直接等同于用户体验。软件内核、用户态与专用硬件实现还在性能、功能和维护便利性上各有代价。
均衡策略的三种诉求进一步展开相关机制和边界。
原书依据 · 1 处
4.6 服务端缓存
服务端缓存通过复用计算结果或把慢介质访问转到更快资源,缓解CPU或I/O峰值压力。它也引入一致性、失效、排障和敏感数据管理成本,因此不能把“响应变快”当成唯一决策依据。若扩展原资源已能满足需求,可能比增加一套需要长期维护的缓存机制更合适。
引入缓存先问是否需要进一步展开相关机制和边界。
原书依据 · 1 处
4.6.1 缓存属性
专业缓存要同时考察吞吐量、命中率、管理能力及部署方式。访问往往还需更新热度等元信息,Caffeine用读状态的异步日志与环形缓冲降低竞争,写状态则不能随意丢失。FIFO、LRU、LFU分别看进入顺序、最近访问和访问频率,TinyLFU用近似计数与衰减,W-TinyLFU再以窗口容纳突发热点。加载、失效、通知和容量控制构成管理能力。复制式缓存读快而写同步重,集中式缓存引入网络但便于共享;多级缓存以本地优先读取、变更通知失效连接二者。
Caffeine异步记录读进一步展开相关机制和边界。
三种淘汰策略进一步展开相关机制和边界。
W-TinyLFU改进LFU进一步展开相关机制和边界。
复制式与集中式缓存进一步展开相关机制和边界。
透明多级缓存进一步展开相关机制和边界。
缓存管理能力选型进一步展开相关机制和边界。
4.6.2 缓存风险
穿透是查询不存在数据而每次落到源站,击穿是单热点过期时并发回源,雪崩是许多键或整个缓存同时失效。它们分别需要空值或过滤保护、合并回源和热点管理、打散过期与提升可用性。缓存污染涉及与真实数据不一致,Cache Aside建议先提交数据源,再失效缓存,减少旧值回填窗口;但读写并发仍可能留下陈旧值,不能把一种低成本模式当成强一致性协议。
穿透击穿与雪崩进一步展开相关机制和边界。
Cache Aside的顺序进一步展开相关机制和边界。
原书依据 · 2 处
第5章 架构安全性
安全设计包含多个不同的对象:认证辨别身份,授权限制资源和操作,凭证承载身份及权限承诺,保密保护敏感信息,传输安全防止链路窃听和篡改,数据验证阻止不合规则的数据进入业务。它们各自覆盖不同风险,不能用一个登录功能替代。通用风险已有标准和成熟实现,应先理解职责,再选择规范与框架。
5.1 认证
认证要回答访问者是谁,授权决定此身份能做什么,凭证则是后续请求证明身份的材料。访问者不仅可能是人,也可能是外部代码或其他服务;账户和权限还需要跨模块共享,因此登录远比比对用户名密码复杂。本节先限定为最终用户认证,服务间代码身份留到后续讨论。
5.1.1 认证的标准
认证可以在建立通信信道、请求协议资源、使用应用内容三个层面进行。HTTP认证框架用挑战响应约定把凭证生成方法与接收凭证的接口分离:服务端告知认证方案,客户端按方案提交凭证。Basic中的Base64只是编码,不能提供保密;Web表单则让应用自行设计交互。WebAuthn用验证器保存私钥,对服务端随机挑战签名,服务端保存公钥并验证签名,避免把共享密码作为登录材料。界面自由与底层遵循安全规范可以同时成立。
三层认证与HTTP认证进一步解释上述机制与适用边界。
WebAuthn取代密码进一步解释上述机制与适用边界。
原书依据 · 2 处
5.1.2 认证的实现
安全框架不仅验证用户身份,还提供安全上下文,使业务能够获取已认证用户的资料、角色和许可,并承担授权及密码验证工作。Java的JAAS留下Principal、Credentials、Context等术语,但其同时覆盖代码安全与用户安全且依赖容器,增加了使用复杂度。书中以Shiro和Spring Security说明:实现应尽量复用框架,选择还受既有技术生态约束,而非只比较功能多少。
安全框架的四项职责进一步解释上述机制与适用边界。
原书依据 · 1 处
5.2 授权
授权有两个不同问题:一是资源所有者怎样可靠地把访问权交给其他主体,二是程序怎样按已经授予的权限控制功能和数据。多方授权协议处理前者,访问控制模型处理后者。因而OAuth与RBAC并非互相替代:一个规范授权交互过程,一个组织用户、角色与资源许可之间的关系。
5.2.1 RBAC
RBAC把许可绑定到角色,再把角色赋给用户,避免逐个用户配置所有资源的操作权限。许可是对某项资源执行某种操作的具体资格;角色可继承,也可通过互斥约束落实职责分离。功能权限回答能否使用某个功能,数据权限回答能否操作这一条具体数据;相同角色的两个用户仍可能各有私有数据,角色检查不能代替业务的数据归属检查。
RBAC与两类权限进一步解释上述机制与适用边界。
原书依据 · 1 处
5.2.2 OAuth 2
OAuth 2处理第三方访问资源时的授权,使用独立令牌代替把用户密码交给每个应用,从而可分别限制权限范围、有效期和撤销范围。书中四种模式对应不同部署与信任条件:授权码让后端用密钥兑现浏览器可见的代码;隐式模式省去后端兑现,令牌暴露面更大;密码模式让应用直接接触密码,只适合高度可信的同系统模块;客户端模式让服务以自己名义取权限。设备码流程则把缺少输入能力的设备与用户在另一页面的批准连接起来。这些是出版时所讲协议机制,不能把四种模式排成适用于所有场景的安全等级。
OAuth2四种授权模式进一步解释上述机制与适用边界。
授权码为何多换一步进一步解释上述机制与适用边界。
设备码连接异端授权进一步解释上述机制与适用边界。
5.3 凭证
凭证的承载方式决定状态放在哪里。Cookie-Session主要把用户上下文存到服务端,客户端持有查找键;JWT则把少量声明放进客户端携带的令牌,通过签名证明内容未被篡改。前者便于服务端主动管理,后者减少不同节点间共享认证状态的需求。两种方案的范围并不相等:令牌不是任意大规模会话状态的替代容器。
5.3.1 Cookie-Session
HTTP请求本身独立,但应用需要辨认连续请求属于哪个用户。Cookie可让浏览器回传一个会话标识,服务端凭此查找Session中的上下文,并可主动清除会话使用户下线。扩展到多节点后,需要选择固定用户到节点、节点间复制、或集中存储等方案;这些方案分别带来节点故障丢会话、同步成本或公共存储依赖。讨论重点是状态共享的成本,而非宣称某种凭证全面更先进。
Session集群化的取舍进一步解释上述机制与适用边界。
原书依据 · 1 处
5.3.2 JWT
JWT通常由头、负载、签名三部分组成。负载携带身份、权限和有效期等声明;签名让接收方检测内容是否被改动,但Base64URL后的内容仍可读取,因此不应放入敏感明文。HMAC需要保密的共享密钥,非对称签名则让签发方保管私钥、资源服务用公钥独立验签。无须逐请求查会话有利于扩缩容,却使主动撤销、单设备登录和在线统计需要额外状态;令牌失窃、重放及客户端存放问题也仍要处理。
JWT的无状态与代价进一步解释上述机制与适用边界。
HMAC验证密钥持有者进一步解释上述机制与适用边界。
原书依据 · 2 处
5.4 保密
保密针对数据能否被未获授权者理解。需要区分数据在客户端、传输链路、服务端存储三个环节:客户端早做处理可减少服务端接触明文,服务端存储防护降低数据库泄漏后的损失,而链路保护必须面对中间人能替换内容的问题。后续先谈端上的密码处理,再用传输安全层把这些防护连接起来。
5.4.1 保密的强度
保密措施都有明确威胁边界与成本。简单摘要不阻止弱密码枚举,固定盐降低现成彩虹表的效用,却不能阻止已截获凭证被再次使用;动态材料和统一令牌校验增加防重放能力,也增加协商与分发成本。HTTPS负责链路保护,但安全仍受证书、协议版本及终端状态影响。更高要求可使用独立设备或独立通道,选择应依据威胁和业务代价,而非无限提高安全强度。
保密强度六级递进进一步解释上述机制与适用边界。
原书依据 · 1 处
5.4.2 客户端加密
客户端处理密码与保护传输是两个目标。链路上的中间人若能替换网页或脚本,也能绕过网页自行实现的加密逻辑,因此客户端加密不能代替HTTPS。另一方面,尽早将明文变成摘要,可减少密码在服务端日志、数据库等处被直接滥用的机会。服务端加盐存储的意义是降低被拖库后的批量破解风险,不能据此推断网络传输已经安全。
客户端加密密码的价值进一步解释上述机制与适用边界。
原书依据 · 1 处
5.4.3 密码存储和验证
书中把密码保护拆成两段计算:客户端先进行带盐的摘要及可调成本的慢哈希,提高暴力枚举的代价;服务端再为不同用户生成随机盐,把二次计算结果和盐存储起来。登录时复用相同计算并比较结果。随机盐用于使批量预计算难以复用,慢哈希用于增加每次猜测的成本,两者解决不同问题。这里记录的是书中示范方案和成本权衡,不将其中算法与参数当作当前安全配置建议。
密码存储的双重加盐进一步解释上述机制与适用边界。
原书依据 · 1 处
5.5 传输
密码、令牌和签名都假设接收方拿到的东西确实来自声称的对象;若攻击者可以替换网页、凭证或公钥,这些局部防护便无法独立建立信任。传输安全层要把身份核验、完整性和保密组合成端到端通信条件,解释为什么单纯在页面内加密无法替代安全信道。
5.5.1 摘要、加密与签名
摘要把任意输入压成固定长度特征,适合发现变化但不是可逆加密;加密让持有相应密钥的人恢复明文;签名让接收者验证消息的发布者和完整性,通常不隐藏消息。对称加密高效却面临密钥分发问题,非对称方式可帮助建立密钥或签名,但不适合直接处理大量数据,因此实际采用混合方案。仍有一个未解决前提:取到的公钥属于谁,需在下一节建立信任根。
摘要加密与签名之别进一步解释上述机制与适用边界。
混合加密解密钥分发进一步解释上述机制与适用边界。
原书依据 · 2 处
5.5.2 数字证书
数字证书把公钥与一个身份绑定,并由证书颁发机构签名。仅从网络再取一个公钥会陷入循环:攻击者也可替换这个取钥请求。PKI的起点是浏览器或系统已预置的可信根证书,接收方据此检查其他证书签名。X.509描述证书中的主体、颁发者、有效期、公钥与签名等信息;验证签名之外仍需核对身份和有效性条件。
CA证书建立信任起点进一步解释上述机制与适用边界。
原书依据 · 1 处
5.5.3 传输安全层
TLS在应用协议下面封装安全协商,使HTTP等应用无需自行管理完整密码学流程。书中以TLS 1.2的RSA密钥交换为例:双方协商版本和套件、交换随机数,客户端检查服务端证书,再安全提供密钥材料并完成握手校验,随后用协商出的对称机制保护内容。客户端也提交证书的双向TLS用于双方身份认证。此示例不是所有套件的固定流程;HTTPS强度还取决于版本、套件和证书验证策略。
TLS握手解决三个问题进一步解释上述机制与适用边界。
原书依据 · 1 处
5.6 验证
数据验证也是安全的一部分:格式或业务约束不严会破坏数据正确性,而重复校验又会污染业务、增加依赖调用。Bean Validation把约束绑定到对象,并通过标准触发接口集中执行和返回错误。无外部依赖的格式约束适合预置;查数据库等业务约束应在具体入口显式选用,防止框架自动反复触发而引发副作用。不同新增、修改场景还可用分组来选择约束集合。
校验绑定到Bean进一步解释上述机制与适用边界。
原书依据 · 1 处
第6章 分布式共识
多副本提高数据保存的可靠性,但动态数据若要求每个副本同步成功才提交,任何失联节点都会阻塞服务。状态机复制改为从相同初态执行相同顺序的确定性操作,由日志顺序约束最终状态。Quorum进一步以多数确认替代全体确认,容忍少数失联。共识是就操作结果达成一致的过程,一致性是副本数据表现出的性质;仅有多份数据并不会自动得到正确的共识。
从状态转移到Quorum进一步解释上述机制与适用边界。
原书依据 · 1 处
6.1 Paxos
Paxos是用消息传递形成共识的一类基础算法。本节是后续两阶段机制的引入,强调它为Raft、ZAB及协调框架提供了重要理论背景。评价和历史地位并不能替代理解:接下来仍须分别说明节点角色、消息规则以及在不可靠通信中保持决议安全的条件。
6.1.1 Paxos的诞生
Paxos的城邦议会比喻关心的是:参与者不保证及时到场、投票或获知新提案时,如何仍让系统形成一致决议。其故障模型允许消息延迟、丢失,本文不讨论恶意或错误消息的拜占庭情形。几次论文发表与工业应用的历史说明表达算法与应用算法是两回事;历史故事用于界定背景,不是新的共识步骤。
6.1.2 算法流程
Basic Paxos把提出值、投票接受、学习决议分别交给Proposer、Acceptor、Learner,一个实体可兼任多角。准备阶段通过递增编号获取承诺并读取已接受值;拿到多数承诺后,若发现旧值,提案者必须继承其中编号最大的值,不能任意替换。接受阶段在不违背承诺的条件下持久化提案,获得多数接受才形成决议。这里一个值对应一个决议实例,不能误解为不断覆盖同一业务变量。
Paxos两阶段与三角色进一步解释上述机制与适用边界。
原书依据 · 1 处
6.1.3 工作实例
五节点实例展示了并发提案怎样相互约束:后来的高编号提案若从承诺应答中看到旧值,就继承应答中编号最大的已接受值;若没有看到旧值且阻断旧提案取得多数,便可提出新值。两个多数派必有交集,使已形成多数决议的值不能在下一轮被覆盖。高编号互相抢占也可能使双方一直准备成功、接受失败,产生活锁;因此安全性不等于总能及时完成。
Paxos靠多数派交集进一步解释上述机制与适用边界。
Basic Paxos的活锁进一步解释上述机制与适用边界。
原书依据 · 2 处
6.2 Multi Paxos
Multi Paxos通过稳定的主提案者为多个决议实例复用准备阶段,减少并发抢占和网络往返。主节点接收操作、复制日志,获得多数确认后提交;少数分区即使保留旧主也不能靠少量确认提交新变更。书中再用Raft的选主、复制与安全三个问题组织说明,并区分Safety的“不做错事”与Liveness的“最终有进展”。任期使新旧领导关系可比较,恢复时需要处理未提交分支和缺失日志。
Multi Paxos靠选主进一步解释上述机制与适用边界。
协定性与终止性进一步解释上述机制与适用边界。
原书依据 · 2 处
6.3 Gossip协议
Gossip按周期随机选择少量邻居传播新消息,再由接收者继续扩散,因而适合不稳定、部分连通的大规模网络。传播可能有重复,也无法为单条消息预先保证精确完成时间;反熵偏向同步全部数据消除差异,传谣偏向传播增量节省带宽。它解决的是信息扩散问题,不能单凭扩散就等同于Paxos式共识:书中比特币例子还需要另一套决定记账者的机制。
Gossip与最终一致性进一步解释上述机制与适用边界。
原书依据 · 1 处
第7章 从类库到服务
服务与类库都能复用功能,但类库在进程内调用,服务则跨进程、跨网络协作。服务带来部署与故障边界的独立,也引入定位、暴露及流量分配等成本。服务发现回答目标在哪里,网关回答怎样把外部访问送到内部功能,负载均衡回答多个实例中选择谁;后面按这三个问题展开。
7.1 服务发现
服务发现类似链接器将符号变成地址,但查找对象从进程内入口变成远程主机和程序。调用者知道逻辑服务名,并不等于知道当前哪些实例能响应;发现机制将稳定的逻辑标识与可能变化的运行位置分开,支撑服务上线、下线与替换。
7.1.1 服务发现的意义
远程服务可用主机全限定名、端口和服务标识描述,前两者定位程序,最后一项定位接口。百科全书式发现试图一并提供企业和接口细节,门牌式发现则只把逻辑名称转换成可访问地址,假定接口契约已知。微服务实例频繁变化,使发现还必须结合动态注册和健康维护;实现既可在应用框架中,也可借助DNS等基础设施。
两种服务发现范式进一步解释上述机制与适用边界。
原书依据 · 1 处
7.1.2 可用与可靠
服务发现至少包括注册坐标、持续维护健康列表、把服务名转换成坐标。注册中心被众多服务依赖,既希望它一直可用,又希望每个副本都返回一致地址,网络分区时必须取舍。书中用Eureka的异步复制与缓存说明偏可用的选择,用Consul的多数提交说明偏一致的选择;判断应是错误地址是否破坏业务正确性,以及客户端有无故障转移能力。
注册中心的双重要求进一步解释上述机制与适用边界。
Eureka与Consul取舍进一步解释上述机制与适用边界。
原书依据 · 2 处
7.1.3 注册中心实现
注册中心可以在分布式键值存储上自建、使用DNS基础设施,或采用专用发现框架。自建可复用一致性协议,但注册和健康检查仍需完成;DNS通用且跨语言透明,却受协议缓存和记录形式约束;专用框架集成便捷,但需要应用生态支持。CP或AP属性取决于具体后端与机制,不能由“DNS”或“高可用”宣传词直接推定。
三类注册中心实现进一步解释上述机制与适用边界。
原书依据 · 1 处
7.2 网关路由
网关位于内部区域与外部系统的交界处,既可以是物理设备,也可以是逻辑服务。微服务中的API网关承担统一外部入口的角色,其价值需要结合下一节的路由与过滤职责理解,而不能只把网关当成另一台普通应用服务器。
7.2.1 网关的职责
网关首先根据请求特征选择正确后端,其次才可附加认证、限流等过滤功能。它与负载均衡实现常相近,但一个关注路由到哪类服务,一个关注在实例间怎样分配流量。要从URL或Header识别目标就要解析应用协议,因此协议支持范围会限制后端暴露方式。所有流量经过网关,其代理开销会放大为全局成本,网络I/O模型成为下一节的性能关键。
网关是路由器加过滤器进一步解释上述机制与适用边界。
原书依据 · 1 处
7.2.2 网络I/O模型
网络读取先等待数据到内核,再复制到应用空间。阻塞、非阻塞、多路复用和信号驱动在等待与取数安排上不同,真正异步则在复制完成后通知应用;“可开始读取”和“已经读取完成”不能混为一谈。多路复用让少量线程等待多个连接,减轻每连接独占线程的压力。网关处理入站和出站两组I/O,需结合后端负载衡量性能。可用性还依赖网关轻量化、成熟实现,以及由前置负载均衡器支撑多个网关实例。
五种网络I/O模型进一步解释上述机制与适用边界。
网关可用性靠轻量前置进一步解释上述机制与适用边界。
原书依据 · 2 处
7.2.3 BFF网关
BFF是为不同前端提供相适配的后端入口:同一组业务服务可以对浏览器提供HTTP接口,对其他客户端提供不同协议与聚合结果。适配放在边缘,使后端核心服务相对稳定,又让各类前端不必受同一套交互接口限制。它是一种职责划分方式,不要求所有前端强行共用一个无差别网关。
BFF按前端拆分网关进一步解释上述机制与适用边界。
原书依据 · 1 处
7.3 客户端负载均衡
一次出库调用可经历名称解析、网关按路径路由、均衡器选择实例,以及失败后按策略转移。四项职责分别解决位置、功能、分配与失败处理问题,却不等于四个必需的独立设备:地理位置路由可能由DNS、注册中心或均衡器完成。若内部调用先绕到边缘再返回内部,会多出带宽、时延与依赖,促使负载均衡下沉到调用端。
一次调用中的职责交叉进一步解释上述机制与适用边界。
原书依据 · 1 处
7.3.1 客户端负载均衡器
客户端负载均衡把实例选择放进调用服务进程,使内部流量直接前往目标,减少边缘绕行和集中式单点,并允许每个服务单独配置策略。代价是均衡逻辑与语言及进程资源耦合,稳定性互相影响;大量客户端还要跟踪拓扑和健康状态,给注册中心带来负担。直接互访也扩大了内部信任与访问控制需要处理的范围。
客户端负载均衡的取舍进一步解释上述机制与适用边界。
原书依据 · 1 处
7.3.2 代理负载均衡器
代理负载均衡把原本在应用进程内的能力移入边车。书中以同一Pod中的独立容器为例:通信经过本机网络栈,但不需远端链路,付出一定开销换来跨语言与进程隔离。控制平面主动推送实例变化,可减少各应用持续轮询;统一代理还便于集中实现双向TLS和链路观测。便利性伴随更高的网络与运维复杂度。
边车代理负载均衡进一步解释上述机制与适用边界。
原书依据 · 1 处
7.3.3 地域与区域
Region与Zone用来描述部署与路由的故障、距离边界:书中地域表示较大地理范围,区域表示同一地域内电力和网络相互独立的可用区。跨可用区部署增强故障承受能力,也引入链路时延;追求低延迟则倾向更近的部署。框架还能用子区域优先级表达就近访问。具体网络连通条件应按环境理解,不能把书中云产品约定当成所有基础设施的物理定律。
地域与区域的边界进一步解释上述机制与适用边界。
原书依据 · 1 处
第8章 流量治理
拆分服务并不自动提高可用性。某个下游崩溃或变慢,可能沿调用链占住更多资源,造成雪崩;持续超过容量的请求也会彼此拖累,最后大量超时。服务容错着眼于限制局部故障影响,流量控制着眼于限制进入系统的资源需求,二者都必须与发现、路由和均衡配合。
8.1 服务容错
分布式设计应把崩溃、断网、超时视为正常会遇到的情况。若任何单点错误都使整体不可用,服务化反而削弱了原系统。容错因此是设计约束:在调用和资源层提前规定故障发生时如何停止、隔离、重试或替代处理,而不能等上线后再临时补救。
8.1.1 容错策略
容错策略先决定业务对失败的态度:可幂等的重要调用可故障转移,非幂等且结果未知的调用应避免盲目重试;不影响核心正确性的旁路可安全失败;慢服务应停止继续分配流量;允许延后的任务可后台恢复。并行调用取任一成功,广播调用要求全部成功,两者成本与目标不同。银行扣款网络异常尤其重要:无法区分请求未到与扣款后响应丢失,直接重试可能重复扣款,需按资金风险选择策略。
七种容错策略进一步解释上述机制与适用边界。
扣款响应丢失重复扣款进一步解释上述机制与适用边界。
未知扣款结果快速失败进一步解释上述机制与适用边界。
原书依据 · 3 处
8.1.2 容错设计模式
断路器持续统计调用结果,达到请求量和故障率阈值时熔断,并以半开探测恢复;降级则由业务决定失败之后怎样继续。舱壁隔离为不同依赖限制资源份额,防止慢调用耗尽全局线程,也可用信号量只限制并发。重试适合可能自愈的瞬时故障,但须满足幂等性、有次数和时间预算;多层重试会按乘积放大。三者分别控制继续调用、资源占用和恢复尝试,不能相互替代。
断路器三态与熔断降级进一步解释上述机制与适用边界。
舱壁隔离防资源耗尽进一步解释上述机制与适用边界。
重试的前提与放大进一步解释上述机制与适用边界。
原书依据 · 3 处
8.2 流量控制
限流目的是在资源不足时让一部分请求完整完成,而不是让全部请求各耗费大量资源后一起超时。它需要先选择能反映实际压力的指标,再用算法控制准入,并规定超额请求是立即失败或降级,还是在有限时间内排队。限流保护的是业务完成能力,简单观察请求已经开始处理的数量并不足够。
过载会浪费已耗资源进一步解释上述机制与适用边界。
原书依据 · 1 处
8.2.1 流量统计指标
TPS计完整业务操作,HPS计外部请求,QPS计服务查询,它们常因一笔业务包含多次请求、一次请求调用多个服务而不同。直接按业务操作限流虽然贴近用户目标,却受业务成本差异与人工操作时间干扰;请求速率相对容易观测。指标要与瓶颈对应:下载可按字节,长连接可按连接或在线人数,不能机械地认为所有系统都只看请求次数。
限流为何多选HPS进一步解释上述机制与适用边界。
原书依据 · 1 处
8.2.2 限流设计模式
固定时间片计数有边界问题:相邻两段末尾和开头的请求可能在短时间叠加。滑动时间窗维护最近一段时间的分桶统计,改善观察粒度,适于按统计值决定拒绝。漏桶用有限队列和相对稳定的出速率平滑输出;令牌桶按速率积累有限准入资格,闲时积累允许一定突发。令牌可按时间差惰性补充,无须专用定时线程。窗口精度、桶容量和等待超时都要结合实际处理能力设置。
滑动时间窗平滑计数进一步解释上述机制与适用边界。
漏桶与令牌桶进一步解释上述机制与适用边界。
原书依据 · 2 处
8.2.3 分布式限流
分布式限流需要多个节点共同理解资源消耗,最直接是共享统计值,但每次都访问集中缓存会增加网络成本,甚至使限流本身成为瓶颈。额度方案先发放一批可在调用链中本地扣减的资源预算,只有耗尽时再申请,降低逐调用的集中协调开销。它牺牲一定精确性,业务可能已执行一半才申请失败,因此必须衡量省下的协调成本与中断业务造成的浪费。
额度货币化分布式限流进一步解释上述机制与适用边界。
原书依据 · 1 处
第9章 可靠通信
微服务让各团队自由选择语言和框架,却也让安全漏洞的来源增多。可靠通信因此不能只问调用能否到达,还必须问调用双方是否可信、消息是否会被监听或篡改、一个失守节点是否能继续攻陷其他服务。本章把前面的认证、授权与加密知识放到动态扩缩的服务集群中,说明如何由基础设施统一承担重复而复杂的安全工作。
零信任的三个转变与本项的问题直接相连,详细机制在对应实质小节继续说明。
9.1 零信任网络
边界安全按内外网、IP或子网划分风险,只在边界重点检查,对内部流量给予较多信任。这种办法减少开销,却假定内网机器值得信任;一旦内部某台机器被攻陷,攻击者就可能借它横向移动。零信任把这个假定改成每次访问都需证明身份并获得明确许可。它承认节点可能失守,重点限制入侵扩散,而不是认为筑好外墙即可保护所有内部服务。
零信任的三个转变与本项的问题直接相连,详细机制在对应实质小节继续说明。
9.1.2 Google的实践探索
默认安全和自动安全控制需要具体基础设施支撑。Google的实践把边缘流量防护、服务双向认证、访问策略、部署前二进制检查、宿主机完整性和工作负载隔离分配给专门组件。它们分别保护不同环节,并不意味着安装一个产品就具备零信任。
这些组件即使免费,也可能超过一般团队的维护能力。云原生的价值在于让身份、证书与策略随服务自动扩缩,把复杂度放在共享平台中,同时把性能成本降低到可以接受的水平。是否有能力长期维护这些机制,和原则在理论上是否正确同样重要。
零信任的落地代价进一步保留这一节的机制与边界。
原书依据 · 1 处
9.2 服务安全
服务安全的具体落地包括建立可信通信、识别调用者和限制其权限。这里用Spring Cloud应用自行处理安全与Istio在基础设施中处理安全作对照,观察同样的TLS、JWT和OAuth 2知识如何在两种架构中承担不同职责。对比重点是能力由谁提供、是否侵入业务代码,以及能否同时保护身份和传输内容。
单向TLS与双向TLS与本项的问题直接相连,详细机制在对应实质小节继续说明。
原书依据 · 1 处
9.2.1 建立信任
当网络路径也不可信时,仅知道对方地址不足以建立信任。公开密钥基础设施通过受信证书机构证明密钥和身份的关系,TLS再据此建立加密通道。单向TLS由客户端验证服务端,双向TLS则让双方互验,适合服务之间都要识别对方的场景。
大量实例不断创建销毁,意味着密钥生成、证书签发、分发、轮换都不能依赖人手反复操作。双向TLS增加验证工作,却也使可信身份不再依附于机器位置;自动化证书生命周期是它能在服务集群落地的必要条件。
单向TLS与双向TLS进一步保留这一节的机制与边界。
原书依据 · 1 处
9.2.2 认证
认证先区分两种对象:服务认证识别另一台服务,请求认证识别最终用户。Istio中可按名称空间声明严格双向TLS;迁移期间的宽容模式同时接受明文和mTLS,方便逐服务迁移,但明文部分仍需自行解决认证和传输风险。
没有网格时,示例通过OAuth 2客户端模式,以Client Secret换取JWT再调用资源服务。这能证明持有令牌,却不能单独阻止明文传输被窃听和令牌被截获。用户JWT也可交给网格验证:认证服务用私钥签名,资源端按JWKS中的公钥验签,KID选择密钥,jwksUri便于轮换。应用若仍需把身份转为用户对象,则保留并转发原始令牌。
网格mTLS与OAuth2进一步保留这一节的机制与边界。
JWKS支持分布式验签进一步保留这一节的机制与边界。
9.2.3 授权
认证回答调用者是谁,授权才判断它能访问哪些资源。可信身份确立以后,可以按角色统一处理人和服务,再根据来源、目标路径、方法及附加条件限制访问。Istio用集中声明的策略完成多数通用授权,避免业务代码到处重复检查。
应用中的Spring Security既可按URL集中配置,也可用方法注解与表达式进行更细的判断。后者自由度更高,却增加侵入与分散维护成本。选择授权层次时,应先明确权限粒度和身份来源,再决定共享基础设施能覆盖多少规则。
授权在网格还是应用层进一步保留这一节的机制与边界。
原书依据 · 1 处
第10章 可观测性
可观测性是从外部输出推断系统内部状态的能力。日志记录离散事件,帮助还原发生过什么;追踪把一次请求经过的调用串起来,定位慢在何处、错在何处;度量对大量事件或状态作统计聚合,展示整体趋势并触发预警。三者可以互相补充,不是互斥产品分类。
跨服务后,海量日志需要统一归集,追踪需要跨语言和协议传递上下文,度量需要低成本保留大量时间序列。书中以Elastic Stack、各类APM及Prometheus讲解这些机制;其中市场地位与发展预测属于出版时背景,理解重点是数据形态和职责。
日志追踪度量三支柱进一步保留这一节的机制与边界。
原书依据 · 1 处
10.1 事件日志
打印日志只是起点。一个请求会经过多个节点,排障时必须把这些节点的相关事件放在一起检索,因此日志系统还需要收集、缓冲、加工、聚合、索引和查询。每一阶段分别解决数据从哪里来、突发时如何承受、如何提取字段以及怎样快速查找的问题。后面各节围绕这条数据处理链展开。
日志结构化与预聚合与本项的问题直接相连,详细机制在对应实质小节继续说明。
10.1.1 输出
日志内容的质量取决于是否保留有用事件并避免无谓风险,而不只是行数。密码、银行卡等敏感信息不能随对象序列化被带入日志;为了打印字段再查库或远程调用,也可能让诊断本身拖慢业务。大量方法入参、返回值和耗时更适合由追踪诊断工具按需采集。
应保留贯穿调用链的TraceID、关键操作及未处理异常,以及启动和配置变更时的非敏感设置。TraceID把用户报错与后台事件连接起来,启动配置则保留通常难以重现的初始化现场。已经妥善处理的异常若仍输出误导性堆栈,会让后来排障者追错方向。
日志该有与不该有进一步保留这一节的机制与边界。
原书依据 · 1 处
10.1.2 收集与缓冲
日志收集器把节点上的日志送到集中系统。节点数量很大时,每个节点都运行重型JVM组件成本过高,所以Filebeat把收集职责做得更轻,将复杂加工留给集中端。部署密度决定边缘组件必须控制资源负担。
集中处理能力也可能追不上突发写入,可在Logstash和Elasticsearch前增加Kafka或Redis缓冲,削峰填谷并承受短暂停顿。这是以可接受成本提高连续性,不意味着在任意规模和故障下保证所有日志绝不丢失。
日志收集求连续不求全进一步保留这一节的机制与边界。
原书依据 · 1 处
10.1.3 加工与聚合
原始日志一行往往混有时间、请求路径、响应码和客户端信息。若仅存整段文本,只能依赖全文搜索;通过Grok等规则拆成结构化字段,再统一时间、转换类型或补充地理分类,就能按字段过滤、索引和统计。
聚合还可以发生在两个位置:查询时由Elasticsearch临时计算,适合即席探索;收集后由Logstash预先计算常用固定指标,减少查询端重复开销。二者处理同一批离散事件,但在灵活性、计算时点和资源占用之间取舍不同。
日志结构化与预聚合进一步保留这一节的机制与边界。
10.1.4 存储与查询
日志持续增长,写入后通常不再修改,查询又集中在近期,因此适合按日期组织索引、为当前写入设置稳定别名,并按冷热程度选用不同存储。时间索引可以预创建,旧日志可转移到廉价介质归档。
日志分析通常需要全文检索、即席查询与近实时可见性,Elasticsearch正好擅长这些需求;Kibana则把查询聚合结果转成图表,帮助人发现趋势和异常。这里的优势是工作负载与工具能力匹配,并非所有基于日志的数据挖掘都应使用同一技术栈。
ES契合日志分析进一步保留这一节的机制与边界。
原书依据 · 1 处
10.2 链路追踪
广义追踪系统由收集、存储和展示三个相对独立的子系统构成;狭义追踪只负责采集调用关系,因此可以把探针、存储和界面组合使用。Dapper论文提供了现代追踪的重要共同思路,后续产品继承它的模型,却不因此天然兼容。理解这一分层,可以避免把“装了探针”等同于已经拥有完整的可查询追踪系统。
Trace与Span与本项的问题直接相连,详细机制在对应实质小节继续说明。
原书依据 · 1 处
10.2.1 追踪与跨度
Trace表示请求从进入系统到返回响应的一次完整过程,Span表示其中一次调用的记录。Span带有TraceID、自身ID、父SpanID和起止时间,因而可把一次请求的调用组织成有层级的树,再结合时长和错误状态定位瓶颈。
这种记录必须足够轻,能够持续运行并随实例扩缩,又要尽量不侵入业务。不同语言和通信协议增加兼容工作;若采集代价反过来拖慢业务,追踪就失去了帮助分析性能的意义。
Trace与Span进一步保留这一节的机制与边界。
原书依据 · 1 处
10.2.2 数据收集
日志式追踪把Trace和Span写入日志,再从归集结果重建链路,成本低但会继承日志延迟与缺失。服务式追踪向应用注入探针,通过独立请求发送数据,精度较有保障,也可以观察本地方法、参数和返回值,但消耗更多资源。
边车代理在应用外观察网络调用,与语言无关,适合服务网格统一采集。不过它观察的是跨服务通信,无法替代进程内部的方法诊断。应按所需诊断层次、可承受侵入和已有基础设施选择采集方式,而非只看是否“透明”。
追踪数据三种收集方式进一步保留这一节的机制与边界。
原书依据 · 1 处
10.2.3 追踪规范化
共同源自Dapper论文的产品仍可能在埋点、Span上下文及探针接口上互不兼容,因为论文只规定思路,没有完整协议。OpenTracing用厂商和语言无关的薄层接口规范追踪,OpenCensus进一步覆盖度量和采集SDK。两者在2019年合并为OpenTelemetry。
统一规范的作用是让采集与后端产品解耦,而不是消除所有产品:可视化、预警等面向用户的能力仍由后端实现。书中对其未来发展的判断具有时代背景,值得保留的是标准化边界如何减少不同组件之间的绑定。
OpenTelemetry由来进一步保留这一节的机制与边界。
原书依据 · 1 处
10.3 聚合度量
度量把大量原始运行信息汇总成可比较的指标,用较少数据概括系统整体状态。它不同于逐条查日志或逐请求看链路,适合看容量趋势、版本性能变化及风险阈值。完整流程包括指标采集、服务端存储查询与终端分析预警;三部分可以分别由不同组件承担。
度量器类型与拉推采集与本项的问题直接相连,详细机制在对应实质小节继续说明。
原书依据 · 1 处
10.3.1 指标收集
指标需要先有清晰的数据含义:累计计数、某时点状态、单位时间吞吐和分布统计回答不同问题,不能只因为都能画曲线就混为一类。采集方向也要明确:Pull由度量服务定时读取,Push由目标主动上报。Prometheus以拉取为核心,可通过Push Gateway接收短任务或无法被直接连接的目标上报,再统一拉取。
目标若没有Prometheus格式的HTTP端点,可由Exporter代表目标采集并转换指标。这样度量平台只维护一种读取界面,适配不同数据库、系统和业务的工作交给各自Exporter。指标类型的具体定义与可用采集方式仍须结合目标系统,书中工具支持范围是出版时描述。
度量器类型与拉推采集进一步保留这一节的机制与边界。
Exporter统一采集接口进一步保留这一节的机制与边界。
10.3.2 存储查询
指标数据看似简单,但节点数、指标数和采样频率相乘,可能每天产生数十亿条。它通常以时间戳、指标名、标签和值组成,没有业务记录之间复杂的关联。时序数据库围绕追加写入、近期热点和旧数据价值下降来优化。
可采用适合写入的结构、到期删除及对历史数据降低采样精度;轮替数据库更进一步,只保留固定容量的最新记录。这些都是用保留细节换存储成本的选择。PromQL负责按标签选择时间序列并进行计算聚合,存储优化与查询语言一起服务监控需求。
时序数据库的激进取舍进一步保留这一节的机制与边界。
原书依据 · 1 处
10.3.3 监控预警
指标存下来之后还要被消费。图形化界面支持长期趋势、版本对照和故障分析,让人更容易看出容量增长或异常;预警则把满足条件的指标变化转成行动信号。二者分别服务主动分析与自动提醒。
在书中的Prometheus组合里,Grafana常用于展示,Alert Manager负责把告警按路由交给邮件、聊天工具或WebHook接收器。设置时需要明确哪个指标、持续多长时间、满足什么条件,以及交给谁处理,单纯采集数据并不等于完成监控闭环。
度量消费与告警路由进一步保留这一节的机制与边界。
原书依据 · 1 处
第11章 虚拟化容器
程序能否在另一台机器运行,受三层兼容性约束:ISA决定处理器能执行哪些指令,ABI决定已编译程序能否与系统或库交互,环境兼容决定配置、权限和依赖是否齐全。语言虚拟机解决其中一部分问题,不能单独担保全部运行环境。
虚拟化可以发生在指令集、硬件、操作系统、运行库和语言层。容器属于操作系统层虚拟化:通过隔离让进程看似独享资源,实际共享宿主机内核。因此容器镜像打包了应用及环境,却不能在没有额外虚拟化支持时任意跨内核运行。它以部分隔离性和兼容性换取更轻的启动与运行负担。
兼容层次与虚拟化进一步保留这一节的机制与边界。
原书依据 · 1 处
11.1 容器的崛起
容器最初的动力是隔离资源,减少测试误操作和不可信程序的影响;后来才发展成软件分发手段。下面的发展史沿着文件、访问与资源配额三个隔离问题逐步展开,再说明这些内核能力如何被封装成普通开发者可以使用的应用与集群工具。
三级隔离递进与本项的问题直接相连,详细机制在对应实质小节继续说明。
11.1.1 隔离文件:chroot
chroot改变进程看到的根目录,让它及子进程不能直接访问指定目录之外的文件;pivot_root进一步通过切换根文件系统满足容器的文件视图需求。但文件系统只是系统资源的一部分,网络、进程编号、用户和内存等还有非文件形式的访问入口。文件隔离因此是起点,不能单独构成完整容器边界。
三级隔离递进与本项的问题直接相连,详细机制在对应实质小节继续说明。
11.1.2 隔离访问:名称空间
Linux名称空间由内核给一组进程提供独立的资源视图。进程可以拥有自己的挂载视图、进程编号、用户与网络配置,从内部看仿佛独占一台机器。名称空间解决的是能看见和访问什么,而不是能消耗多少资源;即使看不见其他进程,一个程序仍可能耗尽宿主机CPU或内存,所以还需要配额控制。
三级隔离递进与本项的问题直接相连,详细机制在对应实质小节继续说明。
11.1.3 隔离资源:cgroups
cgroups按进程组限制或分配处理器时间、内存和磁盘I/O等资源配额,补足名称空间只隔离视图的不足。它减少一个进程过度消耗资源时牵连其他进程的风险。文件视图、访问隔离与资源约束叠加,才形成容器的基础;书中关于两代cgroups及Docker支持范围的叙述须理解为当时版本背景。
三级隔离递进进一步保留这一节的机制与边界。
11.1.4 封装系统:LXC
LXC把名称空间和cgroups包装成较易使用的系统级容器,降低直接操作内核能力的门槛。但它主要封装一套系统,组合应用组件时仍常需重新准备整体模板。Docker改以应用为中心,把单个应用及依赖打成可复用镜像。二者底层可以相近,封装对象不同,却决定了部署流程和生态复用方式的差别。
LXC与Docker的理念进一步保留这一节的机制与边界。
原书依据 · 1 处
11.1.5 封装应用:Docker
Docker早期并非靠独有隔离技术取胜,而是把应用连同依赖打包、自动构建、分层复用、版本管理和仓库共享组合成顺畅的分发流程。镜像因此成为团队间交换可运行成果的载体。
随后标准化进一步拆开职责:OCI描述运行时、镜像与分发,runC承接低层容器运行,containerd承接运行与分发管理。这些开放组件使其他系统可以复用Docker贡献的能力,也削弱了对Docker Engine这一整层的必然依赖。
Docker胜在理念与生态进一步保留这一节的机制与边界。
原书依据 · 1 处
11.1.6 封装集群:Kubernetes
容器引擎封装单个运行环境,编排系统进一步封装多节点集群,让部署、扩缩和故障处理面对整个集群进行。Kubernetes的兴起既依靠Borg经验和资源、声明式管理等设计,也得到希望推进云原生的产业参与者支持。
CRI把kubelet与具体引擎解耦,Docker需要适配层接入,CRI-O及直接支持CRI的containerd则能省去Docker Engine中间层。CRI与OCI约束不同层面,因而可以协作。这段历史说明接口标准会改变组件边界,并不等于镜像、命令行和仓库生态都一起消失。
OCI让Docker可被替代进一步保留这一节的机制与边界。
Kubernetes胜出是必然进一步保留这一节的机制与边界。
11.2 以容器构建系统
一个容器运行一个进程适合管理单体组件,却不足以表达分布式应用的整体。多个容器协作时还涉及调度、资源分配、扩缩以及容错等需求。容器编排就是把这些协作问题纳入共享基础设施,让业务只需声明目标,平台负责持续维持运行条件。
Pod对应进程组与本项的问题直接相连,详细机制在对应实质小节继续说明。
原书依据 · 1 处
11.2.1 隔离与协作
Pod补上容器体系中的进程组概念。日志收集器与被收集应用需要共享本地数据或其他名称空间时,可以放在同一个Pod;它们共享网络等资源,因此也不能占用相同端口。Pause容器提供稳定的共享名称空间基础,文件系统与PID则有各自的默认隔离与可配置范围。
Pod还是调度的原子单位,让必须在一起运行的容器不会被分到不同节点,避免再用复杂的跨容器协同调度弥补。容器、Pod、Node、Cluster和Federation分别封装进程、紧密协作组、机器、集群与多集群,形成逐层组合的资源模型。
Pod对应进程组进一步保留这一节的机制与边界。
Pod原子调度避开协同进一步保留这一节的机制与边界。
五层资源模型进一步保留这一节的机制与边界。
11.2.2 韧性与弹性
直接启动一个Pod只能让程序跑起来,不能保证异常后恢复。控制回路为资源区分期望状态和当前状态,控制器不断观察差距并执行修正,用户在spec描述意图,这就是声明式交互。
ReplicaSet保持所需Pod数量,出现故障便补建;Deployment管理新旧ReplicaSet的替换,完成滚动更新;自动扩缩控制器根据度量改变期望副本数,再沿这些资源层次传递。故障恢复和扩缩不是某个Pod自身具备的魔法,而是多个控制回路围绕不同职责协作的结果。
声明式API与控制回路进一步保留这一节的机制与边界。
控制器叠加韧性弹性进一步保留这一节的机制与边界。
11.3 以应用为中心的封装
镜像封装单个服务,Kubernetes资源封装集群,却仍可能把整个应用的细节摊给使用者。部署一个微服务应用往往要同时知道依赖关系、配置、密钥、扩缩与调度策略,没有一种角色天然掌握全部内容。应用封装的下一步因此是分离开发、运维和平台的关注点,让各角色只提供自己最擅长的信息。
缺少封装应用的载体进一步保留这一节的机制与边界。
原书依据 · 1 处
11.3.1 Kustomize
Kustomize把一组相关资源当作应用,以Base保存共同配置,以Overlay和Patch表达环境或客户差异,再生成完整部署包。它避免重复拷贝整套YAML,也不要求通过任意字符串替换维护模板。
这种方案没有消灭资源配置本身,也不负责应用的依赖、回滚和整个生命周期。它的价值在于成本较低地管理变化;若需求只是多环境配置派生,轻量本身就是优势,而不必自动升级到一套复杂包管理平台。
Kustomize分离配置进一步保留这一节的机制与边界。
原书依据 · 1 处
11.3.2 Helm与Chart
Helm参照操作系统的包管理器,把相关资源与依赖信息封装为Chart,通过仓库分发,再用Release表示某次安装实例。配置默认值与模板分离,便于部署时覆盖参数,也能支持版本、升级和回滚。
有状态实例不仅是一套资源清单,还与特定存储、身份和集群拓扑绑定。通用包管理无法充分描述其运行期运维知识,这正是Operator进一步接手的范围。书中的Chart文件结构与公共仓库名称属于出版时实现,核心是包、依赖和安装实例的区别。
Helm难管有状态应用进一步保留这一节的机制与边界。
原书依据 · 1 处
11.3.3 Operator与CRD
无状态应用不依赖上次运行留下的本地状态,实例容易替换;数据库等有状态应用则需要稳定身份、存储和成员关系。StatefulSet为Pod提供有序创建销毁、稳定名称和持久化存储,但仍不理解具体应用的备份恢复或索引维护。
Operator用CRD定义高层应用资源,再用专门控制器把“要几个什么版本的节点”等意图转成具体操作。它把领域运维知识写进代码,扩展内置资源无法表达的生命周期行为。好处是用户少接触细节,代价是平台开发者必须实现并长期维护这些应用知识。
Operator固化运维知识进一步保留这一节的机制与边界。
原书依据 · 1 处
11.3.4 开放应用模型
OAM尝试把应用描述按角色拆开:Component给出开发者关心的镜像和参数,Workload描述运行方式,Trait封装日志、扩缩等可复用运维能力,Scope按共同策略划定作用域。运维人员把组件和特征组合成应用配置,平台负责把声明解释为真实基础设施操作。
它与Operator一样可借自定义资源扩展平台,但更强调角色边界和运维能力复用。书中也提醒规范仍在演进,例如预置六种工作负载已被新版放弃,因此应保留关注点分离这个设计思想,而不把当时的资源清单当成永久API。
OAM分离三种角色进一步保留这一节的机制与边界。
原书依据 · 1 处
第12章 容器间网络
本章把网络虚拟化范围收敛为一个具体问题:已经被Linux网络名称空间隔离的容器,怎样彼此通信以及访问宿主机和其他机器。网络功能虚拟化、软件定义网络的完整体系更大,这里只选择支撑容器网络所需的协议栈、虚拟设备和插件机制,承接上一章“隔离之后还要协作”的问题。
网络栈在内核的权衡与本项的问题直接相连,详细机制在对应实质小节继续说明。
原书依据 · 1 处
12.1 Linux网络虚拟化
网络名称空间隔离的不只是IP地址,还包括设备、路由、ARP表、协议栈和防火墙规则。容器看见独立网络世界之后,不能自然依靠宿主机现有连接访问其他容器。下一步必须用虚拟设备把隔离空间连接起来,再通过转发、路由或封装实现跨主机通信。
tun/tap与veth与本项的问题直接相连,详细机制在对应实质小节继续说明。
原书依据 · 1 处
12.1.1 网络通信模型
应用通过Socket把数据交给网络栈,发送时逐层加入传输层、网络层和链路层信息,接收时反向拆开。端口帮助选择进程,IP帮助选择目的网络,网卡与驱动把数据送到实际链路;理解这些职责才能分辨虚拟设备应接在哪一层。
应用层以下大部分处理位于内核,便于隔离不同应用的通信,但用户态与内核态数据复制会产生开销。DPDK等用户态旁路追求更低收发成本,说明网络实现也要在统一保护和性能之间做选择。
网络栈在内核的权衡进一步保留这一节的机制与边界。
原书依据 · 1 处
12.1.2 干预网络通信
Netfilter在IP处理路径设置五类钩子,允许内核模块在接收前、路由后、本机输出或发送前介入。发往本机的数据经PREROUTING和INPUT交给本地进程;转发流量经FORWARD再到POSTROUTING;本地输出则走OUTPUT与POSTROUTING。
iptables把常见过滤、修改和地址转换行为变成可配置规则,再按目的归入表和链,免去管理员编写回调程序。由此可做防火墙与NAT等工作,kube-proxy也可借这种能力把Service地址转到Pod。这里要区分配置工具、规则组织方式和底层钩子机制。
Netfilter钩子进一步保留这一节的机制与边界。
原书依据 · 1 处
12.1.3 虚拟化网络设备
tun和tap把网络栈连接到用户态程序,分别处理IP报文和以太帧,适合需要加密、封装或代理的场景;veth则是一对相连的虚拟设备,一端进入的数据从另一端原样出来,适合连接两个名称空间。多个容器互联时,再用Linux Bridge汇集veth,按MAC地址学习、泛洪或转发。网桥若接收发给自身的数据,还能交给宿主机三层栈处理,配合NAT访问外网。
跨主机时,VXLAN把原以太帧封装到UDP中,让逻辑二层网络穿过三层物理网络。VTEP负责封解包,24位标识提供更大隔离空间;代价是额外包头与处理成本,尤其影响小包。MACVLAN则在同一物理网卡上创建多个独立MAC的虚拟接口,少了网桥学习等步骤,性能好但更依赖底层网络。
这些设施分别连接用户态和内核、两个名称空间、多个设备或多个主机,不能视为同层的任意替换。物理连通性和软件需要的逻辑拓扑分开,才有Overlay与Underlay的区分。
tun/tap与veth进一步保留这一节的机制与边界。
Linux Bridge进一步保留这一节的机制与边界。
VXLAN解决VLAN缺陷进一步保留这一节的机制与边界。
MACVLAN轻量隔离进一步保留这一节的机制与边界。
12.1.4 容器间通信
Docker把底层设施包装成几种网络选择。bridge用veth连接docker0,容器有独立网络空间;host直接共享宿主机网络,免去NAT但端口等资源容易冲突;none只建隔离空间与回环接口,方便自定义;container模式加入另一个容器的网络空间。MACVLAN走副本网卡,Overlay以VXLAN支持跨节点场景。
应从是否要隔离、是否跨主机、是否需要性能及谁管理地址来理解这些模式,而不是只记参数。共享名称空间的容器能用localhost通信,却也必须共同协调端口。
Docker六种网络模式进一步保留这一节的机制与边界。
原书依据 · 1 处
12.2 容器网络与生态
容器网络的专业性使运行时难以独自实现所有方案。libnetwork尝试把Docker网络独立出来,作为CNM规范的实现。下一节的重点并非某个模块的寿命,而是把网络从容器引擎剥离后,插件接口由谁定义、能否跨运行时复用。
CNM与CNI必有一败与本项的问题直接相连,详细机制在对应实质小节继续说明。
原书依据 · 1 处
12.2.1 CNM与CNI
CNM与CNI都把容器网络实现做成插件,承担接入退出网络及地址分配回收两类任务。CNM强调Sandbox、Endpoint和Network等抽象,CNI接口更精简;它们目标重叠,而CRI和OCI分别约束不同层,关系并不相同。
IP管理不能只产生一个不重复的数字,还要遵守网段规划,保证跨节点唯一,及时回收并避免分配延迟耗尽短任务寿命。因此常由Host-Local或协调存储支持的IPAM处理,网络连通与地址生命周期必须同时设计。
CNM与CNI必有一败进一步保留这一节的机制与边界。
容器地址分配与回收进一步保留这一节的机制与边界。
12.2.2 CNM到CNI
Kubernetes起初即使依赖Docker运行容器,也自行维护Pod网络:先创建空网络的Pause容器,再配置网络并供其他容器共享。它拒绝CNM既有技术原因,也有控制边界原因。Docker的本地与全局网络模型及libkv依赖不符合已有etcd的编排平台,接口又没有充分服务非Docker运行时。
Kubernetes转向RKT提案并合作形成CNI,使网络插件能独立于引擎发展。标准的成败因此不仅由接口是否可用决定,也受抽象是否适合多方需求、治理是否允许外部参与影响。
K8s为何选CNI进一步保留这一节的机制与边界。
原书依据 · 1 处
第13章 持久化存储
镜像要保持稳定才能重复创建一致环境,容器写入通常通过写时复制落在独立可写层,而不是修改镜像本体。但数据库数据不能随运行实例一起消失,日志采集器也可能要与业务容器共享同一目录。持久化存储把这些数据的生命周期从容器运行中分离出来,使可重复部署与保留生产状态同时成立。
从绑定挂载到Volume与本项的问题直接相连,详细机制在对应实质小节继续说明。
13.1 Kubernetes存储设计
存储接口多样,加上对历史功能的兼容,使Kubernetes围绕卷形成了许多资源与操作。只平铺阅读参考手册容易把它们当成互不相关的名词。沿着操作系统的卷、Docker挂载、Kubernetes静态及动态分配,再到外置插件来看,才能分清哪些负责描述需求、哪些负责供应资源、哪些只是兼容历史实现。
PV与PVC分离关注点与本项的问题直接相连,详细机制在对应实质小节继续说明。
原书依据 · 1 处
13.1.1 Mount和Volume
Mount表示把外部存储接入访问位置,Volume则把物理存储抽象为可管理资源。Bind Mount直接把宿主目录映入容器,简单却依赖机器环境,跨主机共享与备份管理常需额外人工操作。Volume把存储交给平台管理,并通过卷驱动接入不同后端。
Docker还可挂载tmpfs保存内存临时数据,这不等于持久化。命令中的-v、–mount等历史命名也可能让挂载类型混淆,应明确存储来自哪里、生命周期由谁管理,而不是只看参数名称。
从绑定挂载到Volume进一步保留这一节的机制与边界。
13.1.2 静态存储分配
普通Volume随Pod存在,可供其内容器共享并跨容器重启保留;PV则是独立于Pod的持久存储资源。管理员知道可提供哪些容量和访问能力,开发者知道应用需要什么,所以用户通过PVC声明需求,由系统与PV撮合,避免要求任一角色掌握全部信息。绑定按一对一进行,容量更大的PV也不能把剩余空间再分给别的PVC。
持久性也不保证自由调度。Local PV使用本地盘获得性能,却要求Pod被安排到持盘节点;访问模式与回收策略又分别决定如何挂载和释放数据。应区分资源独立存在、物理位置约束与数据保留策略。
PV与PVC分离关注点进一步保留这一节的机制与边界。
本地卷约束调度进一步保留这一节的机制与边界。
13.1.3 动态存储分配
静态分配依赖管理员先建PV,难以跟上Pod自动扩缩。动态分配让管理员配置StorageClass和Provisioner,用户仍用PVC表达需求;系统据此调用后端创建满足要求的PV,再绑定给应用。StorageClass描述存储类型和供应参数,Provisioner执行实际创建与回收。
这让用户少接触中间资源,并允许通过代码实现更精细的回收行为。但具体能否自动供应仍取决于资源分配器;书中的no-provisioner示例表示不自动创建本地卷,不能只因用了StorageClass就认为所有存储都已动态化。
StorageClass进一步保留这一节的机制与边界。
原书依据 · 1 处
13.2 容器存储与生态
编排平台擅长资源调度和声明式控制,存储供应商更了解各自设备与协议。因此存储能力适合通过外部插件接入,让平台维护统一生命周期,由插件实现后端特有操作。接下来的架构和接口说明,就是把“谁决定”“谁执行”这两个层次分开。
存储接入三阶段与本项的问题直接相连,详细机制在对应实质小节继续说明。
原书依据 · 1 处
13.2.1 Kubernetes存储架构
存储接入分为Provision、Attach、Mount:先分配设备或空间,再让节点能看到设备,最后挂载到应用可访问的目录。对应移除操作按Unmount、Detach、Delete反向进行;NFS等后端可能不需要Attach,所以某一步可为空操作。
PV控制器管理卷与请求的生命周期并触发分配,AD控制器处理节点的附加分离,kubelet中的Volume管理器处理本节点挂载卸载。相同控制回路思想在这里继续成立,具体六类操作由存储插件实现,平台负责按资源状态调度调用。
存储接入三阶段进一步保留这一节的机制与边界。
原书依据 · 1 处
13.2.2 FlexVolume与CSI
FlexVolume把插件做成各节点可执行文件,基本挂载操作易于实现,却缺少内置分配删除能力,部署与跨操作传递状态都不方便。CSI用通用gRPC接口和标准部署组件扩展存储,更易把复杂生命周期纳入统一管理。
Identity描述能力与健康状态,Controller从存储系统角度管理创建、删除、附加和快照,Node从节点角度处理格式化与挂载。配套侧车调用这些接口完成供应、扩容等操作。是否支持某能力由插件声明和实现共同决定,并非遵循CSI就自动支持所有功能。
FlexVolume与CSI进一步保留这一节的机制与边界。
CSI三类接口的分工进一步保留这一节的机制与边界。
13.2.3 从In-Tree到Out-of-Tree
内置驱动能让平台初期迅速支持多种存储,也降低安装负担,但驱动更新被绑定到Kubernetes发布节奏,第三方代码还扩大了核心可靠性与安全风险。迁到树外CSI后,供应商可以独立迭代。
迁移却不能简单要求所有生产配置立即改写,所以CSIMigration让新实现兼容旧接口。它说明更合理的组件边界仍要受既有用户和升级路径约束,架构设计要同时考虑目标结构和迁移成本。
存储驱动迁出主干进一步保留这一节的机制与边界。
13.2.4 容器插件生态
块、文件和对象存储按外部访问接口区分。块存储提供固定块寻址,贴近硬件;文件系统在块之上组织名称、目录和权限,方便使用与共享却增加元数据处理;对象存储以标识访问“元数据加内容”,天然适合分布式扩容和大量静态内容,通常缺少传统目录与任意修改语义。
书中用AWS EBS、EFS和S3分别说明低时延块设备、共享网络文件系统与HTTP对象接口的差别。容器是否需要共享、应用是否要求POSIX、能否直接使用对象API,都是比产品名更稳定的判断维度。书中容量、价格、独占性和性能排序是当时产品及场景的叙述,不能推广为所有现代存储的永久限制。
三种存储按接口划分进一步保留这一节的机制与边界。
EBS、EFS与S3选型进一步保留这一节的机制与边界。
第14章 资源与调度
调度为新建的Pod选择宿主节点。要判断一个节点是否能运行它、哪个节点运行更合适,编排系统首先得知道节点提供什么资源、负载需要什么资源,以及资源不足时怎样退让。因此本章先建立资源计量与保障规则,再解释调度算法。
14.1 资源模型
在Kubernetes的广义模型里,工作负载、存储、策略和身份都能成为资源,以统一的声明描述系统状态。本节把范围收窄为能与物理硬件对应的资源:Node提供、Pod消费,调度负责撮合。CPU不足通常只让程序变慢,因此称可压缩资源;内存不足会导致进程被终止,称不可压缩资源。CPU的计量是逻辑处理器份额,并不保证不同硬件上的同等算力;内存单位也要区分Mi与M等二进制和十进制写法。这些差异决定了超额承诺时的后果。
进一步说明见:可压缩与不可压缩资源。
原书依据 · 1 处
14.2 服务质量与优先级
容器分别声明requests和limits,Pod的总需求由其中容器累加。requests是安排节点时的需求依据,limits是运行时约束,拆开二者可减少用户按峰值申请造成的闲置,却也要承担多个负载同时到峰值的风险。服务质量等级是由声明方式推导的保障层级:所有容器CPU与内存均有相等的请求及上限,才属于Guaranteed;部分设置或留有弹性属于Burstable;都不设属于BestEffort。PriorityClass则由管理员声明优先级,影响排队和抢占:高优先级Pod无法安置时,系统可牺牲较低优先级负载腾出空间。保障级别与业务优先级相关,但并不是同一项配置。
进一步说明见:requests与limits 三级服务质量等级 优先级与抢占。
14.3 驱逐机制
驱逐是kubelet在节点资源受压时终止Pod的破坏性回收,可能中断服务,不能当作语言运行时的安全垃圾回收。软驱逐留观察期与优雅退出时间,避免短暂抖动;硬驱逐越过紧急阈值就立即终止,以保护节点。回收量还需留余量,否则新消耗会很快再次触发驱逐;被控制器重建的Pod也可能重新落回原节点,因此需要考虑压力状态和重新调度。单Pod的这些机制解决不了一个团队的总量约束:应以名称空间承载ResourceQuota,限制一组负载的CPU、内存乃至对象数量。
进一步说明见:驱逐不同于垃圾收集 ResourceQuota。
原书依据 · 2 处
14.4 默认调度器
调度先筛掉不能运行Pod的节点,再对候选评分选出更适合者。大集群不能为每次调度远程询问所有节点,因而采用共享状态的双循环:Informer跟踪资源变化并更新队列、缓存,Scheduler从队列取Pod,使用缓存筛选与评分。缓存可能过时,所以目标节点在真正创建前还要执行Admit确认。选中后不等整个创建流程完成,而是先更新缓存、异步写入绑定状态;失败再由后续变化恢复调度。这用局部的乐观状态换吞吐,最终仍要处理确认失败。书中的Predicate/Priorities与扩展框架描述对应出版时版本。
原书依据 · 2 处
第15章 服务网格
服务网格是专门管理服务间通信的基础设施。容器编排主要把管理粒度推进到容器,网格则在应用旁部署代理,把路由、容错、安全和观测等行为细化到一次远程调用。边车是与应用并列的辅助容器;网格还要有管理这些边车的控制程序。它比早期要求应用主动调用的代理更进一步,通过透明接管流量使治理可被统一执行。
15.1 透明通信的涅槃
网络连通只是可靠通信的前提。服务仍会遭遇远程调用失败、访问权限、流量超载和追踪困难,不能因Pod互通就忽略这些问题。网格试图把非功能性的通信处理放在容器、虚拟网络与代理构成的基础设施中,为应用呈现更透明的调用体验;这是一项工程目标,不等于远程通信已经没有失败和成本。
15.1.1 通信成本
通信可靠性经历的五个阶段,是职责持续外移的过程:业务开发者自行补救失败;平台团队抽出公共库;库移到进程外成为代理;代理成为透明强制接管流量的边车;最后用控制平面统一管理边车。公共库专业性更好,却绑定语言并增加学习负担;独立代理脱离语言,却仍可能被应用绕过。边车解决透明与强制接管后,又产生了“怎样管理代理”的问题,于是网格把转发业务数据的数据平面与分发路由、安全策略的控制平面分开。
进一步说明见:通信可靠性五阶段。
原书依据 · 1 处
15.1.2 数据平面
数据平面由边车代理组成,实际转发应用入站和出站流量,并按策略执行路由、负载均衡、认证和遥测。代理先要注入Pod:可用有SDK侵入的基座、手工加容器或准入Webhook自动注入;注入之后,还需把应用流量重定向到代理。书中iptables方式通用,但会增加协议栈路径,因而讨论eBPF与CNI协作的优化方向。代理收到流量后如何处理则由动态策略决定:xDS把监听端口、上游服务集合和路由抽象为Listener、Cluster、Router,控制平面以发现API下发变化,Filter插件提供可扩展的流量处理能力。这三组问题分别解决“代理在哪里”“流量如何进来”“进来以后做什么”。
进一步说明见:边车自动注入 iptables劫持的代价 xDS三种资源 Envoy过滤器扩展。
15.1.3 控制平面
控制平面不直接转发服务请求,而是告诉代理该怎样转发、怎样保护和观测通信。Istio早期分成Mixer、Pilot、Galley、Citadel等进程,原本希望独立部署,但实践出现部署复杂与职责边界不清的问题,1.5把主要职责收进istiod单进程,内部仍保留逻辑模块。其工作可分四类:向数据平面注入与分发配置;定义路由、治理及调试行为;提供证书、认证和授权;收集访问日志、链路与指标。控制程序的拆分本身也要接受实际收益的检验,这承接了全书对微服务成本的提醒。
进一步说明见:Istio回归单体istiod 控制平面的四类职责。
原书依据 · 2 处
15.2 服务网格与生态
服务网格由数据平面和控制平面组合而成,标准化也自然有两个边界。SMI尝试统一Kubernetes应用与控制平面之间的配置,使应用可在支持标准的控制平面之间迁移;UDPA尝试统一控制平面与代理之间的协议,使不同数据平面可以替换。这两者面向不同连接点,不能相互代替。本节的市场格局是原书约2020年的历史记录。
进一步说明见:SMI与UDPA。
原书依据 · 1 处
15.2.1 服务网格接口
SMI以Kubernetes CRD落地:向上绑定Kubernetes资源模型,向下保持服务网格供应者可替换。书中v0.5以四类API描述流量特征、版本流量比例、度量集成点和身份访问控制。标准化可减少应用绑定私有资源的代价,但当时的协议匹配和身份支持仍有限;复用Service来拆分流量也会引入嵌套Service。因而“支持共同接口”与“功能已经完整等价”应分开判断。
进一步说明见:SMI四类流量接口。
原书依据 · 1 处
15.2.2 通用数据平面API
UDPA把xDS实际形成的代理控制经验提升为通用规范的方向,核心是统一控制平面与数据平面的交互。原书所述设计把传输协议与数据模型分开,以便未来不同模型共享传输机制;这类似把承载消息的渠道与消息描述的资源分开。原文也明确记载当时仍处早期,曾提出的xDS演进时间表没有按期实现,因此不能把计划当作已完成的规范。
15.2.3 服务网格生态
书中分别比较数据平面与控制平面的产品定位。早期Linkerd依赖JVM,启动、预热和内存开销使它在边车场景落后;Envoy以较低开销和公开xDS接口获得多种控制平面采用,Linkerd2改用Rust后另走集成路线。MOSN在SOFA与RPC生态中有便利,Consul Connect侧重已有环境的平滑连接。控制平面还要权衡功能与易用:Istio功能丰富,Linkerd2、OSM等以较小功能集合降低复杂度。这里保留历史案例的取舍逻辑,产品份额与项目状态只代表原书时期。
进一步说明见:Linkerd败给Envoy 功能丰富与易用难兼得 网格产品的集成定位。
原书依据 · 3 处
第16章 向微服务迈进
微服务不是消除软件难题的银弹,任何技术都不能无条件换来更低开发成本。本章从前文具体技术退一步,讨论采用动机、组织前提、服务边界和长期治理。它的作用是限制技术热情:先确认问题和收益,再决定是否把一个系统拆成分布式协作,而不是因已学会某种工具就使用它。
16.1 目的:微服务的驱动力
微服务的主要价值在于有效拆分与物理隔离,使局部服务可以独立开发、部署、升级和替换。单纯为提高性能而拆分缺少充分理由:单体也能扩展部署,拆分还引入网络与协调成本,关键瓶颈不会自动消失。合理动机可能来自技术异构、少数专家保护关键模块、商业交付要求,也可能来自创新业务的快速迭代与遗留系统的渐进替换。这些动机都要回到收益是否超过复杂性成本,而不是把架构名称本身视作结果。
原书依据 · 2 处
16.2 前提:微服务需要的条件
开始微服务不只需要技术工具,还需要四类条件。康威定律指出软件依赖结构趋同团队沟通结构,服务边界若与组织权责冲突,会把进程内协作变成昂贵的跨团队沟通;其次必须有撑起架构和运维基础的专家。技术上应具备快速预置、监控和部署能力,但自动化要朝自治发展,避免不断增加新的人工维护层。最后,要等复杂性确已成为生产力瓶颈,拆分才有合理收益;按远景提前一步到位可能反而拖慢当前工作。完全自治不是启动门槛,能力应与当下规模匹配。
进一步说明见:康威定律是首要前提 微服务化四个前提 以自治为目标的自动化。
16.3 边界:微服务的粒度
服务粒度不能凭“越小越好”决定。下界来自三项约束:能独立发布运行与测试,强相关数据和功能保持内聚,至少包含一个业务实体及其完整操作。过细会增加调用成本、破坏强一致性边界,或形成互相依赖才能工作的伪独立服务。上界则与团队协作有关:沟通关系随人数增多而急剧增加,原书用两个披萨团队在一个研发周期内完成的需求范围作经验上限。DDD是进一步识别业务边界的方法,但本节没有展开其专门模型,只从性能、一致性、独立性与团队能力给出边界。
原书依据 · 2 处
16.4 治理:理解系统复杂性
治理包含两个层次:使系统当前正确、稳定地运行,以及让它在持续变化中保持合理质量。前者是静态的运行与协作约束,后者涉及需求和团队随时间变化。把两层分开,才能理解为何安装监控或制定一次架构规范并不足以长期解决复杂性。
16.4.1 静态的治理
软件复杂性与人能否理解和协作有关,不能仅靠服务数或代码行判断。认知负荷是接受概念、业务和代码的理解负担;协作成本是多人共同研发的沟通管理成本。微服务引入异步、远程失败和去中心化等知识,提高前一项;若服务与团队拆分对齐,又能用分治降低协作增长。原书用单体平方级、微服务NlogN级协作成本作解释性模型,说明为什么小规模拆分未必合算,大规模可能受益。这是帮助理解趋势的简化论证,并非测出任意项目收益的精确公式。
进一步说明见:复杂性来源与规模效应。
原书依据 · 1 处
16.4.2 发展的治理
长期接受新需求会让原有设计承压:专家离开、新人接手、工期迫使原则让步,细小妥协积累为架构腐化。静态治理能延长质量保质期,却无法保证设计永远适应未来。演进式设计因此把系统看成满足阶段需要、允许部分替换和报废的产品,像随人生阶段换房,而非一次图纸施工到永久终局。前一版本的价值是已经服务用户并让团队迈向下一阶段,允许替换并不否认当时良好设计的价值。
进一步说明见:架构腐化与演进式设计。
原书依据 · 1 处
附录A 技术演示工程实践
附录用同一书店业务展示架构演进,便于把变化归因于技术职责的迁移。单体版本以分层结构组织业务和基础设施,可通过镜像、Maven或IDE运行;默认内存数据库用于即开即用,持久数据则需切换配置。Spring Cloud把系统拆成业务服务与配置、发现、网关等平台服务,配置中心要先于其他进程启动;同机模拟扩容要调整端口。Kubernetes版本保留业务代码,用ConfigMap、Service与资源清单接手部分技术职责,并借Skaffold缩短构建部署反馈。
Istio继续把网关、熔断、访问控制与观测移到代理和控制平面,让单服务接近普通Spring Boot开发;终端用户认证仍需要令牌签发方,无边车调试也会失去相应治理能力。最后的Lambda演示说明Serverless是运行方式,可承载微服务而非必然替代它,本地SAM与云端CLI部署分别检查不同环节。这些命令与组件组合是出版时的实践材料,本次仅依据原文整理,没有执行部署或宣称现在仍可原样运行。
进一步说明见:同业务对照架构演进 单体演示构建与运行 演示环境切换数据库 分层隔离业务与技术 标准接口的替换边界 微服务启动与本地扩容 把技术组件迁入集群 集群应用部署与调试 网格迁移保留业务认证 调试时开关边车 云函数本地测试与发布 云函数不替代微服务。
各平台组件的职责与替换边界见云组件职责与替换。
原书依据 · 16 处
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
- 附录A 技术演示工程实践 · 查看原书依据
附录B 部署Kubernetes集群
附录把部署组织成从主机环境到工作节点加入的连续过程。先保证主机名唯一、网络互通、资源足够,注册软件源并装好引导工具kubeadm、节点代理kubelet和操作工具kubectl。初始化前核对Swap及cgroup配置;网络受限时按安装版本列出镜像、从可达来源预拉并调整名称,避免初始化时远程拉取失败。
控制平面初始化后,还要给操作用户配置kubeconfig,并部署匹配Pod网段的CNI插件,才能形成可操作、可通信的集群。实验环境可以移除控制节点污点或调整NodePort范围,但这改变了隔离与端口策略;命令补全和状态查询便于管理。其他节点应使用join加入已有集群,令牌过期则重新生成。原书的仓库、版本、Swap支持及驱动默认值都有时代条件,本次记录其步骤目的和依赖,没有把旧操作表当作当前安装指南。
进一步说明见:集群工具安装与分工 初始化前统一节点环境 受限网络预拉取镜像 初始化控制平面与凭据 用CNI插件建立Pod网络 小集群调度与端口调整 命令补全与集群检查 工作节点加入与令牌更新。
原书依据 · 11 处
跨章综合
可靠性需要组合不同层次的约束。访问和事务先定义请求与状态变化的语义,分流与缓存再调整负载路径;缓存引入的数据新旧问题,不能只靠增加副本解决。服务拆分后,共识处理复制协调,注册发现解决位置变化,限流和容错限制失败传播,可观测性提供判断系统状态的证据。
基础设施能接管重复机制,但业务语义仍需明确。例如容器恢复只恢复运行实例,并不保证某笔扣款恰好执行一次;通信超时只说明结果未知,不证明服务没有处理。把业务正确性、资源隔离和运行恢复分开设计,再明确它们的接口,比用一个“高可用”标签概括所有问题更可操作。
发散与实践
以下为读者的后续实践计划,区别于原书结论和已经执行的事实。现存三项分别研究共识实现、不同层次的断路器、以及本批本地读书流程的运行指标。专项首轮材料与两层阅读计划见ideas中的对应文件;未运行、部署或测量完整实践。