此笔记位置已失效,请从目录继续阅读。
全书导读
基础设施即代码(IaC)是把计算、网络、存储及运行环境的定义交给代码和自动化来管理。它的目标不仅是减少手工点击,更是让环境变更像软件变更一样可追溯、可重复、可检验,并能持续支持组织的需要。
本书第三版以虚构的FoodSpin业务为贯穿案例,解释怎样从组织目标选择基础设施能力,再把资源划为可组合组件,最后通过测试和交付流程安全地改变现有系统。代码例子主要是说明思想的伪代码,不能直接作为某个云平台的部署配置。理解本书时应先关注对象、依赖与变更风险,再把原则应用于具体工具。
全书主线
第一部分建立共同语言:代码化管理解决什么问题,云资源的可重建性怎样影响恢复,以及平台、工具和语言分别承担什么责任。这为后续设计提供判断标准,而不是先确定某种工具再让所有问题迁就它。
第二部分把原则转成结构。组件是可理解和复用的构建单元,栈是一起部署和管理的资源集合;配置决定同一份定义如何形成具体实例,栈之间的集成则决定变化能否相互隔离。代码库、服务器、环境和应用运行时的设计都要回答:哪些东西一起变化,谁提供接口,怎样控制差异与依赖。
第三部分把结构放进持续交付。代码先经过构建、分发、流水线及分层测试,再部署到目标环境;既有基础设施的演进尤其要处理真实资源、状态和期望定义的关系。治理嵌入这一过程,为每次小变更提供反馈和控制。设计决定能否小步改变,交付反馈又验证设计是否真的支持独立变化,两者形成持续改进的循环。
第00章 前言
基础设施即代码是用代码定义和管理基础设施的方法。本书第三版关心的是怎样把云资源组织成可维护的组件,并把变更纳入可靠交付流程。工具让自动化成为可能,但最终收益来自团队怎样进行设计、检查和交付,而不是选择工具之后自然出现;工具收益来自工作方式解释了这一前提。
阅读时需要区分三个层次:原则给出选择标准,实践描述实现方式,模式针对常见问题提供有条件的方案。原则与实践的区别说明为什么不能把“最佳实践”当作不受场景限制的命令。全书使用虚构的FoodSpin餐饮服务和伪代码帮助比较方案;这些例子用于说明设计思想,不能视为可直接部署的产品配置。
与前两版相比,本版更重视容器或无服务器运行环境、通用编程语言以及应用代码与基础设施代码的集成。其边界是利用代码管理IaaS云基础设施,并不完整教授每种云产品、SRE或容器编排工具的用法。后面的基础、设计和交付三部分,都应围绕组织所需的价值与可持续变更来理解。
原书依据 · 2 处
第01章 什么是基础设施即代码
基础设施即代码首先是用代码管理基础设施,更深层是把设计、测试、版本控制与持续交付应用于基础设施。云技术降低资源供给成本,却也容易放大系统蔓延;如果治理仍以延缓变更为中心,就会失去快速纠错的能力。DevOps强调跨角色协作,使自动化真正成为缩短反馈的手段。 参见基础设施即软件工程、云时代的变更治理、DevOps以协作为核、战略牵引基础设施。
架构能力必须服务组织目标。跨地区隔离与用户跨国使用发生冲突的例子说明,商业假设需要及早进入设计;FoodSpin则把扩市场、改善质量、控制成本转成一致环境、快速供给和可靠运行的要求。 参见一致性支撑业务增长、为持续变更而设计、自动化随增量生长。
基础设施不存在一次建成后永不改变的终态。漏洞、性能、功能和规模需求要求系统持续演进。先手工建成再补自动化通常导致返工;从最小自动化随业务增量扩展更可行。速度与质量相互增强的条件,是让小变更经过快速测试和可靠交付,而不是跳过治理。四项交付指标同时观察速度、失败和恢复,帮助判断改进是否兑现。 参见速度与质量相互增强、四项交付指标、代码定义的三种收益。
三项核心实践组成闭环:代码定义提升可复用、一致与可见性;持续集成和测试所有在制工作及早暴露问题;小而独立的组件降低每次改变的理解与影响范围。 参见持续集成未完工作、小组件允许独立改变、反脆弱的基础含义。
第02章 云基础设施原则
云资源脱离了固定物理位置,实例随时可增删,系统因此必须把底层不可靠当成正常情况。可靠服务的基础是可以无须重新决策地重建部件,并在资源改变时继续运行。重建代码只覆盖事先可定义的部分,运行时数据仍需备份和恢复策略。 参见以不可靠资源建可靠服务、可重建才可恢复、雪花系统的替换路径。
难重建且差异不明的雪花系统,会让团队怕变更而进一步失修。可用代码建立并行替代物,通过测试证明其正确性和可重复性。可丢弃性进一步要求安装、配置和持久状态的边界明确,文件服务器在虚拟机重建后消失的案例展示了违反这一边界的后果。 参见可丢弃资源隔离状态、减少无意差异、配置漂移的两种边界。
减少差异能控制复杂度,但必须区别业务需要与无意分叉。本章同时澄清多环境之间的漂移和实例偏离代码的漂移;持续应用配置并不能自动修正多个不同代码分支。环境差异、自动化不可信和不持续执行形成恐惧环,可从小范围反复验证与定时同步打破。任何值得重复的操作都应沉淀为明确脚本,以免临场决策继续制造差异。 参见打破自动化恐惧环、一次性操作也要可重复。
第03章 基础设施平台
本章建立三层系统模型:应用承担业务价值,工程平台提供运行时和运维能力,基础设施平台提供计算、存储和网络资源。基础设施即代码依赖IaaS的可编程接口,将底层资源组装成平台服务。这个模型主要用于统一讨论范围,不应把不同岗位习惯的“平台”“基础设施”“工作负载”含义直接等同。 参见平台的三层边界、IaaS让资源可编程、原始资源与组合资源、计算资源面向执行。
资源既有磁盘、子网等原始单元,也有数据库、容器集群等组合单元。计算抽象从裸机到函数运行时;存储根据挂载、访问模型和功能区分;网络代码则将测试和细粒度边界带入动态环境。公有与私有部署都可使用这种机制,但私有平台必须承担硬件之外的持续运维责任。多云也有不同目标:混合、按优势分工和动态跨云移植的投资范围差异很大。 参见存储资源的能力差异、网络代码提升验证能力、私有云成本需算全、多云目标要分清。
工程平台应被理解为一组面向使用者的能力。相同监控、秘密或网关能力可由自托管软件、云服务或SaaS提供,基础设施代码负责不同范围的供给和集成。平台还需要管理自身的交付服务,包括应用交付、平台服务编排和资源交付。自助服务可以经门户显式触发,也可以随应用交付自动创建依赖;服务能力与交付机制需要一起设计。 参见工程平台是一组服务、平台服务的三种供给、交付服务管理系统本身、平台自助的触发方式。
第04章 基础设施工具与语言
本章把基础设施即代码与局部任务脚本区分开:关键是将执行过程中的决策提前固化,让供给、更新和恢复能够无人值守。可代码化的对象覆盖资源、服务器、部署、流水线、平台服务、测试与监测。代码与配置可以按共性和实例差异划分,但两者都应以工程纪律管理,敏感值则不能明文进入版本历史。 参见从任务脚本到无人值守、代码覆盖完整交付面、代码与配置的工作划分、配置外置才可工程化、版本库不保存明文秘密。
理解工具首先要理解执行语境。应用代码部署后运行;基础设施代码在部署过程中生成和落实资源状态。部署可拆为组装依赖、编译期望模型、对照当前状态并执行修改。调试器主要看模型生成,预览主要报告状态差异,二者都无法单独证明最终资源行为。状态映射连接代码身份与真实实例,因而重构代码也可能改变资源生命周期。 参见部署时执行与运行时效果、基础设施部署三阶段、预览不能证明全部后果、状态映射代码与资源。
选工具要分开比较四个维度:过程执行与幂等收敛、命令式语法与声明模型、领域语言与通用语言、底层资源与高层能力。命令式语言可以生成声明式模型,支持多云的工具也可能仍要求云特定代码。高层可移植抽象降低使用复杂度,同时增加维护和共同能力交集的约束。 参见幂等是持续收敛的基础、命令语言也能声明状态、按复杂度选择语言、领域语言与通用语言。
Infrastructure from Code尝试把业务相关的基础设施要求放回应用开发语境,再由独立库处理底层供给。后代码模型进一步尝试让代码、图形界面和API操作同一状态图;本章保留其探索性质。贯穿这些选择的标准是能否清楚表达意图、减少临场决策,并让资源改变可以可靠验证。 参见多平台工具不等于可移植、抽象层级独立于语法、从应用代码推导设施、数据模型驱动的后代码。
原书依据 · 17 处
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
- 基础设施工具与语言 · 查看原书依据
第05章 基础设施代码设计原则
基础设施设计的目标是让系统满足当前需要,同时能够理解、修复和持续改变。CUPID把可组合、单一目的、可预测、惯用和领域导向作为评估视角。内聚检查组件内部是否围绕共同目的,耦合检查组件之间是否经常必须一起改;拆小和独立不是一回事。 参见CUPID评估设计属性、内聚看共同变化、耦合看联动修改、依赖必须无环、接口契约显化依赖。
提供者和消费者的依赖应无环并形成公开契约。日志服务暗中复用容器子网导致重构中断,说明依赖必须明确。组件层的稳定输出比引用内部资源名称更可组合,也允许开发测试使用轻量提供者。独立测试和交付持续施加设计压力,使这些边界在实践中接受检验。 参见最少知识支持替换、测试压力改善设计、生命周期有不同边界、源码按工作范围组织。
源码、包、部署和运行资源有不同的组织要求,设计不能只盯着文件夹。源码受到所有权和共同工作集约束;交付受到停机协调与合规约束;运行受到伸缩、地域、恢复、数据隔离、生存期及费用影响。同一部署定义可以产生多个隔离实例,运行隔离不一定要求代码分叉。 参见拆分缩小停机协调、合规边界限制流程范围、按伸缩与分布拆实例、按恢复与生存期分组、托管成本影响资源布局。
跨阶段还要看认知规模、共同变化历史、组织结构、拥有成本和安全边界。小组件降低单次影响却增加集成关系;频繁提交能帮助识别真实共同变化。团队责任应与架构相互适配。网络分层主要限制网络攻击,IaaS管理面则必须依靠账号与权限隔离,不能将代码分组误当成安全屏障。 参见组件大小转移复杂度、组织边界塑造架构、差异驱动总拥有成本、网络分层不隔离管理权。
原书依据 · 18 处
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
- 基础设施代码设计原则 · 查看原书依据
第06章 基础设施组件
本章给出四个用于交流设计的组件概念:资源、代码库、部署栈和基础设施组合。资源是供给原语,库解决代码共享,栈解决完整独立部署,组合解决工作负载所需能力及多个栈的集成。工具的名称不统一,必须看它实际承担哪个职责。 参见四种基础设施组件、从工作负载理解需求、组合面向消费能力。
设计应从运行的软件需求开始。工作负载包含业务软件也包含平台服务,能力图先描述专用与共享需要。组合面向消费团队,栈围绕部署要求划分。栈的项目、构建、期望模型与运行实例处于不同阶段;模块也能承载完整栈,由部署包装项目将其实例化。 参见栈连接代码与运行实例、代码库与部署包装、DRY应复用知识。
复用要区分知识共享与运行共享。库、栈项目、真实实例是三种不同共享点,各自带来不同耦合。DRY应减少同一知识的多份表示,而不是给每个相似底层声明套薄包装。无共享主要消除运行期争用,完全可以共用同一代码定义。 参见共享库也引入耦合、三种共享不能混同、无共享针对运行资源。
按工作负载纵向划分资源,让消费团队更容易独立改变,也可保留确有用途的共享栈。资源应放到最具体的适用层,环境与全局底层不应知道单个应用细节。完整设计流程因此逆着交付路径,从工作负载到组合、栈、项目、库和具体资源逐层推导;实际采用时从当前小范围需要自然生长。 参见纵向设计对齐工作负载、资源放在最具体层、逆向推导基础设施设计。
第07章 设计可部署的基础设施栈
部署栈是基础设施即代码的基本交付单元。工具操作整个栈,因此资源越多,验证、定位与修复范围越大;拆成小栈又增加集成关系。本章用模式语言帮助比较取舍,而非给出一个固定大小。 参见模式用于讨论取舍、栈大小平衡两种复杂度、全系统栈适合简单域。
全系统栈适合简单且一起变化的资源集合;当它变得难懂、缓慢、冲突频发和低内聚时,就成为单体栈反模式。应用组栈围绕相关服务或团队工作范围组织,可作为拆分中间态;单服务栈进一步让服务团队独立改变专用基础设施;微栈根据生存期和变化规律继续拆分。真正供多个工作负载使用的网络、计算或平台能力,可以留在内聚的共享栈中。 参见单体栈阻碍反馈、应用组栈对齐协作域、单服务栈收窄影响。
另一组模式解决多实例问题。把多个环境装进同一次部署会让测试修改威胁生产;为每环境复制完整代码虽分开部署,却形成代码雪花和漂移。可复用栈用一个实现配合独立实例身份解决这两个问题,以配置表达小差别。 参见微栈按变化边界拆分、共享栈只放共享资源、多环境同栈放大风险。
同源并不等于持续一致。若某些实例长期不接收更新,未来升级同样会变危险;需要流水线把验证后的代码及时推广到所有实例。环境应有几个、叫什么,仍应从组织需要决定,书中三环境只用于示范。 参见代码雪花积累环境漂移、可复用栈独立实例化、同源代码也要及时推广。
第08章 配置基础设施栈实例
栈实例配置,是让同一份栈代码通过输入值创建不同部署实例,而不复制实现。差异可能只是资源唯一名,也可能是容量。栈参数保持简单说明何时参数化足够、何时应重新划分栈;配置描述结果而非环境进一步把共享实现从具体环境名中解放出来。
参数来源各有成本。手输参数容易遗漏和环境变量的隐式耦合解释人工与隐式状态的局限;脚本固定实例参数把值纳入可重复调用。配置文件分离实例值更清楚地区分数据和逻辑,但配置目录按变更组织提醒目录需要服务于真实修改路径。包装栈只承载配置把共享实现作为版本化库,逐环境选择版本时尤其有用。
部署系统也可保存参数,但流水线参数避免膨胀指出过度依赖流水线会损害抢修能力。参数注册表的独立性让多工具共享参数,同时引入可用性和恢复依赖;注册表实现的取舍与配置权威来源须明确说明不应为了集中而抹平各专用系统的责任。
秘密是需要额外保护的参数。秘密生成时机的权衡区分预生成、部署生成和运行时短期凭据。加密文件仍需保管密钥、秘密服务管理生命周期和运行时注入的信任边界分别解释存储、生命周期和交付给进程的责任。最后,日志也会泄露秘密强调访问链的末端输出同样影响安全。
原书依据 · 17 处
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
- 配置基础设施栈实例 · 查看原书依据
第09章 集成基础设施栈
独立部署的栈之间仍有资源依赖,例如计算栈使用网络栈的子网。跨栈依赖需要契约解释这种依赖不能只靠固定名称维持。
资源发现有三个主要来源。资源匹配即接口直接查云平台,避免工具绑定,但名称和标签成为必须维护的约定。栈状态查询绑定工具使用显式输出,接口清楚却依赖状态格式。集成注册表显式发布通过中立存储交换标识,支持不同工具,但也增加关键服务;多值发现保持一致补充跨栈读写时的整体一致性边界。
来源选择之外,更重要的是发现代码放在哪里。发现内嵌形成分布单体说明小栈不等于独立栈;依赖注入隔离发现让消费者只声明需要的值。脚本编排可替换依赖可在外部实现查询,组合声明连接关系则把连接变成声明,并能在测试时替换为轻量夹具。这使开发、测试和生产共享同一栈实现,同时采用适合各上下文的依赖来源。
第10章 设计基础设施代码库
代码库是被栈使用的实现单元,栈则是部署单元,两者不宜混淆。门面模块缩小接口通过固定规范和少量参数减少复杂性;无价值包装增加负担说明仅转发参数的自定义层难以抵消维护成本。未复用模块可能多余进一步要求抽象服务于真实复用或隔离测试需求。
一组稳定而紧密相关的资源可以用组合模块封装稳定资源封装。若变体不断增加,面条模块难以独立测试揭示它已经失去聚焦;领域实体从需求出发则以运行应用等领域需求驱动资源生成,并采用能自然表达动态逻辑的命令式语言。
栈模块充当交付单元解释为何某些工具把完整栈放入库:它们需要借用库的版本和分发能力。无论使用哪种模块,都不能忽视模块化单体仍是单体的边界:只有真正独立发布和部署,才能降低整栈变更和反馈的成本。
第11章 以代码构建服务器
服务器不是只有一个虚拟机资源,它还包含软件、配置、数据及支撑资源。软件配置数据边界确定代码能够管理什么;服务器角色聚合配置把不同用途的模块组合成可应用入口。服务器供给分阶段说明物理机和云虚拟机都能自动创建,事件创建需就绪检查则使扩缩容与失败恢复可以重复执行同样流程。
创建策略可在镜像和实例之间分配工作。镜像烘焙与实例配置比较速度、一致性与灵活性;拉取配置减少入站权限和推送配置需要外部控制展示配置执行方向如何影响代理、连通性和权限。
服务器运行后的管理策略同样决定一致性。按需推送积累漂移解释为何有代码仍会产生雪花;持续同步纠正手工改动维持受管内容,但不能清理全部历史。替换服务器消除历史从新起点重建,再经验证和切换接管业务;不可变服务器的范围将替换确立为配置和软件变更的唯一途径。
自建镜像的价值需要与镜像维护成本相比较。热克隆复制历史污染说明运行中实例不能充当干净的构建来源;镜像来源决定控制力比较安装器和库存镜像。最后,固定起点简化构建脚本提醒工具复杂度应匹配构建状态,不必把处理未知服务器状态的全部机制带入一次性镜像构建。
第12章 设计环境
环境是围绕工作负载、平台服务和控制策略构成的逻辑分组。环境边界必须可演进把交付阶段、责任对齐和系统副本区分开。对交付路径,交付环境的三重张力要求兼顾隔离、一致及必要差异;扇出交付依赖同一构建解释为何软件变体会改变生产路径的数量。
分环境并不只是生产与测试分开。共享资源扩大协调成本说明架构边界如何减少无关负载耦合,交付环境统一责任避免组织分工制造配置分叉,治理隔离限制攻击范围则把数据和权限边界纳入设计。
环境副本有不同目的。环境副本支持韧性扩容提供环境层冗余,地域边界不等于机房允许跨区环境或区域副本,多租户节省运行成本则比较客户隔离在软件层与独立实例层实现的成本。
环境抽象有三层解释物理、虚拟和配置环境;隔离层级看设计约束指出共享平台的升级与故障影响不会被抽象消除。基础设施分层独立验证将平台测试与应用测试分开。实施时,资源组承载治理边界使云账户等结构服务权限及核算;细粒度资源组便于移交要求管理代码化。最终,多栈复制组成环境把环境作为一组可独立演进的部署单元,而非一个越来越大的栈。
第13章 提供应用运行基础设施
应用运行基础设施直接支撑工作负载执行,区别于构建交付工具和运维辅助服务。从应用能力设计基础设施从应用需求出发,先定义计算、消息、存储等能力,再决定具体实现;运行服务有三种来源把云资源、自托管软件和外部服务纳入同一能力地图。
计算平台并非只有容器。服务器集群同构伸缩和应用集群动态分配负载区分同构节点与动态调度应用;托管与自建集群的取舍解释谁拥有集群管理责任。无服务器转移执行责任再把事件监听和执行管理交给平台,但无服务器仍有基础设施提醒资源依赖及厂商边界仍然存在。业务系统边界会移动要求职责转移后仍保持可维护的业务与系统界面。
集群规模与环境结构需要共同设计。集群拓扑看四类约束提供判断依据,集群与环境可多对多比较一个集群多环境、每环境一集群、每环境多集群以及跨环境分能力集群。更多集群带来隔离,也要求一致的自动化管理。云原生重在利用动态能力把这些选择重新连接到弹性、韧性和可重复交付,而不是某个技术标签。
第14章 核心基础设施交付工作流
基础设施持续交付以小增量持续形成可用系统。持续交付逐次构建质量把验证和反馈前移,全程自动化保留人审把人工审批与手工执行分开。为了让证据成立,修复重新进入流水线要求下游问题回到源代码;变更覆盖全部相关系统则要求统一代码真正到达每个实例。
交付速度影响一致性:缓慢流程诱发绕行会把人推向临时手工修补,代码始终保持可发布使常规与紧急变更都有可信起点。同步部署纠正外部漂移持续协调代码和资源,交付停机影响所有环境把开发测试环境的可用性也纳入测量。
工作流由开发、构建、测试、发布及运行组成。构建生成可识别版本确保阶段间传递的是可追溯候选,工作流按增量循环说明这些阶段要对每次小变更反复运行,通过验证不强制立即生产发布,失败后则从源头重启。
组织应服务于这条价值流。团队类型管理认知负荷解释团队拓扑角色;团队交接增加等待风险和价值流优先端到端瓶颈要求把跨队等待纳入改进。全栈责任不等于技能相同强调共同结果责任,赋能团队转移能力提供专业成长支持。交付指标兼顾速度质量最后把速度、失败、恢复、投入与版本分散结合起来,评价基础设施是否促进整体交付。
原书依据 · 16 处
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
- 核心基础设施交付工作流 · 查看原书依据
第15章 构建与分发基础设施代码
构建与部署分层:基础设施代码处理可分为组装、编译和执行。组装解析代码库、模块和工具插件,产出与实例无关的构建;编译加入某实例的配置、外部资源引用及工具状态配置,生成期望状态模型;执行才对照真实资源调用平台 API。明确这个边界,才能避免把实例配置混入通用发布包。
一次构建多次部署:一次构建、多次部署是每次提交只解析一次构建依赖,把同一构建送入各环境;每次部署只补实例配置。若每次部署重新解析依赖,测试与生产可能得到不同版本,故障难以重现。同一代码提交本身不足以证明环境一致,构建依赖也须固定。
依赖打包与锁定:固定依赖可把下载的依赖文件随构建打包,或在构建阶段解析直接及传递依赖并写入版本锁文件。前者分发真实内容,后者分发精确版本约束;两者都应与构建一起保存。合规审计需要的依赖版本、测试和变更轨迹由此成为交付过程的自然产物。
审查位置影响反馈:拉取请求把人工审查放在合并和发布候选构建之前,易于强制审查但拉长内循环。主干开发依赖足够快且可靠的自动测试,使小增量提交快速形成候选构建;仍可通过结对或后续流水线阶段审查。取舍是人工审查的位置和工程成熟度,不能把主干开发理解成不审查。
不可变构建的晋级:构建从发布候选进入测试、集成和生产时,代码内容应保持不变,晋级表示已通过某阶段的验证。环境差异由实例配置表达,不能靠每到一个环境就编辑栈代码,否则测试的已不是最终上线的东西。发布的是同一候选构建获得批准,而非重新制作一个版本。
仓库内分发构建:直接从源码仓库分发时,要用提交 ID 或唯一标签把构建作为明确对象传到后续阶段。另一种办法是一环境一分支,用合并表示晋级,控制器据环境分支持续同步。无论物理方式如何,关键都是知道当前部署的是哪个离散版本,而非含糊的最新代码。
制品分发三要素:基础设施代码可像应用一样被打成压缩包、系统包或容器镜像。分发系统包含打包器、存放版本的仓库和取包部署的部署器;现成包生态能提供这三者,也可组合归档工具和对象存储。包装格式只是载体,版本身份和部署契约才决定其能否可靠晋级。
服务器模块版本组合:服务器配置代码及镜像也必须先测试、再晋级。若所有模块一起版本化,组合关系随整体固定;若每个模块独立发布,则需要显式依赖描述和版本管理,避免生产组合与测试组合不一致。生产已应用版本和正在开发的版本应能同时保存。
包装栈分发库:包装栈把可复用部署栈实现成版本化代码库,每个环境用一个独立栈项目调用它并提供实例配置。这样可借用模块仓库等库分发机制,即使工具不支持部署级制品。代价是必须管理这些薄包装项目;可复用实现与实例配置的职责仍应分离。
扇入交付的边界:扇入先独立构建和测试组件,再把选定组合一起集成测试并向后晋级。后续阶段仅部署已改变的栈,可并行时并行,因此兼顾独立变更与组合可靠性。但组件和团队过多时协调成本迅速上升,宜用于同一流对齐团队拥有的一组组件。
联邦交付靠契约:联邦交付让每个组件独立贯穿各环境,团队不用协调统一发布。风险是测试时的依赖组合和生产组合不同,必须用向后兼容的接口、契约测试、监控与渐进部署控制。团队内可扇入,团队间可联邦;解耦交付也有利于以后转移组件所有权。
单仓构建的含义:这里的单仓模式不仅是把文件放一个仓库,而是一起构建多个可独立部署的制品及共享代码,以验证共享代码变更对所有消费者的影响。大规模时不能每次全量重建,应利用依赖有向图只构建和测试受影响部分,并结合并行化;否则统一集成会拖慢反馈。
开发环境也需预检:开发和测试环境支撑业务交付,本身也属关键系统。基础设施变更应先在隔离环境通过自身测试,再进入软件交付环境,验证原有软件在新基础设施上继续运行。把开发环境当未经测试的试验田会中断多人工作,并延误修复和发布。
服务团队消除交接:基础设施服务团队提供工具和服务,使消费者能自行完成日常工作,仅在异常或新增能力时介入。判断服务是否自助,要逐条查看新工作负载接入、配置修改、故障排查和版本部署旅程;只允许自助部署不等于全流程自助。优先自动化高频旅程,避免团队被手工重复运维淹没。
共享与专用自助实例:共享实例适合需要互相集成或能安全共享容量的工作负载,但某负载的需求不能牵连其他负载。若存在干扰,可由平台团队提供按需专用实例:消费者调用接口部署版本化栈,提供者把认证、加密、备份、监控和策略检查内建其中。消费者选择能力和配置,不必修改实现代码。
能力团队分担平台:随着平台范围增长,应按计算、数据库、网络等能力拆成可管理的团队。每个团队都可像流对齐团队一样维护自己的基础设施代码,并按消费需求提供托管实例、库、可部署组件或按需服务。一支团队可以提供多种形式,组织边界应服务于可独立演进的能力。
原书依据 · 16 处
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
- 构建与分发基础设施代码 · 查看原书依据
第16章 用流水线实现基础设施交付
自动交付保留决策:交付流水线自动执行构建、晋级和部署任务,仍可要求人来批准某阶段。持续交付保证每个通过验证的变更具备上线条件;持续部署才会让每个通过的变更自动进入生产。人工控制应落在准备度、审查和探索性测试等决策上,重复执行任务交给机器。
项目仓库按交付分组:构建项目是产出一个离散组件的代码集合,代码库可含多个项目,仓库则是版本控制的边界。共同构建、经常一起修改的项目适合同仓;独立交付、需要强边界或权限隔离的项目适合分仓。单仓便利跨项目版本一致,但容易形成文件级偷依赖;多仓隔离更强,却增加跨仓变更协调。
按领域组织基础设施:基础设施按网络、服务器、数据库等技术类型拆文件,会让一个负载的修改跨越多个含其他负载资源的文件。按业务领域或工作负载组织,把它的数据库、网络和策略放在一起,可让工作集与责任边界一致;共享资源也按具体平台领域分组,避免变成杂物箱。
项目支持文件同版本:一个项目专属的测试、配置、构建脚本、部署脚本和流水线配置应与实现代码一起存放。检出一个版本就得到互相匹配的完整工具集,减少拿错测试版本的风险。目录名称可变,关键是项目级版本一致和可独立执行。
集成测试贴近消费者:跨组件测试常可放在消费者项目,因为测试知道消费者的入口、主机和端口,而提供者不该反向了解所有消费者。单组件测试与真实集成测试应分开。若单独建立集成测试项目,就要随实现同步修改测试,并显式关联组件版本与测试版本,防止错误组合。
一致开发环境缩短排错:开发者使用一致的工具版本和配置,可减少只在某台电脑发生的问题,并改善新人接入及本地到流水线的一致性。可用配置管理、容器或虚拟机重复建立环境。标准化对象包括运行代码、测试和部署所需工具,并不要求所有人的编辑习惯完全一致。
模拟器反馈有边界:本地 IaaS 模拟器常模拟 API 端点和部分状态,而非创建真正可用的基础设施。因此它适合自动验证基本请求和快速反馈,通常不适合探索真实资源行为。模拟器通过不能代替真实平台部署验证,应明确测试究竟证明了哪一层。
个人环境避免互相覆盖:多人共享基础设施开发环境时,彼此部署会覆盖资源,制造看似代码错误的干扰。每个开发者应能按需创建个人环境,不用时销毁,并尽量复用生产部署工具和流程。把个人环境代码放在可访问的仓库,还能让别人接手清理,避免资源依赖某人电脑上的独有状态。
足够环境替代整套复制:个人环境过大时,应只部署验证当前变更必需的组件。将架构拆成可组合栈,再用轻量测试夹具替代不相关的依赖,可缩短创建时间和降低费用。例如组件只需子网,就不必部署带完整加固与审计的网络栈;但替身验证不能证明真实依赖集成正确。
流水线阶段三要素:每个阶段需定义内容、动作和上下文。内容包含输入源码或制品、测试及配置,以及输出制品和报告;动作包含触发、处理、验证和晋级;上下文则规定真实平台、依赖及测试夹具。清晰划定被验证范围,避免某组件阶段承担重新验证所有上游内部实现的职责。
人工自动阶段分开:自动测试应由每次输入变更立即触发;探索测试等人工活动应由人启动,防止测试中被新构建覆盖。自动阶段先行,人工阶段处理机器无法完成的判断。人工启动时默认选上阶段最后通过的构建,也可明确选定其他版本;部署、人工测试、批准可以拆为同一阶段的不同任务。
被动晋级利于自助:阶段可主动调用下一阶段,也可只发布制品或标记,由消费者检测新版本。多下游场景适合后者:消费者无需请提供者为自己维护触发器,也能自行调整流水线。发布者声明可用版本,消费者决定如何消费,从而降低组织耦合。
逐步扩大测试上下文:早期阶段离线验证或接模拟器与夹具,快速发现组件自身问题;下一阶段在真实 IaaS 上仍替换依赖;后期才加入真实服务和近生产环境。每次扩大上下文应针对新增风险,避免在昂贵阶段重复大量早期可发现的错误。
编排脚本保持单责:把构建、部署、交付和测试细节放入可复用脚本,可让本地和流水线执行一致,减少与流水线配置耦合。脚本也会膨胀成第二套复杂系统,因此应按活动拆小:整体多栈编排与单栈部署分离,构建和测试也分离,并给脚本维护测试。
原书依据 · 14 处
第17章 基础设施代码测试策略
交付系统随系统生长:基础设施上线后还会不断打补丁、修复和改进,因此测试与部署自动化不应等临上线才建设。让实现早期就使用同一套变更交付系统,首次生产部署便是日常操作的一次延续,构建阶段也提前获得生产运行视角。把构建和运行视为连续生命周期,有助于减少首次上线的集中风险。
持续测试追求即时反馈:持续测试应在写代码、完成故事之前就发生,并在每次推送后立即运行 CI 和交付验证。按夜间或周期批量运行会把多人变更混在一起,失败时难定位责任变更。区分即时测试与延后测试,可发现哪些反馈被人工审查或排期无谓阻塞;结对也是实时审查的一种。
测试范围从风险出发:基础设施测试要覆盖代码能否应用、资源是否正确、工作负载行为,以及安全、合规、来源、性能、扩展、可用性和运维能力。按变更引入的具体风险设计可重复验证,而非只套单元测试与界面测试清单。交叉功能要求属于开发工作本身,也能在离线、资源级和全系统多层验证。
来源验证也是质量:依赖库、提供者和外部代码构成软件供应链。来源验证可检查已知漏洞、许可证兼容性,并记录实际包含的组件清单,形成 SBOM 等审计材料。功能测试通过不能回答代码从哪里来或是否符合组织使用规则,因此来源验证应成为独立风险维度。
运维要求可被测试:性能可先测试基础网络链路;扩展测试既要确认自动增加节点,也要确认容量真的提升;可用性测试可销毁节点检查替换或优雅退化;可运维性测试可注入错误验证告警、日志和维护任务。测试应断言需求结果,而不是只确认某开关已配置。
声明复述测试价值低:对硬编码声明逐条断言同样的名称和地址,通常只是在复制实现。未部署可用少量冒烟检查发现;工具的已知缺陷可专门回归,但没有必要假设工具处处有错;代码变更却忘改测试的风险更是测试自身制造的。应优先测试变量逻辑、组合效果和业务所需结果。
声明逻辑需测变化:单纯把变量填进声明往往由基础设施工具检查合法性;调用函数、条件分支和地址计算却会产生多种结果,需要边界测试。若声明中嵌入复杂过程逻辑,可提取为过程语言库并单独测试,让声明保留简单组合。多个简单网络声明组合后的连通性,也比逐项资源存在更值得测试。
生成器测试的证明边界:CDK 等工具的单元测试可以验证程序生成了怎样的中间模板,但不能直接证明真实基础设施支持用户连接等结果。代码生成、平台应用和资源行为之间存在距离。保留快速生成器测试,同时为需要真实资源才能证明的属性安排后续部署验证。
测试速度也是设计问题:基础设施测试慢,常由组件过大、依赖链长及真实平台准备时间造成。可拆小部署单元、隔离依赖、先离线后在线,并用模拟器与测试替身尽早验证。若大量时间花在修测试而非产品,或多项测试总一同失败,应检查测试设计并简化,而非只增加机器。
临时持久环境的权衡:临时测试环境每次创建销毁,状态干净、结果一致但反馈慢;持久环境省去创建时间,却可能积累漂移和测试残留,还持续付费。选择应按测试用途与实测效果调整;需要发现长期运行问题时,应明确设计浸泡测试,不应把偶然长期保留当作充分验证。
测试替身切断依赖:测试替身用可控实现替代被测组件所需的依赖,使组件能隔离测试。与其只模拟整个 IaaS 平台,替换其他基础设施组件往往更有价值,可降低慢、贵、不稳定或共享数据导致的干扰。隔离测试之后仍需真实集成;替身是解耦手段,不是删去契约的理由。
渐进测试最小定位:渐进测试先运行范围小、依赖少且快的测试,再逐层扩大组件与服务的集成范围。小错误在最小范围内暴露,定位和重跑更便宜。后层只需验证由集成新出现的风险,不必重复早层已证明的细节,例如完整栈测试无需再次逐条检查服务器目录权限。
金字塔不必强套基础设施:测试金字塔主张底层快速测试多、上层集成和旅程测试少。但声明式基础设施在离开真实平台时可测内容有限,低层重复声明测试收益小,测试形状可能更像菱形。若有大量过程语言库,金字塔又更适用;测试分布应由风险和代码性质决定。
多层防线按风险布置:瑞士奶酪模型把每层验证看作有洞的防线,组合互补的层来覆盖单层会漏掉的风险。设计时先确认每个风险在哪里被捕获,再尽量放到最早可行的层。重点不是凑齐固定形状或让所有层测同一件事,而是避免同一种风险穿透全部验证。
生产测试补足未知风险:生产数据规模、意外输入、真实用户、长期流量和并发组合无法在预发布环境完全复制。预发布测试适合已知故障、预期行为和回归风险;生产测试利用真实条件寻找难预测的问题。若相信预发布可穷尽风险,就会过量投入前置验证并忽略生产反馈。
生产测试需要控制伤害:生产测试应配合监控快速发现、可观测性定位、无中断部署及回退、渐进放量限制受众。测试数据须避免真实交易等外部动作和敏感数据暴露。混沌工程主动注入已知故障来验证缓解机制;监控则可视为观察自然用户活动的被动生产验证,两者共同管理运行风险。
原书依据 · 16 处
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
- 基础设施代码测试策略 · 查看原书依据
第18章 实现基础设施代码测试
四阶段验证基础设施:基础设施流水线可先离线构建和测试,再真实平台单栈测试,再做基础设施集成,最终部署工作负载进行产品验证。早期控制范围和依赖以缩短反馈,后期扩大到系统真实用途。各阶段承担不同证明责任,不能用最后的产品测试替代前面所有诊断。
离线验证分层使用:语法检查能快速发现拼写和解析错误;静态分析进一步检查风格、可维护性、安全和策略。连接平台 API 的静态检查还可判断镜像或实例类型是否存在,但不等于把代码与已部署资源对比。严格离线不连接外部服务,依赖漏洞数据库的扫描应明确标为联网验证。
策略代码与检查意图:lint 和策略即代码可能使用相似解析机制,区别主要在目的:前者偏向可维护性,后者偏向治理合规。组织安全规则差异很大,策略工具因此常需要可扩展规则。验证工具名称并不能代替风险定义,要明确某条检查保障的是哪项要求。
清单支持持续漏洞扫描:构建时验证外部组件安全和许可证,并记录包内具体版本形成 SBOM。漏洞可能在部署后才披露,因此还应定期把当前部署组件版本与最新漏洞报告比较。基础设施依赖虽然通常比应用包少,第三方模块、提供者和过程语言库仍需要这条来源链。
平台模拟器不是真实云:LocalStack、Moto 等工具模拟部分平台 API,可支持本地快速试验,但未必实现真实资源和完整行为。使用前要确认覆盖范围,只维护能验证实质风险的测试。对浅模拟进行大量断言,容易产生看似完善却没有证明实际基础设施可用的测试套件。
轻量夹具替换提供者:测试夹具只实现被测组件需要的最小基础设施。测试网络栈若只需要 VPC 和子网,夹具无需部署生产网络的全部安全、互联和日志。这样既缩短时间,也使失败主要归于被测组件;真实提供者与组件的兼容性留到后续集成阶段检查。
消费者夹具验证可用性:某些基础设施没有消费者就只能断言资源存在。可用轻量服务和客户端作为消费者夹具,真实通过网关和路由建立连接,验证网络栈能完成用途,而无需部署完整容器集群与应用。夹具应提供观测入口,让测试验证行为而非仅复制声明。
隔离困难是设计信号:组件若必须拖入大量真实依赖才能测试,通常存在硬编码或耦合设计问题。把测试性纳入开发,可促使接口清晰、依赖可替换、组件松耦合;必要时应重构或替换工具库。不要把复杂测试脚手架当作永久补丁,掩盖本应改正的组件边界。
预览是有限风险检查:plan 或 preview 对比代码与实例,列出拟议变更,适合发现重建数据库等破坏性操作;可自动解析结果检查政策。人工阅读可能漏看,预览也可能不知道镜像不存在等深层事实。它是实例部署前的有限保障,复用栈仍需实际部署和测试。
资源断言关注组合变化:少量存在、运行及健康断言可迅速识别测试设置和部署失败;逐项重复 RAM、地址等声明则增加维护负担。更有价值的是检查卷是否正确挂载等多声明组合,以及不同参数分支的结果。复杂变体应提到独立模块测试,让栈验证保持清楚。
结果测试证明用途:基础设施的功能测试应证明其可被使用,例如分段间端口连通、集群能运行应用、重建服务器后能重新挂载卷、负载均衡正确处理节点增减。HTTP 连通和预期响应比资源存在更接近用户需要。测试往往需配夹具,以触发并观测这些结果。
持久测试栈反馈快:持久测试栈每次把新代码更新到同一实例,测试后保留,省去完整重建时间,也可能暴露长期资源泄漏。但失败可能使实例卡死,后续更新甚至销毁均失败,团队被迫手工解困。只有更新足够可靠时才适用,并应通过缩小栈和简化依赖降低卡死频率。
临时测试栈保持干净:临时测试栈每次运行创建新部署,测试及报告后销毁,避免前次数据和夹具残留。适合创建较快或变更频率较低的场景,代价是更长反馈循环。失败时可暂留供排查,但应有额外清理机制,因为出错时销毁本身也常失败。
双生命周期会叠加成本:并行使用持久与临时测试阶段,原意是让持久阶段快速反馈、临时阶段提供干净结果。但更新不可靠仍要人工修持久栈,发布时通常还得等较慢阶段,可能把两者缺点叠在一起。可作为改善可靠性的过渡,或验证长期运行风险,但不应视为自动消除取舍。
定期重建不能掩盖故障:定期销毁闲置测试栈可节省云费用,也能清理跨运行积累的资源。若重建被用来绕过泄漏或不可靠更新,它可能把生产将遇到的问题藏起来,只宜临时使用。可按工作时段或不活跃时间清理,下次测试缺实例时重建;首次运行会额外等待。
持续重置移出反馈环:持续重置在测试报告和晋级后,异步销毁并重建测试实例,把准备时间移出当前反馈环。可重建刚通过的版本,也可用当前生产版本作基线,让下次验证真正的生产升级路径。后台失败可能令流水线显示通过但实例已坏,因此必须让重置状态可见。
测试编排独立且可本地跑:测试编排负责夹具、数据、实例生命周期、参数、执行、汇总和清理。把它封装成独立脚本或工具,由本地与流水线调用同一入口,可保证一致性和便于复现。流水线只传最少配置,避免依赖插件才能运行;采用专用测试编排工具前也应确认其固定工作流能适配团队需求。
原书依据 · 17 处
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
- 实现基础设施代码测试 · 查看原书依据
第19章 部署基础设施
部署处理实例上下文:基础设施部署以某版本构建为起点,把实例配置、秘密、平台认证和外部依赖组装起来,执行单栈或多栈编排,再记录输出、运行策略和健康检查。基础设施代码在部署时才执行,最终价值是它产生的资源及能力,不能把取到代码包等同于部署完成。
软件推送与拉取部署:推送部署在代码变更时由部署工具把新版本送入运行环境;拉取部署把软件包安装要求写在基础设施配置里,随基础设施应用而安装。后者适合简单包安装。若开始在其中编写复杂顺序、失败回退和数据库结构协调逻辑,就应简化流程或使用专门应用部署工具。
持续协调定义GitOps:GitOps 要求期望状态以声明表达、保存不可变版本和完整历史、由代理自动拉取,并持续对照真实状态协调。它不只是新提交触发一次部署:即使代码没变,运行状态偏离时也会恢复。持续协调使版本存储同时成为运行状态的控制依据。
漂移纠正也需监控:资源可能被人工工具修改、故障破坏或平台中断改变。漂移检测发现实际资源与代码不一致后重新应用,可自动纠正部分错误。幂等工具循环执行是简单实现,也可先预览判断差异。但不协调的控制器或外部修改可能形成反复应用、撤销的循环,造成中断和费用上涨,必须监控并能停止。
应用描述符连接基础设施:应用部署描述符声明该软件需要的专用资源和共享服务;部署服务据此创建数据库等资源,或接入已有集群与监控。它让应用团队掌握所需基础设施的部署,而实现由平台组件提供,减少应用与基础设施分立流程中的交接。
应用代码可定义资源:Infrastructure from Code 把所需基础设施嵌入应用代码,可在部署、初次运行或首次使用时创建。实现可以是低层 API、库或注解,也可通过部署服务间接执行。共同语言和生命周期能缩小应用与资源之间的距离,但实际创建时机及调用路径由框架决定,不能假设所有实现相同。
状态锁不防版本覆盖:状态锁能防两次部署同时执行,却不能防开发者按顺序把彼此不兼容的本地版本应用到同一实例。因此共享环境仍可能来回丢配置。个人开发应使用个人实例;多人使用的实例应从共享仓库经中心服务部署,使变更能先发现、合并并留轨迹。
中心部署提供可追踪性:中心服务从源码或制品仓库取明确构建,再统一执行部署、治理和报告。代码必须先提交,有利于发现并合并别人的新修改;部署历史和源码对所有成员可查,原提交者不在也能排障。它不自动保证无冲突,但比依赖某人电脑上的未提交副本更易控制。
交付晋级与部署可分离:流水线可直接执行基础设施工具,适合同一团队掌握交付和部署、希望集中可见性的场景。也可只管理构建晋级,由专门部署服务执行应用代码;当提供者与消费者分属不同团队时,分离更有意义。两种服务用明确构建身份和实例参数衔接。
基础设施数据由控制器协调:Infrastructure as Data 把资源定义放进中心系统,用控制回路持续同步到运行基础设施,漂移处理是核心功能。常以 Kubernetes 自定义控制器实现,可直接调用云 API,也可驱动已有基础设施工具。中心声明并不一定是 Kubernetes;数据库加连接器也可表达同类协调模式。
包装脚本避免知道实现:部署包装代码应按生命周期与任务拆分,多栈编排与单栈执行分离,并以清晰接口传递信息。通用脚本不应硬编码某项目的资源细节或配置规则,否则每个基础设施变更都会牵动脚本。脚本同样需要测试、静态检查、组合和单一职责设计。
输入变更都是部署原因:部署输入不只有源代码,还有实例配置、外部资源、模板和镜像等间接依赖。应尽可能在版本构建中组装固定输入,改善跨环境一致性与来源可见性。任何相关输入更新都应经验证后尽早部署,避免积累过期组件;仅监听源码提交会遗漏依赖变化。
人工部署也用统一机制:人工触发适用于探索测试、回退、合规批准和复制生产版本排障。入口可为流水线界面、开发者门户、工单或环境分支合并;它们决定授权、版本选择和治理,不应各自实现一套部署。人工与自动触发可调用同一个部署 API,统一传入构建身份和参数。
被动部署必须可暂停:主动触发直接调用部署 API;被动触发监视源码、制品、配置或依赖变化后自行协调。后者降低消费方与提供方连接成本,却让后台发生的失败更难定位。应提供部署状态展示、告警、详细日志与可观测性,并能临时暂停同步,防止排障动作立即被覆盖。
第20章 变更既有基础设施
自动化让变更常规化:例外变更少见且每次不同,需大量计划和专家判断;常规变更频繁且方式一致,降低认知负担及人为差错。自动测试、可追踪晋级和一致部署可把变更类别转为常规,并降低风险。看似巨大的升级也可拆成镜像构建、兼容测试等较小且可重复的流程。
可运行骨架提早集成:按网络、存储、计算逐个做完整组件,要等最后才发现整体设计不合适。可运行骨架先让极简端到端系统完成构建、测试、配置和部署,早拿到集成反馈,再逐步丰富。每个增量应维持系统可工作、通过现有测试并满足当前阶段的运维要求,而不是先堆一批不可运行的半成品。
未完功能三种隔离:特性分支把未完变更留在生产之外,但推迟集成反馈;特性开关把两种实现一起交付,以配置启用目标实现;特性隐藏则使新实现已部署可受控测试,却尚未服务正常工作负载。暗发布借此在生产数据与集成条件下验证,不把新实现放入关键路径。
代码重构不保资源安全:重构是在不改变外部行为的前提下改结构。基础设施代码在编辑器中重构通过测试,不表示应用到真实资源时无损;把资源定义从旧栈移到新栈,工具可能先删除再创建,造成中断或数据丢失。必须分别计划代码结构迁移和运行资源归属迁移。
手工改状态属于高风险:外部状态文件把代码资源身份映射到平台资源 ID,可转移映射来保留真实资源。但必须协调新旧栈代码和状态的修改顺序,否则可能冲突、遗孤或触发销毁重建。手工状态手术应只在其他选项更糟的极端情况下使用,先备份并准备失败后重建,而非当成常规重构方法。
迁移代码适应不同起点:通过流水线传播的实时迁移,不一定面对同一起始版本:测试环境可能比生产多应用过几个失败版本。迁移须能自动运行、适应这些不同代码与状态起点,并具有幂等性,重复应用不造成损害。只写一条按唯一预期状态执行的手工命令,无法满足这个交付契约。
资源改名须声明身份:工具一般无法区分改名与删旧建新。moved 块或资源别名显式说明新旧代码身份指向同一真实资源,可避免不必要销毁。书中 moved 的讨论限于栈内改名;所有实例完成迁移后应清理不再需要的迁移声明,避免代码长期堆积历史。
跨栈迁移需要编排:脚本式状态迁移可把旧新资源身份映射写成文件,更新状态后应用代码,还可支持跨状态文件移动。代价是部署流程必须知道何时运行迁移,并额外保障版本适应性与幂等性。工具能力不自动解决迁移顺序与重复执行安全,仍应经相同流水线验证。
扩展收缩分三步迁移:扩展收缩先新增资源但不使用,再切换消费者,确认稳定后删除旧资源。每一步分别提交、通过同一流水线和测试;旧资源仍在时可迅速切回。它不依赖可编辑状态文件,用额外资源和多次发布换取更少手工手术及可控迁移风险。
蓝绿切换要处理在途工作:蓝绿部署创建新实例,验证后切换工作负载,再删除旧实例。需要负载均衡等切换机制,成熟实现会把新工作送新实例并等待旧实例在途工作排空。可在服务器、栈甚至数据中心层级采用;范围越大越难协调,数据与格式兼容仍需单独处理。
滚动升级与金丝雀:滚动升级逐步替换实例池中的旧版本,避免一次全部下线。金丝雀进一步在小范围接收真实流量后停留观察,用健康检查和监控判断是否继续或回退。它需要新旧版本能同时服务并兼容共享依赖;单纯把部署批次切小而不观察,不能获得同样风险控制。
不可变实例靠替换更新:不可变基础设施通过新构建创建全新实例,验证后切流,最后销毁旧实例,而非原地修改。短期内保留旧实例使回退简单,但自动化滞后仍可能累积,所以应经常重建验证代码与现实一致。不可变部署能隔离实例变化,却不会自动解决持久数据迁移。
存储回载与编排解耦:替换有数据的资源前先备份,创建后再恢复,可用平台快照或相应数据备份机制。部署编排只负责触发,不应硬编码表结构等存储实现;生命周期钩子、标签或配置可把资源销毁前保存、创建后加载的动作交给专属逻辑,控制包装脚本耦合。
备份切换窗口可能丢写:备份完成到新存储加载并接替服务之间,旧存储若继续接收写入,这些后续变更不会自动出现在新副本,切换后便丢失。能容忍时可短暂停服或让消息排队;不能容忍时应持续传输变化。迁移成功不能仅看备份文件可恢复,还要覆盖最后一段写入窗口。
持续同步缩短迁移缺口:旧实例持续向新实例传送事务日志,可在存量加载后补齐增量,再短暂停顿完成主从切换。滚动部署若需多个数据节点较长时间并行接受写入,则需要支持双活同步的数据能力。持续传输降低停顿但增加存储和迁移成本,不能在不具备同步语义时直接双写。
数据资源单独部署:数据宿主有备份、恢复、同步与兼容性要求,应与无状态基础设施分成独立部署栈。这样变更计算或网络时,不必重复执行数据连续性步骤,也能缩小变更面、加速部署及回退。分栈的依据是生命周期和风险不同,而非只按资源类别追求形式整齐。
软件数据分步兼容演进:新旧软件若不能读写同一数据格式,滚动或金丝雀期间就无法安全共存。先交付能兼容旧数据格式的新软件,待全部实例升级后,再单独变更数据格式;软件与数据基础设施升级也尽量分开。兼容性阶段把一次难以回退的大变更拆成可验证的小步。
灾备成为日常部署:故障重建与创建环境、重部署最新基础设施构建具有相同机制。逐项映射灾难场景,看日常部署、备份和恢复工具能否处理,并尽量共用流程,使每次常规部署也练习恢复能力。演练仍有价值,但不必等危机才启用一套陌生且少用的专属工具。
原书依据 · 18 处
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
- 变更既有基础设施 · 查看原书依据
第21章 治理
治理内建整个生命周期:治理确保系统在正确性、质量、成本、容量、可靠性以及法律和行业要求上达标,但更应理解保护用户、数据及可维护性的真实意图。它要从架构和交付基础中建立,并通过变更验证、运行检查、监控、可观测性和审计记录持续保障,不能在建完系统后靠一次评审补上。
应急流程应成为默认:日常交付若太慢,紧急修复时人就会绕过它;单设放松控制的应急流程又增加失误与不合规风险。应设计满足治理要求的最精简可靠流程,并把它用于每天工作,使同一条经过反复验证的路径也能足够快地修复生产。速度是守住流程的条件之一。
治理左移缩短返工:左移把安全、合规与质量检查尽可能前移到开发过程中,使变更者既有能力又有责任立即验证和纠正。若等实现完才由外部团队检查,后续工作可能已建在错误设计上,只能大规模返工或临时绕过。编辑、本地测试和每次提交的自动策略验证共同缩短这条反馈链。
治理团队转向赋能:治理专家可通过培训和协作帮助流对齐团队,提供安全扫描等自助服务,并研究新技术风险;研究成熟后再沉淀为平台能力。DevSecOps 表示共同承担治理责任,不是把专家移除。信任开发者还需全生命周期自动控制与不可抵赖的审计轨迹,确保每个部署受适当批准和检查约束。
检测预防纠正各有边界:检测控制报告潜在违规,由人判断;预防控制阻止不合规动作;纠正控制发现后自动恢复。不能假设自动纠正总更安全:银行遇到攻击尝试便自动封锁关键后台,会被攻击者轻易利用来拒绝服务。响应本身可能伤害业务时应采用检测和人工决策,自动纠正还须日志与重复触发告警。
控制按最具体层实现:基础设施设计的低层适合广域限制,高层工作负载适合声明具体例外。例如全局默认禁止入站端口,应用层按需要只放行 HTTPS。这样低层提供稳定基线,例外跟随真正依赖它的高层组件,避免把每个应用特殊性都灌进共享平台。
平台控制也要测试交付:平台控制利用云平台自身能力限制资源变更等动作,但控制定义仍是基础设施代码,应像其他组件一样测试、晋级和部署。可通过尝试受限动作并确认拒绝来验证有效性。应在所有环境一致实施,避免直到生产才发现控制规则与应用冲突。
交付部署控制职责不同:交付控制在流水线验证代码与政策是否一致,可扫描不安全代码、依赖漏洞或确认交易会记录审计日志。部署控制则在应用到具体环境时阻止违规,或记录实际变更供审计。前者证明候选代码可接受,后者守住实例执行边界;两者应覆盖所有环境以尽早反馈。
运行监控持续检查合规:交付和部署时合规,不代表运行中永远合规:有人可能绕过自动化修改资源并暴露漏洞。监控控制在部署之外持续验证真实基础设施与工作负载,补上构建期控制看不到的变化。治理因此形成开发、交付、部署与运行的连续防线,而非通过上线关卡后结束。
第22章 尾记:封面动物与制作说明
尾记解释封面动物是鲁佩尔兀鹫,介绍其分布、腐食行为、繁殖及飞行习性,随后说明插图与字体来源。这些内容不构成基础设施设计论证,却是本版实际附带的实质文字,因而单独保留。
其中可独立理解的机制是高空活动与血液吸氧能力的联系:血红蛋白与高空适应保留尾记给出的联系及其解释边界。尾记关于种群规模和保护状态的数字是本版出版时的陈述,本轮未做当前生态资料核验,不把这些数字当作今天的现状。版式制作信息用于了解本书的出版呈现,不由此推导技术原则。
原书依据 · 1 处
跨章综合
组件边界与交付边界需要一起考虑。把代码拆成许多目录,并不等于资源能独立改变;如果栈必须协调发布、读取彼此内部配置,结构仍然高度耦合。反过来,一个边界清楚、接口稳定的组件也需要适当测试和发布流程,否则它的独立性不能转化成可靠交付。
一致性不要求所有环境完全相同。共同定义和清晰配置能够使差异有理由、可观察、可验证;复制整套代码或随意覆盖配置则会让差异难以解释。测试应同时检查设计单元、真实资源行为和集成结果,用不同成本与反馈速度覆盖不同风险。
可重建资源与需要保护的数据也不是同一回事。自动化有助于恢复和替换,但基础设施代码不能凭空恢复业务数据;既有系统变更需要考虑状态、依赖和失败过程。小增量、及早测试以及嵌入交付的治理共同降低每次改变的不确定性,而不构成“有代码便不会失败”的保证。
发散与实践
以下是读者延伸,计划交付不等于执行完成。优先进行追踪计划到执行边界(ideas/idea-001-追踪计划到执行边界.md):用已核验的Terraform固定版本入口分清预览、执行与状态的责任。随后可做拆解本地部署变更(ideas/idea-002-拆解本地部署变更.md),以本地已有系统练习可单独验证的交付切片。两项均未部署或更改真实基础设施。