此笔记位置已失效,请从目录继续阅读。
全书导读
据推荐序介绍,作者尹洪亮是从代码工程师成长起来的架构师,前言称写作源于长期的管理和培训工作。书的定位是“场景设计”:不讲某个框架的用法,而是拿登录、用户安全、日志、攻防、消息、监控、大数据、批处理、配置这些几乎每个系统都绕不开的功能,逐一拆解需求、给出设计方案和取舍,最后用消息平台、资金收付、业务监控、监管报送四个企业级系统做综合实战。
全书 13 章。第 1 章谈架构师的职业规划;第 2 章给出高可用、高伸缩、高并发、安全四大原则;第 3 章讲分布式微服务的组件;第 4–12 章各讲一类通用功能;第 13 章是实战。除第 1、13 章外,每章末尾都有“章节练习”和“案例设计”:练习基本是正文的复述,笔记只把补充要点并入相关卡片;案例设计题按问题卡整理。
阅读时注意三点。第一,书中方案多来自作者在国内企业项目中的经验,偏重 Java、Spring Cloud、阿里云生态,部分技术细节(如 MD5 加盐、JWT 的加密签名描述)较为简略,应以对应技术的正式文档为准。第二,书中引用的统计数字和行业数据(如支付牌照数量、短信攻击损失)只作为作者的叙述保留,未经核实。第三,很多方案的价值在于“想到了哪些问题”——例如验证码要与 Token 绑定、退出日志不能和登录日志合表、批处理接续运行要先判断状态——这些检查点比具体实现更值得记住。
全书主线
全书的主线是:简单功能在规模、并发和安全压力下会变成复杂问题,架构设计就是提前把这些问题想全。贯穿各章的几个反复出现的判断:
- 按职责拆分与隔离:调度与执行分离、实时短信与批量短信分开部署、支付渠道按银行拆服务、核心功能与通知类非核心功能区别设计;
- 不要把去中心化的系统重新中心化:ESB、网关、接口日志网关都可能变成新的单点;
- 凭证要绑定、有期限、可撤销:Token 绑定验证码、刷新优于延时、冻结时删令牌、票据用后即作废;
- 把计算提前、把数据分片:实时计算替代事后汇总,分片让批处理和查询横向扩展;
- 留痕与可追溯:登录、操作、接口日志,参数版本化,工单化的预警处理;
- 先论证产品设计,再优化技术:查询慢时先问需求和交互是否合理。
序
推荐序作者从企业架构角度说明架构有静态结构与动态逻辑,并称本书作者“打磨架构力”的经历难得。
原书依据 · 1 处
前言
前言说明写作缘起:很多开发人员技术能力强但设计能力不足,市面上缺少专门讲场景设计的书。前言没有独立知识点,定位已写入全书导读。
第1章 如何规划自己的架构师职业生涯
第 1 章从架构师与程序员的区别讲起:架构师一人驱动众人,要向上汇报向下传达,并且按约束迭代不过度设计。成长路径上给出打磨架构能力的八法,其中特别强调写文档暴露思路缺口;能力清单是架构师的12项技能。写给大学生和程序员同行的部分归结为工具不重要,思想更重要。
第2章 大型互联网架构设计的四大原则
高可用:可用性用几个9衡量,核心手段是冗余消除单节点故障。负载层面讨论四层与七层负载取舍、十种负载策略,并指出DNS轮询无法自动摘除;容灾方面认为两地三中心只是看着美好,而异地多活不放余额转账。中间件高可用:MongoDB 的分片键决定集群性能;Redis 要RDB与AOF同时开启,哨兵靠多数确认下线,集群模式用哈希槽与副本分散;数据库有主从复制的三种策略。限流部分讲倒金字塔限流、令牌桶能吸收突发和接口级限流防拖垮。
高伸缩:无状态化才能扩展;文件存储让客户端直连存储节点;数据库先垂直拆分再水平拆分。
高并发:缓存越近用户越快,中间件缓存要防穿透、击穿与雪崩;核心流程异步化;读写分离两种实现。
安全:传输安全分三级;数据安全上提醒接口参数带用户ID会越权。案例:设计五亿日活微博平台。
原书依据 · 25 处
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
- 第2章 大型互联网架构设计的四大原则 · 查看原书依据
第4章 登录功能架构设计
开篇提醒小功能未必简单。账号密码登录要多类型账号由客户端判型;验证码类登录中验证码须与Token绑定,动态令牌动态口令靠时间与密钥,还有语音验证码与回执;一键登录借运营商验证;生物识别即采集加比对。
多端与多设备:用SecretID区分客户端,会话存储组合Token键实现踢出。多设备登录有双设备付同一订单的风险,书中的应对是交易系统限制多设备登录;工具类软件则采用设备授信两种方式。
会话与授权:Session的六个缺点,集群下有Session共享四种方案;企业级单点登录发凭证不交密码;OAuth 2.0 部分讲OAuth四种角色与流程和OAuth四种模式;自建扫码登录要注意自建扫码登录的两次轮询。案例:设计分布式认证中心。
原书依据 · 19 处
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
- 第4章 登录功能架构设计 · 查看原书依据
第5章 用户安全架构设计
以短信接口被刷的代价引出安全设计无小事。登录踢出分为主动踢出靠推送监听与被动踢出更稳但体验差。
密码安全:密码强度按系统安全等级,配合弱密码库与历史密码库,存储上每个用户一份随机盐。密码找回:找回密码是身份核实;下行短信流程中改密请求须带全凭证,统一验证码服务要验证码须按业务隔离;另有上行短信与邮件链接找回。密码修改要改密记录轨迹识别风险。
注册:企业内部可用半封闭式注册,其中申请链接ID不能可猜;手机注册先验证再落地。权限:RBAC 要权限要做到数据层,角色继承只用单继承,规模再大时用用户组与权限组。
互联网权限架构:Token 模式有Token集中认证的代价;开放平台的 SecretID/SecretKey 是密钥对用于服务端调用;JWT把验证压力分散;微服务中网关统一校验Token;续期上Token用刷新不用自动延时。案例:设计亿级用户中心。
原书依据 · 23 处
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
- 第5章 用户安全架构设计 · 查看原书依据
第6章 系统日志架构设计
六类日志各有用途。登录日志可以登录日志做风险建模、登录日志刻画用户画像,还可以登录轨迹开放给用户;退出日志不与登录合表。操作日志分菜单日志与功能日志,复杂流程流程日志异常时才上报,数据级别业务日志按事件记录。
接口日志:接口日志切面与网关结合,并且接口日志是架构调整依据。程序日志:日志级别按阶段调整,日志按日期再按大小滚动,分布式下用 NFS 汇总要注意NFS集中日志的风险。存储上日志须独立事务异步写,报文与主交易分开存。日志收集:日志清洗顺带监控告警,以及ELK日志收集六种架构。案例:设计操作轨迹回放系统。
原书依据 · 18 处
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
- 第6章 系统日志架构设计 · 查看原书依据
第7章 系统攻防架构设计
总纲是防御即逆向图灵测试。短信邮件接口有短信接口三道防线。验证码从字符图形开始——验证码图片必须后端生成——到提问式验证码与题库、行为验证码看操作轨迹,流程上业务端要二次验证票据,集群下验证码存共享缓存。接口攻击:重放攻击靠唯一标识拦截;暴力穷举要让对外主键不能可遍历;防篡改要先签名后加密。案例:设计云验证中心。
第8章 系统消息架构设计
短信:先决定短信通道直连还是聚合;短信四种发送方式;实时短信独立集群部署;准实时通知的原则是通知失败不能拖垮转账;定时发送要定时发送控制权留在己方。邮件:邮件触达率低但正式。站内信:站内信用短轮询拉取,存储上站内信阅读时才落用户表。App 推送:推送走系统级长连接,透传消息可自定义动作。案例:设计短信自动延时发送。
第9章 监控预警架构设计
无监控的系统在裸奔。服务器监控用心跳加端口探测判存活;但进程正常不等于业务正常,所以要做业务监控。三种实现:日志关键字监控无侵入;主动上报中批处理启停都要上报,切面方式要切面监控先规范异常;被动扫描做事后审计。案例:设计轻量服务器负载监控。
第10章 关系型大数据架构设计
两个核心思想:海量数据先分片、实时计算把汇总提前。查询上查询优化先改产品设计;大数据导入全流程异步;大数据导出注意写入顺序。案例:优化亿级订单查询。
第11章 批处理调度架构设计
批处理与调度是两件事,而且批处理不能只靠循环。单机批处理要调度定义存库与执行分离,并按串行耗时n乘t估算是否并行。集群批处理只为可用性,故障转移后要接续运行先判状态。分布式批处理让分片节点按取模领数据,并采用前置分片与索引表切片。复杂流程要按依赖编排而非按钟点。案例:设计3亿封月度账单。
第12章 系统配置架构设计
易变业务参数放数据库;参数Key先登记再使用;配置推荐预加载。多级缓存下本地参数缓存难保一致;分布式下集中配置要按服务隔离。字典:公共字典遵循国家标准,并建立字典服务与版本控制。SaaS 系统用多租户参数分级配置。案例说明计息参数必须版本化。
第13章 企业级核心架构设计实战
消息系统:功能架构图不掺技术,并且同名功能未必能抽公共;技术架构上发短信只留一个MQ入口;存储注意SaaS短信的隐私与存储。
资金收付系统:先理解无支付牌照不能留存资金;架构上支付渠道按银行拆服务;支付中状态回调加轮询;批量收付走接口加文件;扣款要签约每日要对账。
业务监控系统:预警走工单才可追溯。
监管报送系统:报送系统分层加工。