知识卡片
AliSQL批处理收集优化:如何把串行行锁竞争变成批量提交
如果不想承担把库存扣减迁到Redis所带来的改造成本,阿里开源的AliSQL数据库提供了另一条改造成本更小的路径——它可以理解为一款为互联网电商业务特殊定制的高性能MySQL数据库,官方测试显示综合性能较MySQL官方版本提升约70%,尤其针对秒杀场景做了特殊优化,性能可提升约100倍。AliSQL解决[[InnoDB行锁在大并发写场景下的性能困境]]的核心思路,是在InnoDB引擎层前面对同一行的热点更新SQL做收集:先对热点记录做Hash,每一个桶对应一个热点行;对每个桶内的请求做收集,然后由桶里的第一个事务负责一批次地把当前桶里收集到的所有库存扣减请求一次性提交,这样就把原本串行化的逐条竞争行锁操作变成了批处理操作——为了进一步提升整体性能,当第一批请求正在提交时,第二批请求已经开始收集,从而把单线程的串行处理转变为批处理的流水线模式。这个优化思路的本质和[[基于Redis乐观锁的库存扣减方案及WATCH碰撞问题]]、[[嵌入Lua脚本的库存扣减方案如何规避WATCH碰撞]]中讨论的收敛思路是相通的:无论在Redis中扣减库存还是在AliSQL中扣减库存,为了提升系统整体TPS,都是”先收集库存扣减请求,达到阈值后再合并处理、批量提交”,而不是让每一个请求都各自独立地去竞争同一把锁——这提示一条通用的高并发写优化原则:当大量并发写操作最终都要落在同一份资源(同一行数据、同一个key)上时,与其让它们各自独立地争抢锁资源,不如在进入锁竞争之前先做一层”合并收集”,把多次串行的锁竞争压缩成一次批量提交,从而大幅降低锁竞争本身带来的等待开销。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《超大流量分布式系统架构解决方案:人人都是架构师2.0》第4章《大促抢购核心技术难题——读/写优化方案》"4.4.4 基于AliSQL数据库提升并发写性能"节(源文件:OEBPS/Text/0009.xhtml)
- 结论依据:原文说明"AliSQL首先会对热点记录做Hash,其中每一个桶就是一个热点行,对每个桶做收集,然后由桶里面的第一个事务一批次地把当前桶里收集的所有库存扣减请求一次性提交掉,这样就将原先的串行化操作变成了批处理操作",并总结"无论是在Redis中扣减库存,还是在AliSQL中扣减库存,为了提升系统整体的TPS,都是先收集库存扣减请求,达到阈值后再做合并处理,最后批量进行提交",直接支撑本卡片结论。
- 原始内容:AliSQL首先会对热点记录做Hash,其中每一个桶就是一个热点行,对每个桶做收集,然后由桶里面的第一个事务一批次地把当前桶里收集的所有库存扣减请求一次性提交掉,这样就将原先的串行化操作变成了批处理操作……无论是在Redis中扣减库存,还是在AliSQL中扣减库存……都是先收集库存扣减请求,达到阈值后再做合并处理,最后批量进行提交。