知识卡片

普通读书笔记卡

pgpool-II中间件的三大能力,及各自的风险点

理解等级:未标注

pgpool-II是一个位于应用与[[日志传递与流复制:复制延迟从”文件级”降到”记录级”|流复制]]集群之间的中间件,提供三项核心能力,每一项都有对应的风险点需要留意。负载均衡:根据配置的权重把SELECT查询分配到不同的服务器,但它并不会主动区分一条查询是否修改了数据——如果一个函数内部悄悄执行了写操作却被当作普通SELECT分发出去,可能被错误地路由到只读的从服务器上,需要用black_function_list这类机制显式声明哪些函数具有写副作用,加以规避。连接池:获取新连接总有开销,pgpool-II按参数(用户、数据库、协议相同)复用已有连接来省下这个开销,但连接池的容量必须和后端PostgreSQL的max_connections协调好,否则会造成连接资源分配失衡。故障转移:这项能力需要开发者自己编写触发脚本——pgpool-II检测到主节点故障后执行该脚本,脚本负责把某个从节点升级为新主节点;但故障转移之后还有一个容易被忽视的后续问题:”故障恢复”(把原来的故障节点重新接回集群)——如果原主节点只是因网络问题短暂不可用、之后又恢复了,它在故障期间错过的所有写入都不是最新的,绝不能被自动当作主节点重新接受写入,必须走一个明确的恢复流程重新同步数据后才能重新加入集群。除此之外,pgpool-II使用PostgreSQL内置流复制时,只能对整个集群做复制,无法选择性地只复制特定数据库或表——如果需要更细粒度的选择性复制,需要用Slony这类其他工具;如果只需要连接池而不需要负载均衡和故障转移,pgbouncer是更轻量的选择。可迁移启发:引入pgpool-II这类中间件时,不能只关心”它能做什么”,还要为它的每一项能力配上对应的兜底机制(写操作函数白名单/黑名单、故障恢复流程),否则中间件本身反而会成为新的风险点。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《数据架构师的PostgreSQL修炼:高效设计、开发与维护数据库应用》第10章《扩展、复制、备份和恢复》之"10.1.2.3 使用pgpool-II进程连接池、负载均衡和故障转移"(源文件:_epub-src/OEBPS/text00114.html) - 结论依据:原文说明"它并不发送相同的查询到多个服务器。我们必须小心地使用改变数据和执行SELECT的函数。我们可以查看pgpool-II的black_function_list特征来处理这个问题……在使用pgpool-II中使用PostgreSQL流能力的一个缺点是,需要复制集群中所有的数据库和表……应用程序不能启动到节点0的连接。它已经错过了所有在此期间进入到次节点的写入,所以不会是最新的", 直接支撑本卡关于pgpool-II三大能力及风险点的结论。 - 原始内容:恢复操作到原始服务器的过程称为故障恢复。