知识卡片
过滤前移到触发器
有的业务每秒千万条消息,真正要处理的只有几万条,全送到函数侧会白白消耗网络、序列化和计算资源。做法是把过滤前移:用户写一个返回true或false的过滤函数,以Go plugin加载进MQ触发器,在源头丢弃无用消息。Go plugin要求主程序与插件的Go版本和依赖版本完全一致,平台因此只允许标准库和指定包,并在触发器启动时现场编译。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《Serverless核心技术和大规模实践》第6章《FaaS触发器》(源文件:_epub-src/text/part0012_split_003.html)
- 结论依据:原文说明部分业务千万级QPS中有用消息仅数万,全部送到函数浪费资源,因此在MQ触发器侧用Go plugin加载用户过滤函数;Go plugin要求主程序与插件Go版本和依赖版本完全一致,平台限制可用包并在触发器启动时本地编译。
- 原始内容:尤其当部分业务达到千万级别QPS,而实际有用消息只有几万时,就会浪费大量的函数资源。……使用Go plugin,需要主程序与插件程序所使用的Go语言版本完全一致,基于go mod的所有依赖的库版本也必须完全一致,否则主程序在加载Go plugin的时候会触发编译报错