返回主题:拉取、积压与消费能力:拉得动吗

知识卡片

普通读书笔记卡 · 348

队列积压触发批处理

理解等级:未标注

Serverless不只做实时处理。原书用CloudWatch告警监控SQS可见消息数,积压达到阈值就经SNS触发Lambda批量处理,函数处理完即结束,形成批处理架构。队列消息数只是近似值,阈值触发不保证精确批量;消费时仍要按[[失败重试进死信]]处理重复与失败。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《Serverless架构应用开发:Python实现-2021》第3章《设置Serverless架构》(源文件:_epub-src/OEBPS/Text/epub_0002_0004.html) - 结论依据:原文用CloudWatch告警监控SQS消息数,达到5条即经SNS触发Lambda,以构建批处理而非实时架构,并说明该消息数是分布式队列的近似数;“阈值不保证精确批量、仍需处理重复”为推论。 - 原始内容:本节将学习如何根据SQS队列中的消息数量触发Lambda函数。……一旦消息数量达到5,告警将被设置为ALERT,相应的通知也将被发送到刚刚创建的SNS主题上。……这将帮助我们了解如何监控队列,以及构建高效的Serverless批处理数据架构,而不是实时架构。……它是一个近似数,因为SQS是一个分布式队列