知识卡片

普通读书笔记卡 · 2716.d

实时发现热点并推送

理解等级:未标注

突发热点无法提前配置,可搭建实时热点发现系统:应用 Nginx 把请求上报(UDP、写本地 Kafka 或 Flume 订阅日志),用 Storm 等实时统计,超过阈值就把热点数据推送到应用 Nginx 本地缓存。推送后要处理失效:能订阅变更消息就订阅,不能就设较短过期时间;秒杀这类可预知热点可订阅活动开启消息提前推送。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《亿级流量网站架构核心技术》第11章《多级缓存》"11.4.2 分布式缓存+应用本地热点"(源文件:_epub-src/EPUB/text00001.html,navPoint playOrder 210) - 结论依据:原文说明"可以考虑建立实时热点发现系统来发现热点……应用Nginx会将请求上报给实时热点发现系统,如使用UDP直接上报请求,或者将请求写到本地kafka,或者使用flume订阅本地Nginx日志……上报给实时热点发现系统后,它将进行热点统计……根据设置的阈值将热点数据推送到应用Nginx本地缓存",直接支撑本卡片结论。版本语境:本书为 2017 年前后的实现,迁移前以当前官方文档与压测复核。 - 原始内容:另外,可以考虑建立实时热点发现系统来发现热点。具体步骤如下……应用Nginx会将请求上报给实时热点发现系统,如使用UDP直接上报请求,或者将请求写到本地kafka,或者使用flume订阅本地Nginx日志。上报给实时热点发现系统后,它将进行热点统计(可以考虑storm实时计算)。