知识卡片
日志采集要异步
若每记一条追踪日志都要等日志系统确认,请求响应就会被拖慢;而且业务系统要求高可用,日志系统只是辅助排查问题,不能让高可用的系统依赖可用性较低的系统。正确做法是先写本地缓存,由后台线程异步批量发送。日志服务端故障时,缓存达到上限后新数据直接丢弃,只损失追踪数据,不影响业务,也不会撑爆内存。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《从程序员到架构师:大数据量、缓存、高并发、微服务、多团队协同等核心场景实战》第9章《全链路日志》(源文件:_epub-src/Cong Cheng Xu Yuan Dao Jia Gou Shi _Da Shu Ju Liang , Huan Cun , Gao Bing Fa , Wei Fu Wu , Duo Tuan Dui Xie Tong Deng He Xin Chang Jing Shi Zhan_split_010.html)
- 结论依据:原文说明日志收集不能同步,否则每次记录日志都等中间件返回,请求响应变慢,且业务系统与日志系统耦合;业务系统要绝对高可用,日志系统对可用性要求没那么高,不能让高可用系统依赖中可用系统;SkyWalking先存本地缓存,后台线程异步发送,缓存超出上限则不保存Trace。
- 原始内容:如果每次记录日志都要发一个请求到中间件,等中间件返回结果以后,才算日志记录完成,进入下一个动作,那么这个请求的响应时间肯定变慢。……也不可能让高可用的系统依赖中可用的系统。……在SkyWalking中会设置缓存的大小,如果这部分数据超出了缓存大小,Trace不会保存,也就不会超出内存了。