知识卡片

普通读书笔记卡 · 3007

日志分层存储

理解等级:未标注

调用链日志经Storm处理后分流存储:原始数据全量存入HBase;检索、索引类数据存入Elasticsearch,入口服务和TraceID作为调用链查询的唯一索引;统计分析数据存入关系数据库(一般是MySQL),用于报表展示。发散:存储模型要围绕查询场景设计。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《大型企业微服务架构实践与运营》第5章《服务调用链日志跟踪》(源文件:_epub-src/OEBPS/Text/0012.xhtml) - 结论依据:书中说明经Storm处理后数据分流:原始数据全量存HBase,检索索引类存Elasticsearch,统计分析数据存关系数据库用于报表。 - 原始内容:通过Storm处理后对数据进行了分流,原始数据全量存入HBase数据库;检索、索引类数据存入Elasticsearch;统计分析数据存入关系数据库(一般都是My SQL),用于数据报表展示。……然后把入口服务和TraceID作为调用链查询的唯一索引写入索引库ES中,同时把全量数据写入HBase库。