知识卡片

结构图卡 · 3137

ROLAP/MOLAP/HOLAP:三种OLAP实现的实时性与查询效率权衡

理解等级:未标注

OLAP(联机分析处理)按数据组织方式分成三种实现路径,本质分歧在于”要不要为查询效率预先牺牲数据实时性”。ROLAP(关系型OLAP)直接复用关系数据库存储多维数据,拆成事实表(存数据和维度关键字)和维度表(存维度层次、成员类别等描述信息),最大好处是能实时拿到源数据的最新更新(不需要额外的预处理延迟),代价是运算效率较低、用户要等更久才能拿到查询结果——因为每次查询都要现场对底层关系表做聚合计算。MOLAP(多维OLAP)反过来,把数据组织成预先高度优化的多维数组”数据立方体”(Cube),本质是”空间换时间”:把可能被查询到的维度组合预先算好存起来,查询时直接命中现成结果、速度极快,代价是需要额外的存储空间,且数据更新有延迟(不是写入即可查,要等预计算跑完)。HOLAP是前两者的混合策略:让用户自己判断哪些分析场景该用ROLAP(不常用、需要灵活定义、对实时性要求高)、哪些该用MOLAP(常用、稳定的常规查询模型、可以接受一定预处理延迟)分别处理。可迁移启发:这三者的分野可以泛化成一个通用坐标——当”查询前预先算好结果”和”查询时现场计算”这两条路线都可选时,越靠”预先算好”效率越高但实时性和存储成本代价越大,越靠”现场计算”越灵活实时但响应越慢,选型时应该先分清楚一份数据/一类查询场景到底更看重”结果新鲜度”还是”响应速度”,而不是笼统选择”性能更好”的那个。

结构图:

flowchart LR
  A["OLAP三种实现路径"]
  A --> R["ROLAP<br/>关系表存储(事实表+维度表)<br/>实时性好/查询效率低"]
  A --> M["MOLAP<br/>预计算Cube(空间换时间)<br/>查询效率高/存储大+更新有延迟"]
  A --> H["HOLAP<br/>混合:不常用/灵活场景走ROLAP<br/>常规/高频场景走MOLAP"]
这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《大数据技术体系详解:原理、架构与实践》第12章《交互式计算引擎》之"12.1.2 交互式查询引擎分类"(源文件:_epub-src/OEBPS/text00097.html) - 结论依据:原文说明"ROLAP……以关系型结构进行多维数据的表示和存储……最大好处是可以实时地从源数据中获得最新数据更新……缺点在于运算效率比较低,用户等待响应时间比较长……MOLAP……使用多维数组存储数据……此结构是经过高度优化的,可以最大程度地提高查询性能……主要的缺陷在于占用存储空间大和数据更新有一定延滞……HOLAP……用户可以根据自己的业务需求,选择哪些模型采用ROLAP,哪些采用MOLAP", 直接支撑本卡三种实现路径的权衡结论。 - 原始内容:一般来说,将不常用或需要灵活定义的分析使用ROLAP方式,而常用、常规模型采用MOLAP实现。