知识卡片

结构图卡 · 2274.g.2.a.1.c.2

数据应用的三层架构

理解等级:中级

数据应用是数据业务化的核心,是实现数据价值“最后一公里”的主要途径:以数据为基础,通过查询、检索、分析和推理,为用户提供信息服务或产品功能。它由三部分组成,对应三层架构:

  • 数据(数据资源层):数据资产(数据库、文本、图像等)和算法模型(分类、回归等),为业务提供数据支持。
  • 引擎(应用引擎层):数据应用的核心能力,分五类——查询引擎(KV 查询、OLTP 查询)、搜索引擎(全文检索、向量搜索)、分析引擎(OLAP、图分析、地理空间分析)、算法推理引擎、数据交换引擎(文件交换、实时交换)。
  • 交互(应用交互层):表现形式,分两种——数据服务以接口形式提供数据(HTTP/HTTPS API、AMQP/MQTT 等协议),数据产品以界面形式展示数据(可视化大屏、BI 报表等)。

数据应用的四个特点:价值导向(挖掘规律、关联、异常并以可视化或推荐呈现)、多跨场景(融合不同领域和部门的数据)、数据驱动(依赖大量、多源、异构数据)、多模引擎(查询、分析、挖掘、决策类能力)。

建设流程按三层展开:数据准备 → 引擎选型 → 服务及产品建设。引擎选型先做业务评估(功能、性能、扩展性)、数据评估(数据量、类型、变化率)和技术评估(响应时间、吞吐、可靠性),再选择;既要匹配当前需求、预判未来发展,也要注意引擎的多功能性和简洁性,降低部署运维成本。

结构图:

flowchart TB
  subgraph JH[应用交互层]
    FW[数据服务<br/>API · 消息 · JDBC · 图查询 · 文件]
    CP[数据产品<br/>大屏 · BI报表 · 数据洞察 · 数据智能]
  end
  subgraph YQ[应用引擎层]
    Q[查询引擎] --- S[搜索引擎] --- A[分析引擎] --- T[算法推理引擎] --- X[数据交换引擎]
  end
  subgraph ZY[数据资源层]
    ZC[数据资产] --- MX[算法模型]
  end
  ZY --> YQ --> JH
这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《数据中台:让数据用起来(第2版)》第08章《第8章 数据应用体系建设》8.1 数据应用概述(源文件:extracted/数据中台:让数据用起来(第2版)/_epub-src/OEBPS/Text/0044.xhtml,来源项目 book-sources) - 结论依据:8.1节定义数据应用并给出数据、引擎、交互三部分及资源层、引擎层、交互层架构,列出五类引擎、两种交互形式和四个特点;8.2节说明数据准备、引擎选型、服务及产品建设的流程与引擎选型的评估环节。结构图依据正文的分层描述绘制。 - 原始内容:应用引擎层是数据应用的核心能力层,它提供了5类引擎来处理不同的数据需求。