知识卡片
输入输出与查询逻辑分离
JCascalog用tap抽象指定从哪里读记录、把结果送到哪里,查询本身则表达元组之间的转换与约束。相同逻辑可接内存数据、HDFS文件或其他查询结果,也可写控制台或存储。输入输出的替换不应迫使业务计算重复实现;但记录模式仍必须与查询约定一致。
与[[管道图思维]]的联系:tap抽象将输入输出位置与逻辑管道分开。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
- · 7.1 一个例证
原书出处 · 1 处
- · 查看原书依据
tap抽象允许输入来自不同的源,比如内存值、HDFS文件或其他查询的结果
参考来源
- 位置:《大数据系统构建:可扩展实时数据系统构建原理与最佳实践》第7章《批处理层:示例》(来源项目book-sources;源文件:extracted/大数据系统构建:可扩展实时数据系统构建原理与最佳实践/_epub-src/OEBPS/Text/054.xhtml)
- 结论依据:原文通过word-count逐行说明数据来源、子查询和输出tap的不同职责。
- 原始内容:tap抽象允许输入来自不同的源,比如内存值、HDFS文件或其他查询的结果