知识卡片

普通读书笔记卡 · 2811.b.1

边转发边计算散列

理解等级:中级

流式校验不必把整个对象放入内存。io.TeeReader(r, stream)在调用方读取请求正文时,同时把同一批字节写入临时对象流;把返回的Reader交给SHA-256计算,就能在一次读取中同时完成转发和摘要。直到流结束才比较最终散列,决定转正或删除。它节约的是整对象缓存空间,不会让尚未读完的数据提前得到可信的最终摘要。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 数据校验和去重 · 查看原书依据

      io.TeeReader的功能类似Unix的tee命令。它有两个输入参数,分别是作为io.Reader的r和作为io.Writer的stream,它返回的reader也是一个io.Reader。

    参考来源

    - 位置:《分布式对象存储——原理、架构及Go语言实现》第4章《数据校验和去重》4.3.1(来源项目:book-sources;源文件:extracted/分布式对象存储——原理、架构及Go语言实现(异步图书)/_epub-src/EPUB/text00009.html) - 结论依据:原文解释TeeReader读一端、写另一端,再由CalculateHash逐流计算散列的协作机制。 - 原始内容:io.TeeReader的功能类似Unix的tee命令。它有两个输入参数,分别是作为io.Reader的r和作为io.Writer的stream,它返回的reader也是一个io.Reader。