知识卡片
边转发边计算散列
流式校验不必把整个对象放入内存。io.TeeReader(r, stream)在调用方读取请求正文时,同时把同一批字节写入临时对象流;把返回的Reader交给SHA-256计算,就能在一次读取中同时完成转发和摘要。直到流结束才比较最终散列,决定转正或删除。它节约的是整对象缓存空间,不会让尚未读完的数据提前得到可信的最终摘要。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 数据校验和去重 · 查看原书依据
io.TeeReader的功能类似Unix的tee命令。它有两个输入参数,分别是作为io.Reader的r和作为io.Writer的stream,它返回的reader也是一个io.Reader。
参考来源
- 位置:《分布式对象存储——原理、架构及Go语言实现》第4章《数据校验和去重》4.3.1(来源项目:book-sources;源文件:extracted/分布式对象存储——原理、架构及Go语言实现(异步图书)/_epub-src/EPUB/text00009.html)
- 结论依据:原文解释TeeReader读一端、写另一端,再由CalculateHash逐流计算散列的协作机制。
- 原始内容:io.TeeReader的功能类似Unix的tee命令。它有两个输入参数,分别是作为io.Reader的r和作为io.Writer的stream,它返回的reader也是一个io.Reader。