← 返回刚才阅读的位置

知识卡片

普通读书笔记卡 · 2811.a

先校验再去重

理解等级:未标注

客户端给出的散列值未必可信:可能是恶意客户端、客户端有 bug,或传输中出错。若不校验就保存,一份内容与散列不符的数据会进入系统;之后另一用户上传真正散列相同的数据时,因单例检查而不再上传,下载时却拿到错误数据。所以必须先由接口服务计算散列并与客户端提供的值核对一致,才能据此去重。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 数据校验和去重 · 查看原书依据

      如果我们不对数据进行校验,允许错误的对象数据被保存在系统中,那么当另一个用户上传的数据的散列值恰好跟错误数据的相同时,就会因为SIS检查而导致其数据并没有被真正上传。

    参考来源

    - 位置:《分布式对象存储——原理、架构及Go语言实现》第4章《数据校验和去重》(源文件:_epub-src/OEBPS/text00009.html) - 结论依据:原文说明客户端数据可能因恶意、bug或传输错误而与散列值不一致;若不校验,内容与散列不符的对象被保存后,另一用户上传同散列数据时会因SIS检查而未真正上传,下载时得到错误数据;因此必须校验客户端提供的散列值与服务端计算值是否一致,才能放心去重;校验必须在接口服务完成。 - 原始内容:客户端是一个恶意客户端,故意上传不一致的数据给服务器。……有了数据校验,我们才能确保数据服务中保存的对象数据和散列值一致,然后放心对后续上传的对象根据散列值进行去重。