知识卡片
先校验再去重
客户端给出的散列值未必可信:可能是恶意客户端、客户端有 bug,或传输中出错。若不校验就保存,一份内容与散列不符的数据会进入系统;之后另一用户上传真正散列相同的数据时,因单例检查而不再上传,下载时却拿到错误数据。所以必须先由接口服务计算散列并与客户端提供的值核对一致,才能据此去重。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 数据校验和去重 · 查看原书依据
如果我们不对数据进行校验,允许错误的对象数据被保存在系统中,那么当另一个用户上传的数据的散列值恰好跟错误数据的相同时,就会因为SIS检查而导致其数据并没有被真正上传。
参考来源
- 位置:《分布式对象存储——原理、架构及Go语言实现》第4章《数据校验和去重》(源文件:_epub-src/OEBPS/text00009.html)
- 结论依据:原文说明客户端数据可能因恶意、bug或传输错误而与散列值不一致;若不校验,内容与散列不符的对象被保存后,另一用户上传同散列数据时会因SIS检查而未真正上传,下载时得到错误数据;因此必须校验客户端提供的散列值与服务端计算值是否一致,才能放心去重;校验必须在接口服务完成。
- 原始内容:客户端是一个恶意客户端,故意上传不一致的数据给服务器。……有了数据校验,我们才能确保数据服务中保存的对象数据和散列值一致,然后放心对后续上传的对象根据散列值进行去重。