知识卡片
小文件同步成本不同于总字节
压缩包下载、解压和同步大量小文件是不同阶段;即使总字节不大,逐文件的元数据与同步开销也可能主导耗时。书内Vagrant同步比下载慢的经验说明应定位具体阶段,不把450MB、10分钟或两小时当所有环境固定性能。可以复用已处理输入时,仍要核验其来源和转换版本。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- · 查看原书依据
同步大量在主机上解压的文件要快,并且写作本书时还没有一个变通的方法可以在所有的平台上对此进行加速。Vagrant可能要花超过一小时的时间来同步上千个解压的文件。 下面终端输出显示了你下载并解压后的语料库的基本结构。这些数据值得你花些时间在终端中对它们进行研究从而熟悉它们以及浏览它们。 注意:如果你使用Windows系统而不熟悉终端操作,你可以浏览一下thei
参考来源
- 位置:《社交网站的数据挖掘与分析(原书第2版)》第6章《6.2.2 获得Enron数据》(spine102;extracted/OReilly精品图书系列共21册(《Javascript权威指南》、《机器学习:实用案例解析》、《编写可读代码的艺术》、《算法精解》等)/_epub-src/text/part0091.html;u090-ch06-008)。
- 结论依据:原文在“同步大量”附近的定义、例子或代码支撑本卡核心说明:压缩包下载、解压和同步大量小文件是不同阶段;即使总字节不大,逐文件的元数据与同步开销也可能主导耗时。边界按已读前提解释;示例未执行。
- 原始内容:同步大量在主机上解压的文件要快,并且写作本书时还没有一个变通的方法可以在所有的平台上对此进行加速。Vagrant可能要花超过一小时的时间来同步上千个解压的文件。 下面终端输出显示了你下载并解压后的语料库的基本结构。这些数据值得你花些时间在终端中对它们进行研究从而熟悉它们以及浏览它们。 注意:如果你使用Windows系统而不熟悉终端操作,你可以浏览一下thei