知识卡片

操作参考卡 · 6237.d

惰性分页只推迟实际获取

理解等级:中级

延迟分页在消费到后续项时才继续请求,不是第一次调用就取完所有页。把结果做列表会消费整个迭代并把全部对象留在内存;若只需计数,可逐项统计而非保留全部对象,仍有全量遍历的网络成本。per_page控制单页大小,不是总返回上限,也不保证多页期间数据静止。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • · 查看原书依据

      延迟迭代”(lazy iterator)作为结果,这里说明了当请求发起后,它并没有立即尝试获取所有的29页结果。相反,当迭代检索该页之前的数据时,它会一直等待,直到这个特定页发起请求。因此,如果想要借助API获得观星人的真实数目,我们需要使用列表解析来充分利用延迟迭代进行计算。 PyGithub的文档(http://bit.ly/1a1odd3)非常有用,它

    参考来源

    - 位置:《社交网站的数据挖掘与分析(原书第2版)》第7章《7.2.2 建立GitHub API请求》(spine111;extracted/OReilly精品图书系列共21册(《Javascript权威指南》、《机器学习:实用案例解析》、《编写可读代码的艺术》、《算法精解》等)/_epub-src/text/part0100.html;u112-ch07-005)。 - 结论依据:原文在“延迟迭代”附近的定义、例子或代码支撑本卡核心说明:延迟分页在消费到后续项时才继续请求,不是第一次调用就取完所有页。边界按已读前提解释;示例未执行。 - 原始内容:延迟迭代”(lazy iterator)作为结果,这里说明了当请求发起后,它并没有立即尝试获取所有的29页结果。相反,当迭代检索该页之前的数据时,它会一直等待,直到这个特定页发起请求。因此,如果想要借助API获得观星人的真实数目,我们需要使用列表解析来充分利用延迟迭代进行计算。 PyGithub的文档(http://bit.ly/1a1odd3)非常有用,它