知识卡片
续页参数承接同一查询
动态数据接口可能返回用于下一批结果的查询信息,而非稳定的第几页。应沿响应给出的导航继续并识别终止条件;书中缺少next_results时退出,最多再循环五批是采集预算,不证明已取得全部匹配数据。refresh_url表示更新方向,与向更旧结果续页不是同一操作。
第9章讨论把这种机制统称cursor,但代码实际沿search_metadata.next_results中的max_id等查询参数续页,不能与好友列表等端点的next_cursor混用。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
- · 续页参数承接同一查询
- · 9.4.3 讨论
原书出处 · 2 处
- · 查看原书依据
next_results字段,该查询字符串为随后的查询提供了基础。如果我们没有使用twitter这样的库帮我们创建HTTP请求,这种预先构造的查询字符串可能仅仅会被添加到搜索API的URL中。然而,由于我们没有直接地创建HTTP请求,我们必须将查询字符串分解成一组键/值对并且将其作为关键词参数提供。 按照Python的语法,我们正在将字典中的值拆包成函数接收
- · 查看原书依据
next_results = search_results['search_metadata']['next_results'] except KeyError, e: # No more results when next_results doesn't exist break # Create a dictionary from next_results
参考来源
- 位置:《社交网站的数据挖掘与分析(原书第2版)》第1章《1.3.4 搜索推文》(spine64;extracted/OReilly精品图书系列共21册(《Javascript权威指南》、《机器学习:实用案例解析》、《编写可读代码的艺术》、《算法精解》等)/_epub-src/text/part0053.html;u021-ch01-017)。
- 结论依据:原文在“next_results字段”附近的定义、例子或代码支撑本卡核心说明:动态数据接口可能返回用于下一批结果的查询信息,而非稳定的第几页。边界按已读前提解释;示例未执行。
- 原始内容:next_results字段,该查询字符串为随后的查询提供了基础。如果我们没有使用twitter这样的库帮我们创建HTTP请求,这种预先构造的查询字符串可能仅仅会被添加到搜索API的URL中。然而,由于我们没有直接地创建HTTP请求,我们必须将查询字符串分解成一组键/值对并且将其作为关键词参数提供。 按照Python的语法,我们正在将字典中的值拆包成函数接收
- 位置:《社交网站的数据挖掘与分析(原书第2版)》第9章《9.4.3 讨论》(spine130;extracted/OReilly精品图书系列共21册(《Javascript权威指南》、《机器学习:实用案例解析》、《编写可读代码的艺术》、《算法精解》等)/_epub-src/text/part0119.html;u153-ch01-017)。
- 结论依据:此处是带max_id等参数的next_results,不等于所有端点的next_cursor。
- 原始内容:next_results = search_results['search_metadata']['next_results'] except KeyError, e: # No more results when next_results doesn't exist break # Create a dictionary from next_results