知识卡片
本地快照分离获取与分析
把已取得的联系人响应保存为JSON,后续分析从文件读取,可避免调试统计代码时反复请求远端。快照代表当次查询和当时可见结果,不是持续更新的全量档案;复用时应保留获取时间、查询范围和来源,识别陈旧与缺页。原书示例中的变量conections_data拼写需要与定义一致,不能照抄认作已经运行。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 3 处
- · 查看原书依据
以避免任何不必要的API请求,这些请求的速率流上限(http://linkd.in/1a1m2WP)限制类似于Twitter API的限制。 警告:当使用LinkedIn API的时候要小心:速率上限限制直到世界标准时间(Coordinated Universal Time,UTC)的午夜才会重置,并且如果你不够小心,一个有bug的循环会打乱你下一个24小时
- · 查看原书依据
Write the output to a file for convenience f = open(os.path.join('resources', 'ch04-googleplus', USER_ID + '.json'), 'w') f.write(json.dumps(activity_results, indent=1)) f.close()
- · 查看原书依据
最小化请求Twitter API的次数,避免可能遇到的频率限制问题。毕竟,一遍又一遍地获取重复的数据并没有什么意义。 示例9-6展示了Python的io包的使用,以确保你读/写的所有数据都是使用UTF-8编解码的,这样可以避免(经常令人担忧又不容易被发现)UnicodeDecodeError异常,这种异常经常出现在Python 2.x应用对文本数据的序列化和
参考来源
- 位置:《社交网站的数据挖掘与分析(原书第2版)》第3章《3.2.1 发起LinkedIn API请求》(spine78;extracted/OReilly精品图书系列共21册(《Javascript权威指南》、《机器学习:实用案例解析》、《编写可读代码的艺术》、《算法精解》等)/_epub-src/text/part0067.html;u045-ch03-003)。
- 结论依据:原文在“以避免任何不必要的API请求”附近的定义、例子或代码支撑本卡核心说明:把已取得的联系人响应保存为JSON,后续分析从文件读取,可避免调试统计代码时反复请求远端。边界按已读前提解释;示例未执行。
- 原始内容:以避免任何不必要的API请求,这些请求的速率流上限(http://linkd.in/1a1m2WP)限制类似于Twitter API的限制。 警告:当使用LinkedIn API的时候要小心:速率上限限制直到世界标准时间(Coordinated Universal Time,UTC)的午夜才会重置,并且如果你不够小心,一个有bug的循环会打乱你下一个24小时
- 位置:《社交网站的数据挖掘与分析(原书第2版)》第4章《4.2.1 发起Google+API请求》(spine85;extracted/OReilly精品图书系列共21册(《Javascript权威指南》、《机器学习:实用案例解析》、《编写可读代码的艺术》、《算法精解》等)/_epub-src/text/part0074.html;u058-ch03-003)。
- 结论依据:清洗后的动态写JSON以供后续分析,需要保留来源与转换口径。
- 原始内容:Write the output to a file for convenience f = open(os.path.join('resources', 'ch04-googleplus', USER_ID + '.json'), 'w') f.write(json.dumps(activity_results, indent=1)) f.close()
- 位置:《社交网站的数据挖掘与分析(原书第2版)》第9章《9.6.3 讨论》(spine132;extracted/OReilly精品图书系列共21册(《Javascript权威指南》、《机器学习:实用案例解析》、《编写可读代码的艺术》、《算法精解》等)/_epub-src/text/part0121.html;u161-ch03-003)。
- 结论依据:文本快照供重复分析可减少重复请求,但仍需保留时间、查询与来源版本。
- 原始内容:最小化请求Twitter API的次数,避免可能遇到的频率限制问题。毕竟,一遍又一遍地获取重复的数据并没有什么意义。 示例9-6展示了Python的io包的使用,以确保你读/写的所有数据都是使用UTF-8编解码的,这样可以避免(经常令人担忧又不容易被发现)UnicodeDecodeError异常,这种异常经常出现在Python 2.x应用对文本数据的序列化和