知识卡片
API数据偏差
API结果受到资源类型、地点、查询、时点、授权与访问约束筛选,不等于现实世界的全量无偏样本。世界与美国热门列表的重合只能描述这次查询返回的成员关系,不能自动代表所有用户兴趣;分析前应记录采集边界和时点,解释未取得或未覆盖的数据。
本章转推例中原帖显示23次转推,但搜索样本只收录其中一条,不能拿样本计数替代平台计数,也不能由平台计数假定本地具有全部记录。
职业网络案例进一步说明数据的限制可以来自接口设计本身:档案字段可见不等于存在查询任意两人关系的入口。不可观测关系不能直接作为不存在的边。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 11 处
- · 查看原书依据
分析的结果完全取决于你的查询以及其返回的数据。 注意:附录C提供了一些Python常见用法的参考资料,例如列表解析等,这可能会对你有所帮助。 示例1-4:计算两个热门话题集合的交集 world_trends_set= set([trend['name'] for trend in world_trends[0]['trends']]) us_trends_s
- · 查看原书依据
count=count) statuses = search_results['statuses'] # Iterate through 5 more batches of results by following the cursor for _ in range(5): print "Length of statuses", len(statuses)
- · 查看原书依据
前5项(对应索引为0到4的元素)。附录C有对Python切片更加详细的描述。 [ "\u201c@KathleenMariee_: #MentionSomeOneImportantForYou @AhhlicksCruise..., "#MentionSomeoneImportantForYou My bf @Linkin_Sunrise.", "RT @h
- · 查看原书依据
我们只收集了23个转推中的一个。原始的推文和其他22个转推都没有出现在数据集中。尽管我们可能会提问,哪22个用户转推了这条状态,但是这却不会导致任何特别的问题。 这种问题的答案是非常有价值的,因为它允许我们选取能代表一个概念的内容,比如这里的“God”,并且能够发现分享相同心情和共同兴趣的用户团体。像之前提到的一样,兴趣图谱是一种非常便于对包含人物以及他们感
- · 查看原书依据
用户特别授权它访问的那些。例如,作为编写一个Facebook应用程序的开发者,你将会是登录到该应用程序的用户,那么它就能够访问你特别对它授权的那些数据。在这种情况下,作为Facebook用户你可能会认为应用程序有些像你的Facebook好友,因为应用程序可以访问什么最终都受到你的控制并且你可以在任何时候撤销访问授权。Facebook平台政策文档(http:/
- · 查看原书依据
隐私设置中选择不共享特定类别的个人信息,例如对应用程序是否喜欢等,你将会得到空的结果而不是任何显式的错误信息。 示例2-7:查询你所有朋友的“赞” # First, let's query for all of the likes in your social # network and store them in a slightly more conve
- · 查看原书依据
尊重隐私,并且尽可能的遵守Facebook的服务条款(http://on.fb.me/1a1lMXM)。和Twitter以及其他这些本质上更加开放的数据源中的数据不同,Facebook数据是非常敏感的,特别是当你分析自己的社交网络时。希望这一章清楚地表明了我们可以使用社交数据实现许多激动人心的可能性,并且Facebook隐藏了大量的价值。 注意:本章和其他章
- · 查看原书依据
这样的API方法是故意未提供的。它的API无法把它打造成像Facebook或Twitter那样的社会图谱,因此需要你对可利用的数据提各种问题。 本章剩下的内容会教会你用LinkedIn API来读取数据,同时也会介绍一些基本的数据挖掘技术,以帮助你根据相似度来聚类不同的行业,这样就能回答下面的几种问题: ·你的哪些“联系人”(connection)最符合你的
- · 查看原书依据
private”,进一步的细节信息也难以获得。
- · 查看原书依据
地理位置约束,这样才能提供更好的API来查询流行话题(正如示例9-3中那样)。和其他API类似,该API返回的流行话题是JSON格式的,并能够转换为标准的Python对象,然后可以使用列表推导式(list comprehension)或相似的技术来操作数据。这说明探索API响应是相当容易的事情了。你可以尝试多种多样的WOE ID来对比不同地域的流行话题。例如
- · 查看原书依据
max_pages = 16 results = [] tweets = make_twitter_request(twitter_api.statuses.user_timeline, **kw) if tweets is None: # 401 (Not Authorized) - Need to bail out on loop entry tweet