知识卡片

普通读书笔记卡 · 6326.a

分析流程区分数据处理职责

理解等级:中级

文件和数据库读写获取数据,清理与重塑准备输入,聚合等转换产生新结构,模型计算回答特定问题,图表和摘要用于展示。分清各步有助于定位问题和说明产物,但实际工作可能反复往返,不是一次走完就保证结论正确。工具能完成处理,不等于模型或解释已经被验证。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 3 处

    • · 查看原书依据

      与外界进行交互 读写各种各样的文件格式和数据库。 准备 对数据进行清理、修整、整合、规范化、重塑、切片切块、变形等处理以便进行分析。 转换 对数据集做一些数学和统计运算以产生新的数据集。比如说,根据分组变量对一个大表进行聚合。 建模和计算 将数据跟统计模型、机器学习算法或其他计算工具联系起来。 展示 创建交互式的或静态的图片或文字摘要。 我将在本章中给出一些

    • · 查看原书依据

      假设你已经知道要做什么了)。

    • · 查看原书依据

      加载数据库中的数据,利用Web API操作网络资源。

    参考来源

    - 位置:《利用Python进行数据分析》第2章《第2章 引言》(spine256;extracted/OReilly精品图书系列共21册(《Javascript权威指南》、《机器学习:实用案例解析》、《编写可读代码的艺术》、《算法精解》等)/_epub-src/text/part0242.html;u030-ch02-001)。 - 结论依据:原文在“与外界进行交互”附近的定义、例子或代码支撑本卡核心说明:文件和数据库读写获取数据,清理与重塑准备输入,聚合等转换产生新结构,模型计算回答特定问题,图表和摘要用于展示。边界按已读前提解释;示例未执行。 - 原始内容:与外界进行交互 读写各种各样的文件格式和数据库。 准备 对数据进行清理、修整、整合、规范化、重塑、切片切块、变形等处理以便进行分析。 转换 对数据集做一些数学和统计运算以产生新的数据集。比如说,根据分组变量对一个大表进行聚合。 建模和计算 将数据跟统计模型、机器学习算法或其他计算工具联系起来。 展示 创建交互式的或静态的图片或文字摘要。 我将在本章中给出一些 - 位置:《利用Python进行数据分析》第2章《小结及展望》(spine260;extracted/OReilly精品图书系列共21册(《Javascript权威指南》、《机器学习:实用案例解析》、《编写可读代码的艺术》、《算法精解》等)/_epub-src/text/part0246.html;u041-ch02-001)。 - 结论依据:工具使处理与展示可行,但目标问题与分析方法仍需明确,熟悉API不等于掌握研究设计。 - 原始内容:假设你已经知道要做什么了)。 - 位置:《利用Python进行数据分析》第6章《第6章 数据加载、存储与文件格式》(spine286;extracted/OReilly精品图书系列共21册(《Javascript权威指南》、《机器学习:实用案例解析》、《编写可读代码的艺术》、《算法精解》等)/_epub-src/text/part0272.html;u131-ch02-001)。 - 结论依据:输入输出连接外部表示与内存数据,格式选择、解析和分析是可区分的职责;能导入并不等于数据已适于分析。 - 原始内容:加载数据库中的数据,利用Web API操作网络资源。