知识卡片

普通读书笔记卡 · 6376

阈值异常不等于错误观测

理解等级:中级

abs(value)>3在本节标准正态样本中标出超阈值观测,却不证明这些点来自录入错误。真实任务的阈值应结合变量单位、分布与业务规则确定,不能对任意未经标准化的数据直接套3。异常标志用于进一步检查,不应自动成为删除真实极端事件的理由。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • · 查看原书依据

      绝对值大小超过3的值: In [173]: col = data[3] In [174]: col[np.abs(col) > 3] Out[174]: 97 3.927528 305 -3.399312 400 -3.745356 Name: 3 要选出全部含有“超过3或-3的值”的行,你可以利用布尔型DataFrame以及any方法: In [175]:

    参考来源

    - 位置:《利用Python进行数据分析》第7章《检测和过滤异常值》(spine294;extracted/OReilly精品图书系列共21册(《Javascript权威指南》、《机器学习:实用案例解析》、《编写可读代码的艺术》、《算法精解》等)/_epub-src/text/part0280.html;u160-ch07-025)。 - 结论依据:原文在“绝对值大小超过3”附近的定义、例子或代码支撑本卡核心说明:abs(value)>3在本节标准正态样本中标出超阈值观测,却不证明这些点来自录入错误。边界按已读前提解释;示例未执行。 - 原始内容:绝对值大小超过3的值: In [173]: col = data[3] In [174]: col[np.abs(col) > 3] Out[174]: 97 3.927528 305 -3.399312 400 -3.745356 Name: 3 要选出全部含有“超过3或-3的值”的行,你可以利用布尔型DataFrame以及any方法: In [175]: