知识卡片

普通读书笔记卡 · 6267.h

词对偏差分数不是显著性概率

理解等级:中级

搭配t-score用观测共现相对独立性基线的偏离及规模进行评分,以区别仅看原始共现次数。它不是词对“为真搭配”的概率;将其作排序统计量与作正式假设检验是不同用法,后者需要说明假设与样本条件。不能只因函数名字包含t就推定任何词频样本都满足正态前提。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • · 查看原书依据

      学生t分数 传统意义上,学生t分数(Student’s t-score)适用于假设检验。如应用到n元文法分析那样,t分数可以用来测试两个词是否搭配。该计算的统计过程对每个规范的t测试使用了标准分布。相对原始频率,t分数的一个优势是,t分数考虑了一个二元文法相对其构成的分量的频率。这个特性有助于排序搭配的强弱。t测试不好的地方在于它需要假定搭配的概率分布是正态

    参考来源

    - 位置:《社交网站的数据挖掘与分析(原书第2版)》第4章《4.4.4 分析人类语言中的二元文法》(spine87;extracted/OReilly精品图书系列共21册(《Javascript权威指南》、《机器学习:实用案例解析》、《编写可读代码的艺术》、《算法精解》等)/_epub-src/text/part0076.html;u067-ch04-039)。 - 结论依据:原文在“学生t分数”附近的定义、例子或代码支撑本卡核心说明:搭配t-score用观测共现相对独立性基线的偏离及规模进行评分,以区别仅看原始共现次数。边界按已读前提解释;示例未执行。 - 原始内容:学生t分数 传统意义上,学生t分数(Student’s t-score)适用于假设检验。如应用到n元文法分析那样,t分数可以用来测试两个词是否搭配。该计算的统计过程对每个规范的t测试使用了标准分布。相对原始频率,t分数的一个优势是,t分数考虑了一个二元文法相对其构成的分量的频率。这个特性有助于排序搭配的强弱。t测试不好的地方在于它需要假定搭配的概率分布是正态