原书出处
大数据挖掘与统计机器学习
04 第4章 模型评价与选择
分布P 和Q的KL距离为: 对于离散随机变量,其概率分布P 和Q的KL距离为:
相对熵的值为非负,当且仅当P=Q时,DKL(P‖Q)=0。因此可以用DKL(P‖Q)来度量概率分布Q与P 之间的差异。
假设P(X)是真实的分布,Q(X)是它的估计,取值空间为一些可接受的分布集合Z
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/大数据挖掘与统计机器学习/_epub-src/OEBPS/Text/chapter6_0002.xhtml
EPUB SHA-256:6f2324b41414df46227a4d0ee4cc188eb120a38a798a14be96a3d7d919028c00