← 返回卡片

原书出处

深入浅出强化学习:原理入门

04 第4章 基于蒙特卡罗的强化学习方法

核验版本的摘录快照 · 导入于 2026-11-19T06:04:54.435Z

产生样本的概率分布 ,比如正态分布。原来的期望可变为 定义重要性权重: ,普通的重要性采样求积分如方程(4.7)所示为

由式(4.7)可知,基于重要性采样的积分估计为无偏估计,即估计的期望值等于真实的期望。但是,基于重要性采样的积分估计的方差无穷大。

这是因为原来的被积函数乘了一个重要性权重,改变了被积函数的形状及分布。尽管被积函数的均值没有发生变化,但方差明显发生改变

此预览只包含定位所需的摘录和上下文。

原书定位详情

来源:a19c7933-4eda-4176-aebd-30fe7e1ad292

正文位置:extracted/深入浅出强化学习:原理入门/_epub-src/OEBPS/text00013.html

EPUB SHA-256:ae4f315e52c24fa9ecced8c7659f4c69287c6fc9158f48f7899711e24ebd8d57