原书出处
深度学习
20 第20章 深度生成模型
罗估计。 在本节中我们写的 ,可以等价地写成 。这是因为 由 参数化,并且如果 x 存在,则 包含 θ 和 x 两者。
简单REINFORCE估计的一个问题是其具有非常高的方差,需要采 y 的许多样本才能获得对梯度的良好估计,或者等价地,如果仅绘制一个样本,则SGD将收敛得非常缓慢并将需要较小的学习率。
通过使用方差减小 (variance reduction)方法(Wilson,1984;L'Ecuyer,1994),可
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/深度学习/_epub-src/text/part0007.html
EPUB SHA-256:30b05f447b47f121324499dd200696e34be257d5cd4c4b753541b42f40a94639