知识卡片

普通读书笔记卡 · 6597.e · 生成模型:GPT-6

历史依赖策略需只用当时信息

理解等级:中级

策略可以使用决策时已知的行动、反馈和上下文历史。使用未来结果、尚未到达的延迟反馈或当时不可见的隐藏状态,会造成不可实施的信息优势;离线学习与评估应重建每一步真实可用信息集。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • · 查看原书依据

      entire history of actions and utility outcomes in deciding the optimal current action. Though actions and outcomes in the bandit feedback process are independent at each time step, the policy introduces dependence on past actions and outcomes, as shown in figure 12.24.

    参考来源

    - 位置:《Causal AI》第12章《因果决策与强化学习》(来源项目:a19c7933-4eda-4176-aebd-30fe7e1ad292;源文件:extracted/Causal AI/_epub-src/OEBPS/Text/chapter-12.xhtml) - 结论依据:摘录中关于历史依赖策略需只用当时信息的定义、比较或条件支撑卡片;原书表述不严谨的范围已在覆盖记录逐项限定,不把案例结果外推为普遍结论。 - 原始内容:entire history of actions and utility outcomes in deciding the optimal current action. Though actions and outcomes in the bandit feedback process are independent at each time step, the policy introduces dependence on past actions and outcomes, as shown in figure 12.24.