← 返回起始笔记位置

知识卡片

普通读书笔记卡 · 9506.c.1.b · 生成模型:未记录

状态转移概率矩阵

理解等级:中级

有限马尔可夫过程可用状态集合和转移矩阵描述;矩阵第 i 行第 j 列是当前处于状态 i 时下一步到达状态 j 的概率,每行概率之和为一。吸收状态一旦进入便不会离开,对应自转移概率为一。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《现代人工智能技术》第8章《强化学习》(来源项目:book-source;源文件:extracted/现代人工智能技术/_epub-src/EPUB/xhtml/chapter10.xhtml) - 结论依据:原文给出矩阵元素和每行概率和以及终止状态。 - 原始内容:从某一个状态s出发,下一时刻到达其他状态的概率之和为1