マルコフ決定過程 -理論とアルゴリズム-

POMDPを勉強したいがその前に普通のマルコフ決定過程を学ぶ．

出版元リンク:リンク 著者:中出康一 出版社:コロナ社 ISBN:978-4-339-02834-8

• 第2章 マルコフ連鎖と再生過程
  • 2.1 離散型確率変数
  • 2.2 連続型確率変数
  • 2.3 離散時間マルコフ連鎖
  • 2.4 周期
  • 2.5 定常確率と極限確率