部分可觀測馬可夫決策過程(Partially Observable Markov Decision Process, POMDP)描述代理者無法直接觀察完整狀態、只能取得機率性觀測的決策問題。模型通常包含狀態、行動、轉移、觀測與偏好/獎勵等結構;主動推論以 POMDP 作為常見的離散狀態實作方式。

概念連結

主動推論、隱藏狀態、政策、生成模型

維基百科