「Active inference and learning」說明預期自由能可拆解為工具性/實用價值與認知/資訊價值:前者使代理者傾向預期偏好的結果,後者使代理者選擇能增加對隱藏狀態理解的行動。文章也將風險與模糊性納入另一種分解,並提出習慣可由觀察目標導向行為逐步學得。它的重要貢獻是說明探索和利用可在同一目標函數中共同出現。
思與行
- 設計一個同時有「抵達目的地」與「探索新路線」的任務,觀察兩種價值的拉扯。
- 避免把好奇心簡化成單純追求新奇;資訊是否能辨識狀態才是關鍵。
參考
- Friston, K. et al. (2016). Active inference and learning. Neuroscience & Biobehavioral Reviews, 68, 862–879. PMC 全文 · DOI
- 延伸:預期自由能整合目標追求與資訊探索、探索與利用不是必然互斥的兩種模式、習慣能被理解為已學會的行動政策