「Active inference and learning」說明預期自由能可拆解為工具性/實用價值與認知/資訊價值:前者使代理者傾向預期偏好的結果,後者使代理者選擇能增加對隱藏狀態理解的行動。文章也將風險與模糊性納入另一種分解,並提出習慣可由觀察目標導向行為逐步學得。它的重要貢獻是說明探索和利用可在同一目標函數中共同出現。

思與行

  • 設計一個同時有「抵達目的地」與「探索新路線」的任務,觀察兩種價值的拉扯。
  • 避免把好奇心簡化成單純追求新奇;資訊是否能辨識狀態才是關鍵。

參考