模型比較不能取代外部預測與重複驗證

Bayesian model comparison 或資訊準則可以比較候選模型對既有資料的相對解釋力，但勝出的模型不因此成為真實心理機制。研究者仍須檢查參數能否恢復、模型能否預測未見資料、結果能否在獨立樣本重現，以及模型是否比更簡單的替代解釋更有增益。

思與行

• 區分模型內部擬合、交叉驗證、外部驗證與跨實驗室複現。
• 為模型寫出事前可檢驗的預測，避免只在結果出來後解釋故事。

參考

• 機制導向模型與資料導向模型必須使用不同的臨床評估標準。
• 參數必須先可識別與可重現才能代表個體差異。