模型在特定基準或任務上的高分,不代表它具有與人類相同的理解、意圖或常識。能力表現必須限定於任務、資料分布與測試方式;當模型能產生流暢解釋時,也需要額外檢查推理是否可靠。這個區分有助於避免把語言流暢度當作安全或智慧的充分證據。

思與行

  • 對重要能力主張同時測試外部效度、反事實情境與錯誤校準。
  • 在公眾溝通中區分「達成某項能力任務」與「具備一般理解能力」。

參考