MFRM 輸出的評分者嚴格度,可以作為評分者培訓的起點。若某位評分者特別嚴格,不應立刻將其視為錯誤,而要查看其對不同準則、作品類型與能力區段的打分模式,並與共同錨定作品的標準進行討論。
持續校準流程可包含共同作品評分、模型分析、分歧討論、規準修訂與再次評分。如此,模型不只產出統計結果,也成為團隊反思評分規準的工具。
思與行
- 每個評分週期安排一組共同作品,並記錄討論前後的評分變化。
- 將模型診斷與具體作品例子一起呈現,避免只用抽象嚴格度數值批評評分者。
MFRM 輸出的評分者嚴格度,可以作為評分者培訓的起點。若某位評分者特別嚴格,不應立刻將其視為錯誤,而要查看其對不同準則、作品類型與能力區段的打分模式,並與共同錨定作品的標準進行討論。
持續校準流程可包含共同作品評分、模型分析、分歧討論、規準修訂與再次評分。如此,模型不只產出統計結果,也成為團隊反思評分規準的工具。