余民寧與李仁豪以臺灣中小學教師為樣本,研究網路與紙本問卷、議題熟悉度對回收率與作答內容的影響。研究透過 Rasch 模式檢視 Likert 量尺反應及 DIF,報告指出調查方式本身未顯示主要 DIF 效果,但高低議題熟悉度組之間出現多個差異題目。
這個在地案例提醒研究者,作答模式或問卷媒介不是唯一可能的偏差來源。受訪者對議題的熟悉程度,也可能改變某些題目被理解或使用的方式。若研究者只比較總分,這類題目層級差異很容易被忽略。
思與行
- 問卷設計時記錄媒介、題目熟悉度與填答情境,並在重要研究中檢查 DIF。
- 不要把「線上與紙本平均分數相近」視為所有題目在兩種媒介中都等值。
參考
- 臺灣研究資料庫:余民寧、李仁豪,〈調查方式與議題熟悉度對問卷回收率與內容的影響〉(2007)。國立政治大學學術集成
- 延伸概念:DIF檢查不同群體是否以不同方式回應題目、測量恆等性是跨群體比較的前提之一。