題組內容
(3)舉出 2 種評估該試卷效度的作法。
詳解 (共 9 筆)
該試卷用途為測量學生學習成效的前後測,因此可以由授課教師列出雙向細目表,以較為主觀的方式評估該試卷之內容效度;或是邀請相關領域的專家學者來評估該份問卷,以獲得專家效度。
內容效度:利用雙向細目表等協助審查試題取樣的適切性。
同時效度:另找一份較具公信力的英文測驗,與自編測驗同時測驗,檢視兩者之間的相關程度。
參考答案:
效度為測驗分數的有效程度,只測驗能正確的測量到符合預期效果的程度,以下舉出兩種評估該試卷效度之作法:
(一)雙向細目表:以雙向細目表檢測其內容效度是否符合教學目標與教材內容,其步驟為列出教學目標、評估目標之相對重要性、建立雙向細目表,最後分析試題與雙向細目表之符合程度。
(二)效標關聯效度:其分為同時效度與預測效度,前者可藉由此測驗加以分析英語寫作能力程度之關聯;後者可藉由此測驗預測英語口說檢定之成績。
1. 內部一致性分析之團體對照法:依據學生測驗總分高低,分為高低分組,接著比較這兩組學生在每個試題上的答對百分比,若該題的高分組其答對百分比顯著的高於低分組的話,即可保留下來,用以評估此份試卷的構念效度。
2. 專家判斷:建立雙向細目表,必須先列舉出教材內容的單元與單元目標,再判斷每個單元內涵與各項目標的相對重要性,再次決定每個細格的重要性以形成完整的雙向細目表,最後測驗編製者依據此細目表來編製測驗。若雙向細目表的架構愈能顧及教材內容與教學目標,則內容效度將愈高。其次輔以測驗題目、測驗編製程序、教材分析、課程標準分析和參與測驗編製人員等指標來判斷,以評估此試卷之內容效度。
資料來源:
1. Sharon筆記
2. 國家教育研究院
2.內容效度:利用雙向細目表擬定出學習目標與學習內容,看題目使是否符合
評估試卷效度的作法:
1. 內容效度:請英語科教師或專家審核試卷題目是否涵蓋課程目標與教學內容,確保測驗能反映學生應學習的核心能力。
2. 準則關聯效度:將試卷分數與其他已被驗證的英語能力測驗分數做比較,若相關性高,代表試卷能有效測量學生英語能力。
3.構念效度:檢查試卷是否能區分不同程度學生的英語能力。1. 內容效度
2. 效標關聯效度