題組內容

1.風華國中八年級為慶祝建校百年，舉辦「百年風華寫作競賽」。在評分機制上，由三位評審委員(含校內國語文教師代表、校外國語文輔導團代表、校友代表)進行評閱。然而成績公布後，有家長質疑評分不公平且可信度不足。

(1)此寫作競賽較適合以何種信度來檢視其可信度。

詳解提供者：Sun miss3667

一、適合採用「考評分者信度」來檢視其可信度，理由如下：

1. 本競賽由三位不同背景之評審進行評分，屬於主觀判斷的表現評量。

2. 不同評審可能因標準、經驗或偏好不同，而產生評分差異。

3. 受限於第2點，因此需檢視不同評分者之間評分結果的一致程度，以確保評量結果穩定且可信。評分者間信度越高，代表評分越一致，評量結果越具可信度。

二、舉辦單位促進評閱公平性和可信度的四項可能做法：

1. 建立明確且具體的評分規準（rubric）：

訂定清楚的評分指標（如內容、結構、語言表達等）；提供各等級描述（例如優、良、可、待加強）；降低評審主觀判斷差異。

2. 進行評審評分前的共識訓練（評分者訓練）：

透過試評與討論建立一致標準；校準評分尺度；提高評分一致性。

3. 採用多人評分與平均或協商機制：

每篇作品由多位評審評分；可採平均分數或差距過大時進行再評：降低單一評審偏誤影響

4. 實施匿名評分（去除身分資訊）：

不提供學生姓名、班級等資訊；避免評審因人際關係或刻板印象產生偏誤；提升公平性。