| 杜雨潔
【文/測驗及評量研究中心專案助理 杜雨潔】【圖/測驗及評量研究中心 蔡翰征】
臺灣學生學習成就評量資料庫(以下簡稱TASA)國中正式施測已於2010年5月測驗完畢,為了配合TASA執行國中二年級之標準設定流程,並增進標準設定會議成員之專長與經驗,特聘請本院謝進昌助理研究員開辦此「標準設定--Angoff方法」研習課程,以利標準設定會議之推動。
標準設定會議推動小組成員主要包含表現標準描述(PLD)解說者、分科標準設定成員、導引者、行政人員及後端資料處理之統計人員,標準設定方法採用Yes/No Angoff法,標準設定程序首先進行PLD及Yes/No Angoff法詳細說明,務必讓所有現場參與標準設定之老師、教授及家長等瞭解PLD之內涵與Yes/No Angoff法之執行,緊接著便進行第一輪之標準設定,由分科標準設定成員依Yes/No Angoff法填寫記錄表逐題檢視,並填寫評估問卷,問卷內容包含對會議目的、執行方法及前導資料是否瞭解等等,然後統計人員進行資料彙整及分析,並回饋訊息予分科標準設定成員,以利第二輪標準設定之進行。
進行第二輪標準設定時,分科標準設定成員根據回饋訊息、PLD及歸類不一致之題項討論結果再次進行填寫記錄表之動作,並填寫評估問卷,後端統計人員再進行第二次資料彙整及分析,以再次提供回饋訊息予現場分科標準設定成員進行瞭解與討論,接著根據這些所有的訊息,分科標準設定成員進行第三輪標準設定程序,統計人員根據最後一次記錄表進行結果分析,目的在有限的標準設定程序中,使現場所有分科標準設定成員達到最佳共識,以獲得最後代表成就表現分級之學生量尺分數。
標準測驗評量機制內容程序繁瑣,需要許多領域專業人才的分工合作才能達到精益求精的目的,TASA亦本著此更上層樓的精神,邀請謝進昌老師講授標準設定之概念與程序執行,使院內同仁對相關知識多所瞭解,提昇本職專業知能,以利後續TASA推動各項測驗工作。