作者:河北品科科技 發布日期:2024-11-8
參照過去人工評卷的方法,我們將網上閱卷系統按照三個階段來評卷,并且在計算機系統的控制下,過去很多好的評卷思想由于客戶條件無法實現或者不能很好的實現,現在可以得到充分利用,不僅能夠提高評卷質量,更能夠促進和考察評卷員的評卷質量。
試評階段:將部分或全部試卷分發給評卷員評卷,主要是同一評卷員對評分標準的掌握尺度。試評試卷來自于考生的正常答卷,對其評卷不影響考生的終成績。
正評階段:由系統將考生試卷隨機地分發給評卷員,系統經過誤差控制,產生考生的終成績。
檢查階段:由評卷組長隨機對某試題或某評卷員的評分結果進行檢查。考察各教師的評分穩定性。該階段實際上是與正評階段同時進行的。
對設置了三評的答卷/答題,系統首先隨機將答卷分發給兩個評卷教師,這兩個評卷教師評閱完成后得出X1,X2兩個評分,此時系統將對【X1-X2】的絕對值進行比較,如其絕對值小于容許的誤差值,則系統將自動取X1,X2的平均值作為該考生的得分;如超出容許的誤差值,系統將把該考生的答卷自動分發給第三人評卷人。第三評卷評閱完成后,得到X3的評分,此時系統對三人評分值的兩兩之差進行比較,如果它們的差值在容許誤差范圍內,則系統將取三位評卷人員的評分中,差值小的兩個評分的平均值作為該考生的得分,否則系統將該考生的答卷轉發評卷組長進行終評。
質量控制 在評卷過程中,雖然通過誤差控制可以有效地抑制了考生成績的評判誤差,但是所有評卷員在評卷中對標準掌握得是否一致,每一個評卷員在評卷過程中對標準的掌握是否一致,均影響著評卷的質量、速度和考生的成績。系統通過以下兩個控制來進一步抑制誤差、提高閱卷的整體質量、效率。
評卷員之間一致性控制 控制每個評卷員之間的一致性。使用的數學模型為柯斯檢驗法。簡述如下:首先計算出整體評卷的分數-人數比曲線,再計算評卷員個人的個人分數-人數比曲線;這時比較兩個曲線的擬合程度,如果超過設置的允許值,則認為評卷有誤差,否則就沒有誤差。
評卷員個人一致性控制 個人一致性控制主要通過個人復評試卷來檢驗評卷員在評卷中的穩定性。系統每隔一段時間(可以定時,可以隨機,隨機時要保證一定間隔)自動在評卷員已評試卷中抽取一定數量的個人復評試卷分發給評卷員進行評卷。
個人復評主要是檢查評卷員在不同的時間對同一份試卷評判是否一致,并將比較結果寫入統計結果庫,以此來檢查評卷老師在評卷過程中的“穩定性”。 其中個人復評的結果分數不作為有效評分。
相關文章
截屏,微信識別二維碼
手機:15203183888
(點擊手機號復制,添加好友)