98~99年度D計畫優良子計畫

東吳中英文題庫信效度檢測計畫

子計畫編號 : 98D33601
計畫主持人 : 羅國英 共同主持人 : 無 協同主持人 : 無

執行內容 :

本校英檢題庫經初步檢測,其穩定性及鑑別度大致可接受。唯目前多數題目的難度估測仍依照出題老師的判斷,而實際測量結果與專家判定有某種程度的落差,可能需要更清楚的掌握。另外,由於英檢已經列入97學年度入學學生的畢業要求,而本年度即將開始實施正式檢測,關於檢測試題的組成、計分以及畢業門檻的設定,都還需要進一步數據作為決策的依據。本計畫希望能藉著進一步檢測分析,讓東吳英檢能較精準的掌握適當難度、穩定有效的測量學生英語能力。本年度主要工作內容包括既有檢測資料的分析、進一步廣泛施測及信效度分析、以及以這些統計資料為基礎,和本校英語教學專家共同討論、制訂、設立題庫管理機制以及檢測分數的計分和換算原則(包括檢討試題結構,以及決定如何從題庫中篩選具備「適當」測量特性的題目,如何依據每次試題可能有的難度差異作測驗分數的轉換、設定及格門檻等)。

本校中文題庫題目也已經累積甚多,也已經完成初步測試,試題內容、結構也還有一些爭議等待釐清。本年度暫時僅從測量技術面,對既有數據作統計分析,也許能提出若干測量技術面的檢討建議,日後再由中文系作進一步規劃。

計畫時程 :

工作事項 月          份
八月 九月 十月 十一月 十二月 一月 二月 三月 四月 五月 六月 七月
相關辦法擬定及資料蒐集









題庫管理諮詢會議








英檢題庫既有資料分析








試題篩選準備工作





模擬測驗及相關資料分析









正式施測準備及相關資料分析








題庫建置及管理







中文題庫資料分析











預期具體成果 :

1-1-1 建置完成教師教學專業成長專責單位,並敘明該單位之組織架構、人員編制與任務。
2-2 落實學生學習成效之考核(說明考核方式及後續處理)

計畫執行成果摘要 :

結合本年度計畫主要針對東吳英檢的啟動作必要的準備。任務之一是進一步掌握目前題庫試題的測量特性,使東吳英檢更能掌握適當難度,穩定、有效鑑別學生英文能力;任務之二則是將檢測資訊提供給英語教學中心,一方面反映學生英語學習狀況,另方面也尋求英語教學中心的協助,包含配合試測、試題審查並共同討論本校英檢具體實施方式(題型、難度、選題、審題、設定及格標準等)。全案依照計畫書順利執行,也藉著各項工作的推動提醒學生對英檢的注意和瞭解。具體完成的工作包括:1.分析既有試測資料,初步掌握題庫整體特性;2.對全校一、二年級大規模測試,進行進一步信效度檢查;3.先後召開三次諮詢會議,達成相關共識;4.辦理一次模擬考;5.協助辦理三次正式「東吳英檢」,其中一次為大規模統一檢測,另兩次規模較小,讓未能通過的學生報名參加;6.編製英檢工作者操作手冊,載明相關試務實施步驟、注意事項、試題分析、題庫管理準則等具體辦法。本年度全校約6500人次參與相關測試,試題檢測結果則顯示試題穩定度及效度都可接受,估計信度係數應在0.9以上,也具備一定的關聯及區辨效度。按照這套英檢辦法,本校英檢通過比例大約為85%。

Back to Top