北京2014年5月27日電 /美通社/ -- 高品質的題庫建設是維護考試安全、促進考試公平、提升考試品質和考生體驗的根本，是開展考試測評等工作的基礎，也是對專業(yè)化考試機構和主辦方的基本要求。目前，計算機化考試在科學性、公平性、權威性等方面已遠遠超越傳統(tǒng)紙筆考試，而且基于計算機化考試也為采集、分析考試各個環(huán)節(jié)的數據進而開展大數據分析提供了基礎。如何通過數據分析，改進試題內容和表現形式，提升題庫質量和考生體驗，也成為諸多考試主辦方重點關注和研究的領域。近日，ATA 主辦的“2014考試理論與測評技術春季研討會”，邀請了多名考試行業(yè)權威專家與70多名來自政府部門、行業(yè)協會、高校研究機構的嘉賓，圍繞著“基于數據分析的高品質題庫建設”的主題，進行了熱烈的討論和分享。
什么樣的題庫是高品質題庫？
建設一個高品質的題庫，需要綜合考慮試題的難度、區(qū)分度、信度、效度。目前，題庫建設一般采用兩種理論基礎作為指導，一種是經典測量理論，它具有模型簡單、成本較低的優(yōu)勢，但在可靠性和拓展性上較差，無法支撐大規(guī)模的題庫。近年來，國際上較為先進的題庫建設普遍采用了項目反應理論（Item Response Theory，IRT）作為測量理論的指導。通過對考生答對題目的概率，分析考生的能力和題目在難度、區(qū)分度、猜測度上的特征參數，從而幫助主辦方更好的改進試題和題庫質量。基于 IRT 理論為指導的題庫建設，題目參數可以適用于各種測量情景，包括智能化組卷、計算機測試，特別適用于開發(fā)計算化自適應測驗，題庫具有很強的功能可擴展性。
如何提升考生體驗，保證考試公平？
考生是考試的主體和根本，一個公平的考試除了為考生創(chuàng)造相對一致的物理考試環(huán)境以外，在試題內容和表現形式以及題庫的科學性上也充分考慮每個考生個體的因素。例如，如果一份試卷的試題總體的難度是由難至易，這樣就會造成考生心理緊張，影響考生的正常發(fā)揮，也會影響考生實際的結果，而通過對試題、題庫的數據分析則可以發(fā)現和杜絕這類問題的出現。
除了試題數量、試題內容、試題難度和試題表現形式之外，還可以通過對考生答題樣本和考試結果，以及對考生人數、成績分布、學歷結構、從業(yè)年限等數據的分析，發(fā)現不同考生對同一道試題和同一套試卷的不同結果。通過對每一道題目的數據分析，可以得出試題本身難度值、區(qū)分度、耗時、選項搭配、信度等參數的結論，以幫助主辦方更好的提升試題質量；通過對考試整體結果、完成度等的數據分析，可以看出哪些試題表現形式、哪些卷面設計更符合考生使用習慣，多少題量和何種難度設置能起到最理想的篩選效果。
在“2014年考試理論與測評技術春季研討會”上，ATA 考試測評研究院院長、中國教育測量協會會員、數據分析領域專家劉穎博士和 ATA 副總裁趙曙秋先生分別發(fā)表了“題庫建設的一般方法和步驟”、“如何通過數據分析提升題庫質量”以及“試題表現技術”等主題演講，并分享了ATA在數據分析、題庫建設、試題表現技術和大規(guī)模計算機化考試運營等方面的成功案例和經驗，與到會嘉賓進行了熱烈的互動和討論。
ATA 大規(guī)?？荚囘\營領域豐富的成功經驗，以及在考試理論和測評技術等方面始終不斷的探索、研究和創(chuàng)新，已逐步形成了一套基于龐大考試和考生數據為支持的理論基礎和應用模式。ATA 專業(yè)的研究成果、較佳應用實踐和典型考試案例，也引起了與會來賓的高度關注和熱烈討論，紛紛表示本次研討會的內容對于他們在如何提高題庫建設品質、創(chuàng)新考試形式等方面，均得到了啟發(fā)和幫助。
為了推動考試理論與測評技術的不斷創(chuàng)新和發(fā)展，ATA 作為國內領先的第三方計算機化考試與測評服務供應商，也將通過不定期組織專題研討會等各種形式，為考試與測評行業(yè)的主辦方、服務商和各界專家學者搭建一個學習交流、溝通分享的平臺。
