北京2014年5月27日電 /美通社/ -- 高品質(zhì)的題庫(kù)建設(shè)是維護(hù)考試安全、促進(jìn)考試公平、提升考試品質(zhì)和考生體驗(yàn)的根本，是開(kāi)展考試測(cè)評(píng)等工作的基礎(chǔ)，也是對(duì)專(zhuān)業(yè)化考試機(jī)構(gòu)和主辦方的基本要求。目前，計(jì)算機(jī)化考試在科學(xué)性、公平性、權(quán)威性等方面已遠(yuǎn)遠(yuǎn)超越傳統(tǒng)紙筆考試，而且基于計(jì)算機(jī)化考試也為采集、分析考試各個(gè)環(huán)節(jié)的數(shù)據(jù)進(jìn)而開(kāi)展大數(shù)據(jù)分析提供了基礎(chǔ)。如何通過(guò)數(shù)據(jù)分析，改進(jìn)試題內(nèi)容和表現(xiàn)形式，提升題庫(kù)質(zhì)量和考生體驗(yàn)，也成為諸多考試主辦方重點(diǎn)關(guān)注和研究的領(lǐng)域。近日，ATA 主辦的“2014考試?yán)碚撆c測(cè)評(píng)技術(shù)春季研討會(huì)”，邀請(qǐng)了多名考試行業(yè)權(quán)威專(zhuān)家與70多名來(lái)自政府部門(mén)、行業(yè)協(xié)會(huì)、高校研究機(jī)構(gòu)的嘉賓，圍繞著“基于數(shù)據(jù)分析的高品質(zhì)題庫(kù)建設(shè)”的主題，進(jìn)行了熱烈的討論和分享。
什么樣的題庫(kù)是高品質(zhì)題庫(kù)？
建設(shè)一個(gè)高品質(zhì)的題庫(kù)，需要綜合考慮試題的難度、區(qū)分度、信度、效度。目前，題庫(kù)建設(shè)一般采用兩種理論基礎(chǔ)作為指導(dǎo)，一種是經(jīng)典測(cè)量理論，它具有模型簡(jiǎn)單、成本較低的優(yōu)勢(shì)，但在可靠性和拓展性上較差，無(wú)法支撐大規(guī)模的題庫(kù)。近年來(lái)，國(guó)際上較為先進(jìn)的題庫(kù)建設(shè)普遍采用了項(xiàng)目反應(yīng)理論（Item Response Theory，IRT）作為測(cè)量理論的指導(dǎo)。通過(guò)對(duì)考生答對(duì)題目的概率，分析考生的能力和題目在難度、區(qū)分度、猜測(cè)度上的特征參數(shù)，從而幫助主辦方更好的改進(jìn)試題和題庫(kù)質(zhì)量?；?IRT 理論為指導(dǎo)的題庫(kù)建設(shè)，題目參數(shù)可以適用于各種測(cè)量情景，包括智能化組卷、計(jì)算機(jī)測(cè)試，特別適用于開(kāi)發(fā)計(jì)算化自適應(yīng)測(cè)驗(yàn)，題庫(kù)具有很強(qiáng)的功能可擴(kuò)展性。
如何提升考生體驗(yàn)，保證考試公平？
考生是考試的主體和根本，一個(gè)公平的考試除了為考生創(chuàng)造相對(duì)一致的物理考試環(huán)境以外，在試題內(nèi)容和表現(xiàn)形式以及題庫(kù)的科學(xué)性上也充分考慮每個(gè)考生個(gè)體的因素。例如，如果一份試卷的試題總體的難度是由難至易，這樣就會(huì)造成考生心理緊張，影響考生的正常發(fā)揮，也會(huì)影響考生實(shí)際的結(jié)果，而通過(guò)對(duì)試題、題庫(kù)的數(shù)據(jù)分析則可以發(fā)現(xiàn)和杜絕這類(lèi)問(wèn)題的出現(xiàn)。
除了試題數(shù)量、試題內(nèi)容、試題難度和試題表現(xiàn)形式之外，還可以通過(guò)對(duì)考生答題樣本和考試結(jié)果，以及對(duì)考生人數(shù)、成績(jī)分布、學(xué)歷結(jié)構(gòu)、從業(yè)年限等數(shù)據(jù)的分析，發(fā)現(xiàn)不同考生對(duì)同一道試題和同一套試卷的不同結(jié)果。通過(guò)對(duì)每一道題目的數(shù)據(jù)分析，可以得出試題本身難度值、區(qū)分度、耗時(shí)、選項(xiàng)搭配、信度等參數(shù)的結(jié)論，以幫助主辦方更好的提升試題質(zhì)量；通過(guò)對(duì)考試整體結(jié)果、完成度等的數(shù)據(jù)分析，可以看出哪些試題表現(xiàn)形式、哪些卷面設(shè)計(jì)更符合考生使用習(xí)慣，多少題量和何種難度設(shè)置能起到最理想的篩選效果。
在“2014年考試?yán)碚撆c測(cè)評(píng)技術(shù)春季研討會(huì)”上，ATA 考試測(cè)評(píng)研究院院長(zhǎng)、中國(guó)教育測(cè)量協(xié)會(huì)會(huì)員、數(shù)據(jù)分析領(lǐng)域?qū)＜覄⒎f博士和 ATA 副總裁趙曙秋先生分別發(fā)表了“題庫(kù)建設(shè)的一般方法和步驟”、“如何通過(guò)數(shù)據(jù)分析提升題庫(kù)質(zhì)量”以及“試題表現(xiàn)技術(shù)”等主題演講，并分享了ATA在數(shù)據(jù)分析、題庫(kù)建設(shè)、試題表現(xiàn)技術(shù)和大規(guī)模計(jì)算機(jī)化考試運(yùn)營(yíng)等方面的成功案例和經(jīng)驗(yàn)，與到會(huì)嘉賓進(jìn)行了熱烈的互動(dòng)和討論。
ATA 大規(guī)?？荚囘\(yùn)營(yíng)領(lǐng)域豐富的成功經(jīng)驗(yàn)，以及在考試?yán)碚摵蜏y(cè)評(píng)技術(shù)等方面始終不斷的探索、研究和創(chuàng)新，已逐步形成了一套基于龐大考試和考生數(shù)據(jù)為支持的理論基礎(chǔ)和應(yīng)用模式。ATA 專(zhuān)業(yè)的研究成果、較佳應(yīng)用實(shí)踐和典型考試案例，也引起了與會(huì)來(lái)賓的高度關(guān)注和熱烈討論，紛紛表示本次研討會(huì)的內(nèi)容對(duì)于他們?cè)谌绾翁岣哳}庫(kù)建設(shè)品質(zhì)、創(chuàng)新考試形式等方面，均得到了啟發(fā)和幫助。
為了推動(dòng)考試?yán)碚撆c測(cè)評(píng)技術(shù)的不斷創(chuàng)新和發(fā)展，ATA 作為國(guó)內(nèi)領(lǐng)先的第三方計(jì)算機(jī)化考試與測(cè)評(píng)服務(wù)供應(yīng)商，也將通過(guò)不定期組織專(zhuān)題研討會(huì)等各種形式，為考試與測(cè)評(píng)行業(yè)的主辦方、服務(wù)商和各界專(zhuān)家學(xué)者搭建一個(gè)學(xué)習(xí)交流、溝通分享的平臺(tái)。
