河南省中考英語(yǔ)試卷性別公平性研究

一. 引言

     公平性問(wèn)題是中考這種規(guī)模的考試必須看重的問(wèn)題，對(duì)河南省這種人口大省來(lái)說(shuō)更甚。任何涉及不公平的因素都可能產(chǎn)生重大的社會(huì)效應(yīng)。涉及公平性的因素很多，性別因素是其中容易被忽略的一個(gè)側(cè)面，但是同等能力但性別不同的受試，在某些題項(xiàng)上則可能存在明顯的差異性，在大樣本下觀測(cè)，這種差異性可能更顯著。

二. 項(xiàng)目功能差異簡(jiǎn)介

項(xiàng)目功能差異檢測(cè)（DIF）是檢驗(yàn)大規(guī)模考試的公平性的常用的一種統(tǒng)計(jì)方法。DIF是指，對(duì)于某個(gè)特定項(xiàng)目，如果在來(lái)自同一目標(biāo)特質(zhì)的兩批平行被試組中，顯現(xiàn)出不同的統(tǒng)計(jì)特性，那么該項(xiàng)目就存在功能差異。（董圣鴻，馬世曄，2001）“同一目標(biāo)特質(zhì)的兩批平行被試組”是指在測(cè)驗(yàn)打算測(cè)查的能力（目標(biāo)特質(zhì)）上，兩組被試具有相同的水平。

在大部分西方發(fā)達(dá)國(guó)家，DIF檢測(cè)已是大規(guī)模測(cè)試研發(fā)的重要一環(huán)，在大規(guī)模測(cè)試實(shí)施前，都會(huì)進(jìn)行一定規(guī)模的試測(cè)，并進(jìn)行DIF檢測(cè)，據(jù)此剔除有瑕疵的題項(xiàng)。在國(guó)內(nèi)測(cè)量領(lǐng)域?qū)W者在上世紀(jì)末已將該方法引介到國(guó)內(nèi)并進(jìn)行了一些涉及方法論研究（曾秀芹、孟慶茂，1999；董圣鴻，馬世曄，2001；曹亦薇, 張厚粲，1999）。也有部分學(xué)者對(duì)某些具體的測(cè)試進(jìn)行了一些實(shí)證性研究，有部分學(xué)者已將該方法運(yùn)用到語(yǔ)言測(cè)試的公平性研究中，如漢語(yǔ)水平考試（黃春霞,2004）（鹿士義,2004）, 高考英語(yǔ)考試（雷新勇，2007），英語(yǔ)專四考試（李清華，孔文， 2009）等。但是尚未見(jiàn)到從性別公平角度對(duì)中招考試進(jìn)行的相關(guān)實(shí)證研究。目前河南省這個(gè)人口大省，每年參加中招考試的人數(shù)眾多，考生之間性別，背景等方面存在較大差異，因此對(duì)該考試進(jìn)行性別偏差研究是非常必要的。

目前測(cè)量界已有多種檢測(cè)項(xiàng)目功能差異DIF的方法，在諸多方法中，MH (Mantel-Haenszel Procedure) 檢測(cè)法和SIBTEST (Simultaneous Item Bias Procedure)比較常用。因?yàn)镾IBTEST存在眾多優(yōu)勢(shì)，且本研究對(duì)象河南省英語(yǔ)中考試卷中包含的英語(yǔ)閱讀測(cè)試每篇閱讀任務(wù)帶有若干題目(可以視為項(xiàng)目束)，因此本研究選用SIBTEST方法進(jìn)行。

三．研究設(shè)計(jì)

（一） 研究對(duì)象

本研究研究對(duì)象為河南省2015年中招英語(yǔ)試題中的客觀題。本研究擬考察該卷中五個(gè)客觀題型中總共75個(gè)題項(xiàng)的性別公平性。五個(gè)部分分值共計(jì)95分（總分120），包括：20題聽(tīng)力理解（單選題）、15題單項(xiàng)選擇（單選題）、包括10個(gè)題項(xiàng)的1篇完形填空題（單選題）、4個(gè)語(yǔ)篇的閱讀理解題（單選題，每個(gè)語(yǔ)篇5個(gè)選擇題）、10個(gè)詞語(yǔ)運(yùn)用題（選詞填空題）。此外，因?yàn)橥晷翁羁蘸烷喿x理解題，每個(gè)語(yǔ)篇都是多個(gè)題項(xiàng)，即多個(gè)題項(xiàng)根據(jù)考生對(duì)同一個(gè)語(yǔ)篇的理解來(lái)進(jìn)行能力考察的，因此，本研究還對(duì)所有語(yǔ)篇進(jìn)行性別方面的項(xiàng)目束功能差異檢驗(yàn)。

（二） 研究問(wèn)題

問(wèn)題1，河南省該年英語(yǔ)中招試卷中所有客觀題項(xiàng)在性別方面是否存在項(xiàng)目功能差異，即該試卷中是否存在對(duì)某一性別更有利的題項(xiàng)；

問(wèn)題2，該年河南省英語(yǔ)中招試卷中在語(yǔ)篇方面是否存在項(xiàng)目束功能差異，即該試卷中包括完形填空和閱讀理解共計(jì)5個(gè)語(yǔ)篇中是否存在對(duì)某一性別更有利的語(yǔ)篇；

（三）研究樣本

本研究施測(cè)對(duì)象為兩所中學(xué)九年級(jí)共1000名同學(xué)，其中男生女生分別為500人（實(shí)際參加測(cè)試的學(xué)生為1200余人，因需要男生和女生實(shí)現(xiàn)一對(duì)一匹配，從中隨機(jī)選擇各500名）。

（四）研究工具

本研究使用應(yīng)用廣泛的SIBTEST軟件，版本為SIBTest 1.7。先運(yùn)行SIBIN，然后運(yùn)行SIBTEST。得到的分析結(jié)果中，β為正值，表示對(duì)參照組有利；β為負(fù)值，表示對(duì)目標(biāo)組有利。顯著水平定為0.05。

（五）研究步驟

第一，施測(cè)并整理數(shù)據(jù)。本研究用該真題對(duì)受試對(duì)象進(jìn)行測(cè)試（在第一次月考中進(jìn)行，避免太多學(xué)生已經(jīng)接觸該試卷，從而造成考試信度不高的問(wèn)題）；測(cè)試完畢后，用專用統(tǒng)計(jì)軟件對(duì)本次考試的所有實(shí)測(cè)情況進(jìn)行統(tǒng)計(jì)（將所有考生的原始答案依據(jù)是否得分轉(zhuǎn)換為“0”、“1”數(shù)據(jù)），按照性別分類并命名為男生組和女生組，儲(chǔ)存?zhèn)溆?。本研究假設(shè)有題項(xiàng)對(duì)女生組不利，女生組為目標(biāo)組，男生組為參照組。

第二，用軟件處理數(shù)據(jù)。

（1）數(shù)據(jù)處理第一步：運(yùn)用SIBTEST程序進(jìn)行分析。第一次將所有的項(xiàng)目都列為懷疑有存在項(xiàng)目功能差異, 經(jīng)篩選懷疑存在項(xiàng)目公平差異的題目包括：2道聽(tīng)力理解，2道單項(xiàng)選擇題，2道完形填空題，2道閱讀理解題，1道詞語(yǔ)運(yùn)用題; 把這些題項(xiàng)分別剔除, 對(duì)剩下的題目進(jìn)行再一次操作, 反復(fù)進(jìn)行,直到?jīng)]有DIF項(xiàng)目為止，這樣得到一個(gè)最佳的匹配變量; 把篩選出來(lái)的項(xiàng)目組成一個(gè)“懷疑分測(cè)驗(yàn)組”,用上一步操作得到的最佳匹配變量,再運(yùn)用程序運(yùn)算,如果此時(shí)得到的項(xiàng)目的β值,仍然在0.05的標(biāo)準(zhǔn)之上,那么這樣的項(xiàng)目就是有DIF的項(xiàng)目。

（2）分別用SIBTEST軟件檢測(cè)5個(gè)語(yǔ)篇項(xiàng)目束功能差異。

第三，對(duì)得出的數(shù)據(jù)進(jìn)行統(tǒng)計(jì)學(xué)意義的解讀：即根據(jù)數(shù)據(jù)，哪些題目體現(xiàn)出了統(tǒng)計(jì)學(xué)意義上的項(xiàng)目功能差異（DIF），對(duì)目標(biāo)組有利或不利；哪些題目體現(xiàn)出了統(tǒng)計(jì)學(xué)意義上的項(xiàng)目束功能差異（DBF），對(duì)目標(biāo)組有利或不利;

四． 討論

（一）問(wèn)題1的討論

試卷中第22題和第45題的β值分別為0.072和0.068，超過(guò)了0.05的界限，達(dá)到了顯著水平。表明這兩道題目存在明顯的性別項(xiàng)目功能差異，對(duì)目標(biāo)組（即女生組）不利。

第22題：—Is this photo taken in Tibet？

     —Yes. You can see beautiful snow mountain in the        of the photo.

     A. form    B. background      C. shape     D. introduction

該題答案為B.

針對(duì)第22題的檢測(cè)結(jié)果，結(jié)合具體題目，筆者認(rèn)為可能有兩種解釋：第一， 題干中有一個(gè)”Titet”這個(gè)生詞，而這個(gè)詞經(jīng)常出現(xiàn)在政治性語(yǔ)篇中，而男同學(xué)對(duì)政治性語(yǔ)篇比較敏感，所以清楚地知道這個(gè)詞的意思，這樣能更好地理解題干的語(yǔ)境，所以能更好地作答，選出正確答案；第二，男同學(xué)更可能對(duì)攝影這個(gè)話題感興趣，更能理解題干的意思，所以更可能選出正確答案。

第45題為完型填空部分的最后一個(gè)段落，上下文和選項(xiàng)如下：

The child replied, “My daddy is the   45   , and he is taking me home.”

45.A.guard       B. driver        C. pilot        D. traveller

該題答案為C.

針對(duì)第45題的檢測(cè)結(jié)果，結(jié)合完型填空的上下文，筆者認(rèn)為造成這種結(jié)果的原因可能在于：四個(gè)選項(xiàng)中，C選項(xiàng)應(yīng)該是所有選項(xiàng)中在日常學(xué)習(xí)中出現(xiàn)詞頻最低的詞，但是“pilot”所代表的飛行員這個(gè)職業(yè)是很多男同學(xué)期望的職業(yè)之一，所以男生對(duì)該詞更敏感一些，所以更可能選對(duì)正確的答案，而女生更可能會(huì)選到干擾項(xiàng)B。

（二）問(wèn)題2的討論

問(wèn)題2結(jié)果顯示，該試卷中所有語(yǔ)篇中，雖然5個(gè)語(yǔ)篇里的單個(gè)題目表現(xiàn)出了一定程度的項(xiàng)目功能差異，但是任何一個(gè)語(yǔ)篇的項(xiàng)目束差異都沒(méi)有表現(xiàn)出突然增大或突然縮小。因此，我們可以得出結(jié)論：本次考試選用的5個(gè)語(yǔ)篇在統(tǒng)計(jì)意義上沒(méi)有對(duì)目標(biāo)組明顯不利或有利，本次試卷的語(yǔ)篇選用沒(méi)有明顯的項(xiàng)目束功能差異，即本次考試的語(yǔ)篇選用對(duì)相同能力但性別不同的考生不會(huì)造成成績(jī)?cè)诮y(tǒng)計(jì)學(xué)上的差異。

五. 結(jié)論

本研究發(fā)現(xiàn)：第一， 本次試卷中的第22題和第45題兩道題目存在明顯的性別項(xiàng)目功能差異，對(duì)目標(biāo)組，即女考生不利。但根據(jù)DIF顯著性的判斷標(biāo)準(zhǔn)，此類題目在選用時(shí)需考慮，但是仍可以采用；第二，本次試卷中的完型填空和閱讀理解共5個(gè)語(yǔ)篇（項(xiàng)目束）在性別方面沒(méi)有明顯的項(xiàng)目束功能差異，這五個(gè)語(yǔ)篇對(duì)某個(gè)性別的考生沒(méi)有明顯不利或有利。這說(shuō)明本次考試的語(yǔ)篇較好，沒(méi)有造成性別層面的不公平現(xiàn)象。

本研究對(duì)2015年河南省中考英語(yǔ)試卷進(jìn)行項(xiàng)目功能差異分析，分析改試卷在性別方面的公平性問(wèn)題，是對(duì)該考試效度和信度的一個(gè)檢驗(yàn)。本研究由于主客觀條件的限制，存在很多不足。比如，數(shù)據(jù)來(lái)源不是第一手的施測(cè)數(shù)據(jù)，樣本代表性不充分；另外對(duì)結(jié)果的解釋，更多憑借筆者的主觀猜斷，主觀性較強(qiáng)；再加上本研究局限于對(duì)二級(jí)題型進(jìn)行了檢測(cè)，沒(méi)有涉及到該卷中的主觀題部分，因此僅憑這得出的結(jié)果，可能有失偏頗。

本文來(lái)源：《文學(xué)教育》：http://www.00559.cn/w/wy/63.html