探討05項目分析

探討05項目分析第一節(jié)項目的難度項目的難度（difficulty）是指測驗項目（或試題）的難易程度。在能力測驗中就是指試題的難度水平。人格測驗不存在難度問題，與此相應(yīng)的指標稱為通俗性或流行性（popularitylevel），即總體中在答案方向上回答的人數(shù)比率。一、難度的計算二級評分法項目的難度計算多級評分法項目的難度計算1、二級評分法項目的難度計算通過率P=試題的難度R=答對該題的人數(shù)N=參加測驗的總?cè)藬?shù)例題10名被試在某選擇題上的得分如下，試計算該題的難度。被試12345678910得分1100110110極端分組法將被試按總分高低依次排序；劃出人數(shù)相等的高分組和低分組（例如比例為27%）；計算高分組和低分組在該題上的通過率PH和PL；該題的難度計算公式為：例題選取有代表性的試卷370份，按照總分高低排序，將從最高分向下的27%（100人）作為高分組，將從最低分向上的27%（100人）作為低分組。某題的答題情況如下表。試計算該題的難度。組別選擇各項答案的人數(shù)ABCD未答正確答案高分組低分組8363421143046200B2、多級評分法項目的難度計算P=試題的難度=全體被試在該題上的平均分數(shù)=該題的滿分分數(shù)例題問答題滿分為15分，10名被試在該題的得分如下。試計算該題的難度。被試12345678910得分131510109111091110二、二級評分法項目難度的矯正排除由于被試猜測而答對某些題目致使P值增大的可能性。比較答案選項數(shù)不同的題目的難度。矯正公式為：CP=矯正后的難度P=未矯正的難度K=測題的選項數(shù)目難度矯正公式的推導(dǎo)例題一個五擇一的項目，其通過率為0.50，則排除猜測的影響，矯正后的難度為多少？三、難度的等距量表用百分比表示的難度值是等級數(shù)據(jù)。

P值越大，項目越容易。將以等級量表表示的P值轉(zhuǎn)換為具有相等單位的等距量表Z值：將某題的通過率P視為正態(tài)分布曲線下的面積；查正態(tài)分布表找出正態(tài)曲線右側(cè)面積所對應(yīng)的Z分數(shù)。

Z值越大，項目越難。美國教育測驗服務(wù)社（ETS）：

△=13+4Z△取值范圍為1～25四、難度對測驗分布的影響常態(tài)分布：平均難度在0.5左右負偏態(tài)分布：測驗容易，P值大正偏態(tài)分布：測驗過難，P值小ACB第二節(jié)項目的鑒別力一、定義二、估計方法一、定義項目的鑒別力（Itemdiscrimination），又稱項目的區(qū)分度。指項目得分對被試實際水平的區(qū)分能力或鑒別能力。二、估計方法極端組法相關(guān)分析法因素分析法1．鑒別指數(shù)（極端組法）高分組與低分組在某一項目上的通過率之差D=PH－PL

D＝鑒別指數(shù)

PH＝高分組通過率

PL＝低分組通過率例題選取有代表性的試卷370份，按照總分高低排序，將從最高分向下的27%（100人）作為高分組，將從最低分向上的27%（100人）作為低分組。某題的答題情況如下表。試計算該題的鑒別指數(shù)。組別選擇各項答案的人數(shù)ABCD未答正確答案高分組低分組8363421143046200B鑒別指數(shù)與項目的優(yōu)劣D測題評鑒0.4以上優(yōu)良0.30-0.39良好，如能修改更好0.20-0.29尚可，仍需修改0.19以下劣，必須淘汰2．相關(guān)分析法項目得分與總分的相關(guān)項目間的相互相關(guān)項目得分與效標的相關(guān)⑴項目與總分的相關(guān)點二列相關(guān)二列相關(guān)積差相關(guān)點二列相關(guān)項目是0、1記分，總分是連續(xù)變量例題學生12345678總分9087838080777168項目得分11101000二列相關(guān)項目和總分都是正態(tài)連續(xù)變量，但項目得分被人為地分為兩個類別例題學生12345678總分9087838080777168作文得分3635332824262122通過與否11111100積差相關(guān)項目和總分均為正態(tài)連續(xù)變量⑵項目間的相互相關(guān)又稱項目的組間相關(guān)項目是0、1記分項目是非0、1記分項目是0、1記分第i題01第j題1ABA+B0CDC+DA+CB+D項目是0、1記分四項相關(guān)Φ相關(guān)項目是非0、1記分積差相關(guān)⑶項目與效標的相關(guān)項目的效標效度分析計算方法與前面項目與總分的相關(guān)基本相同相關(guān)系數(shù)的統(tǒng)計檢驗以相關(guān)系數(shù)計算項目的鑒別力時，鑒別力達到多高時才可以接受？相關(guān)系數(shù)不是來源于ρ=0的總體！參考王孝玲《教育統(tǒng)計學》第十一章（1993）3．因素分析法一般是先通過因素分析發(fā)現(xiàn)測驗中的若干共同因素，再分析每一項目在各共同因素上的因素載荷（FactorLoading）。當一個項目在預(yù)先假定要測量的因素上要較高的載荷時，該項目就被認為是有較高區(qū)分度的。項目的因素載荷一般要在0.30以上才是可以接受的。第三節(jié)項目分析的相關(guān)問題一、難度、區(qū)分度與測驗信度和效度二、依據(jù)項目統(tǒng)計量挑選項目三、選擇題的選答項分析四、標準參照測驗的項目分析一、難度、區(qū)分度與測驗信度和效度難度與區(qū)分度的關(guān)系難度與測驗的信度和效度區(qū)分度與測驗的信度和效度1．難度與區(qū)分度的關(guān)系測題難度對其區(qū)分度的影響可以通過不同難度的測題提供了多少次被試間相互比較的機會而得到說明。如果通過某題的有R人，未通過的有W人，則該題鑒別出的差別是R×W人次。當P=0.50時，題目鑒別出的差異次數(shù)最多，即該項目的鑒別力最大。難度與區(qū)分度最大值的關(guān)系難度P

區(qū)分度最大值1.000.000.900.200.800.400.700.600.600.800.501.002．難度與測驗的信度和效度當測驗題目的平均難度為0.50時，測驗分數(shù)呈正態(tài)分布：測驗的方差最大，信度也就最高；與心理特質(zhì)的正態(tài)分布吻合，測驗具有最大的鑒別力，測驗的效度才能達到最高。3．區(qū)分度與測驗的信度和效度以項目與總分的相關(guān)來計算時，區(qū)分度體現(xiàn)了測驗的同質(zhì)性。區(qū)分度高時，測驗的同質(zhì)性就越高，測驗的信度就高。項目區(qū)分度的總和就是測驗的效度。區(qū)分度與信度的關(guān)系區(qū)分度（D）信度0.12250.000.160.420.200.630.300.840.400.9150.500.949二、依據(jù)項目統(tǒng)計量挑選項目根據(jù)難度挑選項目根據(jù)區(qū)分度挑選項目1．根據(jù)難度挑選項目對大規(guī)模群體的個體水平進行區(qū)分和鑒別：所有項目平均難度為0.50左右，難度值在0.20～0.80之間（或0.35～0.65之間）選拔或篩選測驗：難度P=優(yōu)秀人員的錄取率選擇題：難度一般應(yīng)大于猜測概率2．根據(jù)區(qū)分度挑選項目鑒別指數(shù)D在0.30以上；相關(guān)系數(shù)不低于相應(yīng)的臨界值。三、選擇題的選答項分析一般要求正確選項：高分組選擇人數(shù)多于低分組錯誤選項：高分組選擇人數(shù)少于低分組異常情況正確答案無人選，或所有被試都選擇正確答案；錯誤答案選的人太多；正確選項高分組選擇人數(shù)少于低分組；錯誤選項高分組選擇人數(shù)多于低分組；某個選項無人選擇；未答的人數(shù)較多。項目分析實例題號組別選擇各項答案的人數(shù)ABCD未答正確答案難度P區(qū)分度D1高分組低分組0363923203246184B2高分組低分組221210488322511239A3高分組低分組1615762036287263D4高分組低分組219520181254160C項目分析實例題號組別選擇各項答案的人數(shù)ABCD未答正確答案難度P區(qū)分度D1高分組低分組0363923203246184B0.340.042高分組低分組221210488322511239A0.27-0.103高分組低分組1615762036287263D0.440.364高分組低分組219520181254160C0.7450.41四、標準參照測驗的項目分析項目的難度項目區(qū)分度1．項目的難度與測驗?zāi)康挠嘘P(guān)。相對于標準的高低。P=掌握組的通過率－未掌握組的通過率2．項目區(qū)分度教學敏感度指數(shù)鑒別度指數(shù)⑴教學敏感度指數(shù)D=Ppost－PpreD=教學敏感度指數(shù)Ppost=后測中的通過率Ppre=前測中的通過率問題練習效應(yīng)；需要有后測；D值低難以區(qū)分是教學不良