項(xiàng)目分析 (3)ppt課件

1、第六章檢驗(yàn)的工程分析第一節(jié)檢驗(yàn)的難度第二節(jié)檢驗(yàn)的區(qū)分度第三節(jié)猜測(cè)問(wèn)題與猜測(cè)率第四節(jié)多重選擇題的工程分析第五節(jié)規(guī)范參照檢驗(yàn)的工程分析第一節(jié)檢驗(yàn)的難度一、難度的意義、定義: 測(cè)題的難易程度(才干檢驗(yàn)) 測(cè)題的“通俗性或“流行性的程度 (人格檢驗(yàn))、難度與難度系數(shù)成反比、難度系數(shù)的范圍在0至1之間二、難度估計(jì)的方法、經(jīng)過(guò)率法 A. 用于二值記分的測(cè)題B. 用于非二值記分的測(cè)題、分組法 用于樣本很大的測(cè)題 P 為難度系數(shù)為高分組(總分排在前27%的被試)答對(duì)該題的百分比為低分組(總分排在前27%的被試)答對(duì)該題的百分比三、檢驗(yàn)難度程度確實(shí)定工程難度多高適宜，取決于檢驗(yàn)的目的、性質(zhì)以及工程的方式。1、假

2、設(shè)檢驗(yàn)是為了了解被試對(duì)知識(shí)、技藝的掌握情況，就不用過(guò)多思索難度；2、假設(shè)檢驗(yàn)用于選拔人員，就應(yīng)該比較多地采用難度值接近錄取率的工程。3、假設(shè)檢驗(yàn)是為檢驗(yàn)被試個(gè)體間的差別，那么應(yīng)選擇接近中等難度的工程。四、難度的等距變換由于難度系數(shù)僅具有順序性，不同的難度的工程無(wú)法直接進(jìn)展比較。假設(shè)要進(jìn)展比較，那么需求把它轉(zhuǎn)換成等距量表。=13+4值越大，難度越高， 值越小，難度越低五、測(cè)題難度確實(shí)定與分?jǐn)?shù)分布 越是接近中等難度的標(biāo)題越具有區(qū)分的作用,也就是越是接近0.50的標(biāo)題越好,其區(qū)分程度越高. 如: 1 99 = 99 2 98 = 196 30 70 = 2100 50 50 = 2500直觀檢驗(yàn)難度

3、的方法：第二節(jié)檢驗(yàn)的區(qū)分度一、區(qū)分度的意義是指檢驗(yàn)工程對(duì)被試心思質(zhì)量程度差別的區(qū)分才干。區(qū)分度的取值范圍介于-1.00至+1.00之間。通常D為正值，稱(chēng)作積極區(qū)分；D為負(fù)值，稱(chēng)為消極區(qū)分，D為0稱(chēng)作無(wú)區(qū)分作用。具有積極區(qū)分作用的工程，其D值越大，區(qū)分的效果越好。二、區(qū)分度的計(jì)算一工程鑒別指數(shù)法適用于計(jì)分題、鑒別指數(shù)的計(jì)算高分組經(jīng)過(guò)率減去低分組經(jīng)過(guò)率. 公式: D = PH - PL 、鑒別指數(shù)與測(cè)題的評(píng)價(jià) _ D 測(cè)題評(píng)價(jià) - 0.40以上 非常優(yōu)良 0.30-0.39 良好,如能修正更好 0.20-0.29 尚可,但必需修正 0.20以下 劣,淘汰 -、極端組的劃分根據(jù)效標(biāo)成果或檢驗(yàn)總分將被

4、試排隊(duì)，取的高分端被試組成高分組，另外的低分端組成低分組，其他的被試可以不作分析。普通情況下，介于即可。當(dāng)樣本人數(shù)過(guò)少時(shí)n，不宜采用的規(guī)那么，可以用作為分界點(diǎn)。優(yōu)點(diǎn)：計(jì)算方便，容易了解缺陷：只利用了部分信息，計(jì)算結(jié)果的準(zhǔn)確性差二、相關(guān)法以工程分?jǐn)?shù)與效標(biāo)分?jǐn)?shù)或檢驗(yàn)總分的相關(guān)作為工程區(qū)分度的目的相關(guān)越高，工程區(qū)分度越高 、 二列相關(guān)(兩個(gè)延續(xù)變量，但其中一個(gè)變量被人為分成兩類(lèi)。) 公式:= 該題及格的被試在總分上的平均分= 該題不及格的被試在總分上的平均分p = 該題的難度 q = 1-pSt = 全體被試的總分規(guī)范差 或= 總分平均數(shù)y為p與q交界處正態(tài)曲線(xiàn)的高度二列相關(guān)系數(shù) 的顯著性檢驗(yàn)公式N

5、 為被試總?cè)藬?shù)y為 正態(tài)分布下答對(duì)百分比所在位置曲線(xiàn)的高度例：下表有20個(gè)學(xué)生言語(yǔ)檢驗(yàn)部分以及在作文題上的得分情況，假設(shè)作文37分(包括37分)算經(jīng)過(guò)，試計(jì)算作文題的區(qū)分度?？偡?652947265227683807576736291477481886258作文題得分4737552722103542463940413852213942482927解：P=1320=0.65， q=1-p=1-0.65=0.35查表 y=0.3704可見(jiàn)，作文分?jǐn)?shù)與總分相關(guān)顯著2 、點(diǎn)二列相關(guān)(一個(gè)變量為延續(xù)變量，另一個(gè)變量為二分變量) 公式:或= 該題及格的被試在總分上的平均分= 該題不及格的被試在總分上的平均

6、分p = 該題的難度 q = 1-pSt = 全體被試的總分規(guī)范差= 總分平均數(shù)15個(gè)學(xué)生某測(cè)題的得分與總分情況學(xué)生123456789101112131415總分908180787770696555504942353110某題101111100010100查相關(guān)系數(shù)顯著性臨界表，當(dāng)df=13時(shí)，Rpb必需到達(dá).514才到達(dá).05的顯著性程度。3 、用系數(shù)計(jì)算區(qū)分度(二變量均為二分稱(chēng)名變量)假設(shè)檢驗(yàn)值能否顯著，應(yīng)先將值轉(zhuǎn)換成 值：答錯(cuò)答對(duì)合計(jì)升級(jí)2a6b8a+b留級(jí)5c2d7c+d合計(jì)7a+c8b+d1515個(gè)學(xué)生數(shù)學(xué)成果四格表 查 值表，df=13時(shí)， =3.841才到達(dá)0.05的顯著性程度。

7、計(jì)算出 的值仍未到達(dá)顯著性程度。 、積差相關(guān)法兩變量均為延續(xù)變量，且被試團(tuán)體較大時(shí)，可以以為工程分?jǐn)?shù)服從正態(tài)分布可將工程得分與效標(biāo)分?jǐn)?shù)求積差相關(guān)系數(shù)以得到工程的區(qū)分度 三 要素分析 分析測(cè)題在一個(gè)要素上的負(fù)荷,負(fù)荷越大闡明越有區(qū)分度,普通在0.30以上才是可以接受的. 四 方差法 方差大闡明離散程度越高,那就具有鑒別力. 公式:當(dāng)n30時(shí)當(dāng)n30時(shí)三、難度與鑒別力區(qū)分度的關(guān)系 - P D - 1.00 0.00 0.90 0.20 0.70 0.60 0.60 0.80 0.50 1.00 0.40 0.80 0.30 0.60 0.10 0.20 0.00 0.00 - 區(qū)分度與難度的關(guān)系續(xù)

8、1難度和區(qū)分度都是相對(duì)的，是針對(duì)一定團(tuán)體而言的，絕對(duì)難度和區(qū)分度是不存在的。2普通說(shuō)來(lái)，較難的工程對(duì)高程度被試區(qū)分度高，較易工程對(duì)程度低的被試區(qū)分度高，中等難度的工程對(duì)中等程度的被試區(qū)分度高。3由于人的多數(shù)心思特性呈常態(tài)分布，所以工程難度的分布也以常態(tài)為好，即特別難與特別容易的標(biāo)題較少，越接近中等難度的標(biāo)題越多，而一切工程的平均難度為0.50.四、區(qū)分度的相對(duì)性 、不同的計(jì)算方法，所得區(qū)分度不同 、樣本容量大小影響相關(guān)法區(qū)分度值的大小 、分組規(guī)范影響鑒別指數(shù) 、被試樣本的同質(zhì)性程度影響區(qū)分度值的大小第三節(jié)猜測(cè)問(wèn)題與猜測(cè)率一、客觀檢驗(yàn)題中的猜測(cè)問(wèn)題與猜測(cè)率 、在客觀題中，尤其在是非題、配對(duì)題及選

9、項(xiàng)較少的選擇題中，被試的猜測(cè)會(huì)提高他們的分?jǐn)?shù)被試憑猜測(cè)選擇正確答案的時(shí)機(jī)是 、猜測(cè)誤差的來(lái)源：猜相對(duì)于不猜引起的誤差能否猜得對(duì)引起的誤差二、工程難度受猜測(cè)影響的校正 、校正公式適用于對(duì)單一工程經(jīng)過(guò)率的校正為校正后的經(jīng)過(guò)率，為實(shí)踐經(jīng)過(guò)率，為備選答案數(shù)目 、校正難度的作用檢驗(yàn)實(shí)踐難度 例: 某題經(jīng)過(guò)率為75%,是一個(gè)五選一的標(biāo)題.比較兩個(gè)不同選項(xiàng)數(shù)標(biāo)題的難度 例: 有二道題,一題的難度為0.50,有五個(gè)選項(xiàng),另一題的難度為0.53,有四個(gè)選項(xiàng). 、總分校正公式假設(shè)被試參與的檢驗(yàn)全部是由選擇題或是非題組成，那么被試總分也有猜測(cè)的成份，需求對(duì)其總分進(jìn)展校正式中為校正后的得分，為被試答對(duì)的工程數(shù)，為被試

10、答錯(cuò)的工程數(shù)，為工程的選項(xiàng)數(shù)目例：某被試參與由200道選擇題組成的檢驗(yàn)，每道題都有五個(gè)備選答案，檢驗(yàn)結(jié)果是答對(duì)了120題，而答錯(cuò)了80題，請(qǐng)問(wèn)假設(shè)除去猜測(cè)成份，那么該被試的實(shí)得分?jǐn)?shù)每題0.5分是多少？答：該被試的實(shí)得分?jǐn)?shù)應(yīng)該是50分 、猜測(cè)校正的優(yōu)缺陷贊成的理由：可防止降低檢驗(yàn)的信度；校正后的得分可以反映被試的真正程度和才干；在教育檢驗(yàn)中，可以培育被試?yán)蠈?shí)的美德；比較公平反對(duì)的理由：公式的根本假設(shè)不成立；只需被試能答完全部標(biāo)題上，那么猜測(cè)校正無(wú)本質(zhì)作用，因校正前后的相對(duì)分?jǐn)?shù)完全一樣；不采用猜測(cè)校正對(duì)信度并無(wú)艱苦影響；有時(shí)會(huì)出現(xiàn)無(wú)法解釋的景象，如校正后得零分或負(fù)分的景象；在實(shí)踐生活中，合理的猜測(cè)

11、是值得培育的習(xí)慣第四節(jié) 選項(xiàng)分析 、選項(xiàng)設(shè)置不當(dāng)會(huì)降低標(biāo)題的難度,所以也要對(duì)選項(xiàng)作分析,看有無(wú)異常情況. 通常判別選項(xiàng)好壞有以下幾點(diǎn): 1) 正確答案無(wú)人選或少于其它選項(xiàng)的人數(shù). 2) 錯(cuò)誤答案選的人太多. 3) 正確選項(xiàng)高分組選擇人數(shù)少于低分組. 4) 錯(cuò)誤選項(xiàng)上高分組選擇人數(shù)多于低分組. 5) 選項(xiàng)無(wú)人選擇. 6) 未答人數(shù)較多.題號(hào)組別選答人數(shù)正確答案ABCD未答1高分組592120B低分組2250121602高分組581015161A低分組2621153623高分組1715282812D低分組25111934114高分組14414365C低分組15610285 也可以用高分組的反響情況

12、來(lái)判別選項(xiàng)選擇能否得當(dāng). 1) 選項(xiàng) A B C D* 高分組 1 1 9 2 2) 選項(xiàng) A B C* D 高分組 4 3 3 3 3) 選項(xiàng) A* B C D 高分組 6 0 1 6項(xiàng)目U（20）M（20）L（20）難度（U+M+L）鑒別度（U-L）11597318220201656a43191894610410111637-6a5111311350a61614939775005a575a:選出要討論的工程項(xiàng)目組別反應(yīng)選項(xiàng)123452高分組低分組0200012016014高分組低分組0210169200105高分組低分組2133331111227高分組低分組5035584334個(gè)別工程的反

13、響分析注：黑體為正確選項(xiàng) 、工程分析步驟1選取有代表性的樣組實(shí)施檢驗(yàn).2計(jì)算每個(gè)人的總分,然后按總分分組.3計(jì)算高分組和低分組經(jīng)過(guò)每一題的比率.4分別求出每一測(cè)題的難度和鑒別指數(shù).5選項(xiàng)分析.6修正測(cè)題或選項(xiàng).第五節(jié)規(guī)范參照檢驗(yàn)的工程分析 規(guī)范參照檢驗(yàn)是用來(lái)丈量學(xué)習(xí)前后被試的差別或受過(guò)訓(xùn)練與沒(méi)有受過(guò)訓(xùn)練被試之間的差別.檢驗(yàn)結(jié)果參照的不是常模,而是某一種規(guī)范.規(guī)范參照檢驗(yàn)的工程分析所采用的方法1.以達(dá)標(biāo)與否分組,然后計(jì)算兩組被試在每一題上的成果差別,算出難度和區(qū)分度. 公式(難度) : 2.教育效果敏感指 公式:(區(qū)分度):學(xué)生測(cè) 題12345前后前后前后前后前后A-+-+-+-B+-+-+-C-+-+-+-D-+-+-+-E+-+-+-F-+-+-15個(gè)學(xué)生某測(cè)題的得分與總分情況學(xué)生123456789101