《心理測量》測量的信度(61P).ppt

1、測量的信度,案例一,有一個體操運動員參加跳馬比賽，第一次跳了8.9分，轉播席上的嘉賓評論員說這不是他真實的水平，他的真實水平應該在9.5分以上。果然第二次他跳出了9.9分。如果沒有嘉賓的點評，你認為哪次成績是該運動員的真實水平？,案例二,王先生去應聘某公司的經理崗位，考官拿出一個企業(yè)忠誠度測驗讓王先生答卷，經評估后得出結論，王先生忠誠度不夠。結果王先生不服，要求重新答一次，結果正好相反。,案例三,小明學習成績一直很差，他找張老師咨詢，張老師找了一個智力測驗讓他做，結果還不錯，智商有120。母親覺得不可思議，這么高的智商為什么學習成績那么差呢，于是她帶著小明去了一家咨詢機構，那里的咨詢師拿出了同

2、樣一個智力測驗讓小明做，結果算出來智商只有88。哪一次的結果是可信的。,第一節(jié) 信度概述,定義：測驗結果一致性的判斷 (一個測驗可靠性和穩(wěn)定性的指標) 一個好的測驗在多次測量同一個人的時候結果應該是基本一致的.,真分數(shù)理論,在實測分數(shù)中真分數(shù)所占的比率 實測分數(shù)=真分數(shù)+誤差 (X = T + E),公式,105.0 r = - = 0.87 120.2,真分數(shù)理論的三個假設,誤差分數(shù)的平均數(shù)是零 (因為誤差是隨機的) 誤差分數(shù)與真分數(shù)相互獨立,沒有任何相關 (如果有相關,那誤差就不成為誤差了) 兩次測量的誤差分數(shù)之間的相關為零 (因為誤差是隨機的,所以測量之間沒有必然的聯(lián)系),測量分數(shù)、真分

3、數(shù)和誤差分數(shù)的分布假設,學生 測量分數(shù) = 真分數(shù) + 誤差分數(shù) A 3 5 -2 B 17 15 +2 C 16 20 -4 D 23 25 -2 E 27 25 +2 F 25 25 0 G 35 25 +10 H 26 30 -4 I 33 35 -2 J 45 45 0 總數(shù) 250 250 0 平均數(shù) 25.0 25.0 0 方差 120.2 105.0 15.2 標準差 10.9 10.2 3.9,測量分數(shù)=真分數(shù)+誤差分數(shù) 誤差之和為零 測量分數(shù)的平均數(shù)=真分數(shù)的平均數(shù) 測量分數(shù)的方差等于真分數(shù)的方差與誤差方差之和(但標準差并沒有如此之關系）,因為每一次測量結果中都可能有誤差的存

4、在，所以一次測量不一定能準確反映真實的情況，而多次測量可以彌補這一不足，因為誤差是隨機出現(xiàn)的，所以理論上可以用多次測量結果的平均數(shù)來代表真分數(shù)，而每一次測量分數(shù)與平均數(shù)的離差就是誤差。一個測驗結果的離散度越小說明誤差也就越小。,真正在心理測量中真分數(shù)是不可能直接獲得的?？尚械氖翘讲橐粋€測驗的誤差有多大，然后通過用測驗分數(shù)與誤差分數(shù)相減來求取真分數(shù)。,信度是真分數(shù)與實測分數(shù)相關的平方,用相關系數(shù)來表示.相關系數(shù)越大說明真分數(shù)在實測分數(shù)中的比率越大,也就說明信度越高.,第二節(jié) 誤差及誤差的來源,定義：與測量目的無關的因素造成了測 驗結果的 不一致或不準確 種類： 1 隨機誤差： 方向和大小完全是隨

5、機 的，沒有規(guī)律性 2 系統(tǒng)誤差： 穩(wěn)定地存在于每一次測 量中，有規(guī)律可循 3 抽樣誤差：由抽樣變動而引起的,誤差來源,1 .測驗內部引起 1）題目取樣誤差 2）題目用詞模棱兩可 3）題目太難 4）規(guī)定的測驗時間太短 5）題型的原因,2 測驗過程引起的 1）物理環(huán)境 2）主試方面 3）意外干擾 4）計分,3 被試引起的 1）動機 2）焦慮 3）練習 4）經驗 5）生理因素,第三節(jié) 估計信度的方法,一 、穩(wěn)定系數(shù) （重測信度）（跨時間的一致性） 對同一個測驗前后做兩次，然后計算兩次測 驗結果的一致性。 公式：,統(tǒng)計值,公式二,采用重測信度需注意之處,兩次測驗的時間應該是合理的,即既不能太長又不能

6、太短。 相隔太長的時間被試在所測量的特征上可能會發(fā)生變化，相隔太短有記憶的效應。,重測信度的使用局限性,1.被試在這期間自身發(fā)生了變化 2.第一次測驗的經驗對第二次測驗產生影響 (如第一次測驗產生了焦慮就會影響第二次測驗) 3. 記憶的作用 4.耗時耗精力,被試不好找,二 等值系數(shù) （復本信度） （跨形式的一致性）,一個測驗有A，B兩個版本，對一組被試測試， 求取兩個測驗結果的一致性,兩個版本連續(xù)施測稱為等值性系數(shù),如果兩個版本間隔一段時間施測稱為穩(wěn)定性等值系數(shù).,三 內在一致性系數(shù),以一次測驗的結果來估計測驗的信度.用以估計測驗內部的一致性.,內在一致性系數(shù)的幾種估計方法,1. 分半信度 把

7、一次測驗的結果人為地分成對等的兩半，然后計算兩半分數(shù)之間的相關。 計算分半信度的一個重要之處是如何進行合理的分半.,分半信度只是半個測驗的信度，所以需加以校正。 校正公式：,2. 庫德理查遜估計法,庫德理查遜1937年提出了一種分析題目間一致性來估計信度的方法，即應用項目統(tǒng)計量來避免任意的兩半分法導致產生的誤差。常用KR20公式: 公式：,假設一個測驗有5個測題,施測于一個30個人的樣本,結果求出標準差為2.5,測題 答對人數(shù) p q pq 1 15 0.50 0.50 0.25 2 20 0.67 0.33 0.22 3 12 0.40 0.60 0.24 4 10 0.33 0.67 0.

8、22 5 6 0.20 0.80 0.16 pq=1.09,3. 穩(wěn)定系數(shù),穩(wěn)定系數(shù)（克倫巴赫 系數(shù)） 公式：,內在一致性系數(shù)的使用局限性,只適合于同質性的測驗 特別不適合于速度測驗,二個評分者分別對一組被試的測驗結果加以評分，然后求取兩組人分數(shù)的一致性。 另一種方法是求取完全相同評分的比例.,四 評分者信度,三個以上評分者對一組被試的測驗結果評分，其一致性的求取采用肯特爾和諧系數(shù)。 公式：,三個教師給6篇作文評分,將分數(shù)值轉換為得分等級（最高為1）然后求出每一篇作文所得等級之和（Ri ）,Ri 14+7+13+18+8+363 Ri2811 K3 N = 6 被評對象在3-7人時，直接查表，

9、w值大于表中數(shù)值說明信度是高的，如被評對象超過7人，則可計算2值，作2檢驗。 2k (N-1) w df=N-1,不同類型測驗的信度要求,標準化智力測驗 0.90 (中等到高的信度) 標準化成就測驗 0.85 標準化人格測驗 0.80 (中等到低的信度) 標準化團體測驗 0.70 某些投射測驗 0.60 (低信度),第四節(jié) 影響信度的因素,測驗分數(shù)分布的范圍對信度的影響 分數(shù)分布的范圍越大，信度就越高，分數(shù)分布的范圍越小信度就越低。,用異質團體的信度來推測同質團體的信度 公式： 例：,二 測驗的長度對信度的影響,測題數(shù)量越多信度就越高 以已有測題數(shù)量所得信度來預測達到某種信度水平需增加的題數(shù)

10、公式： 例：,以增加題目的數(shù)量來推測所能達到的信度 公式： 例：,進一步增加題數(shù)可達到的信度水平,三 測驗的難度對信度的影響,難度間接影響信度。 即難度影響測驗分數(shù)的分布，然后影響信度。,第五節(jié) 測量的標準誤差,定義：誤差分數(shù)分布的標準差 標準誤也可用來判斷一個測驗的穩(wěn)定性程度。 信度系數(shù)是估計整個樣本的誤差程度，而標準誤則是用來估計個人分數(shù)中的誤差水平。,標準誤的計算公式,標準誤的用途,確定分數(shù)的有效區(qū)間 例：一個兒童做韋氏智力測驗測得智商120，已知韋氏測驗的標準差為15，信度是0.95。,公式：,以95%的置信水平來確定這個兒童智商分數(shù)的有效區(qū)間，那么真分數(shù)有95%的可能性會落在X+/- 1. 96 Se的范圍內， 即 120+/-1.96 3.35 =113-127。,評價兩個不同測驗分數(shù)是否有明顯的差異。 例：一個兒童的韋氏言語智商是102，操作智商為108，