《人才素質測評》課件第09章

1、2022/7/16中南財經(jīng)政法大學公共管理學院1第九章 人才素質測評的質量保障體系【學習目標】2022/7/16中南財經(jīng)政法大學公共管理學院2本章將闡釋人才素質測評的質量保障體系，具體包括信度分析和效度分析兩方面內(nèi)容。信度是指測量結果的一致性、穩(wěn)定性及可靠性，而效度是指測評結果對于所測素質反映的真實程度，這兩者可以幫助我們確保人才素質測評的質量。通過本章學習，要求理解信度和效度的概念、信度分析和效度分析的方法、影響信度和效度的因素、以及提高人才素質測評中信度和效度的方法。【本章知識結構圖】2022/7/16中南財經(jīng)政法大學公共管理學院3第一節(jié) 人才素質測評的信度分析一、信度分析的概述（一）信度

2、的概念信度是指測量結果的一致性、穩(wěn)定性及可靠性。通俗地講，如果能用同一測量工具反復測量某人的同一種特質，則其多次測量結果間的一致性程度就叫做信度，即測量的可靠性。2022/7/16中南財經(jīng)政法大學公共管理學院4第一節(jié) 人才素質測評的信度分析一、信度分析的概述（一）信度的概念有關信度的定義：2022/7/16中南財經(jīng)政法大學公共管理學院5第一節(jié) 人才素質測評的信度分析一、信度分析的概述（二）信度的意義1.信度是測量過程中所存在的隨機誤差大小的反映2.信度可以用來解釋個人測驗分數(shù)的意義3.信度可以幫助進行不同測驗分數(shù)的比較2022/7/16中南財經(jīng)政法大學公共管理學院6第一節(jié) 人才素質測評的信度分

3、析二、信度分析的方法（一）重測信度1.概念： 重測信度是指用同一個測量工具對同一組被試施測兩次所得結果的一致性程度。公式如下：2.特點： 用同一測量工具對同一批人測了兩次，所以它只能在允許重測的情況下進行計算2022/7/16中南財經(jīng)政法大學公共管理學院7第一節(jié) 人才素質測評的信度分析二、信度分析的方法（一）重測信度3.滿足的條件： （1）所測量的特質必須是穩(wěn)定的 （2）遺忘和練習的效果基本上是相互抵消 （3）在兩次施測的間隔期內(nèi)，被試所要測查的特質沒有獲得更多的學習和訓練2022/7/16中南財經(jīng)政法大學公共管理學院8第一節(jié) 人才素質測評的信度分析二、信度分析的方法（二）復本信度1.概念：

4、復本信度是指兩個平行的測驗測量同一批被試所得結果的一致性程度。公式如下：2.滿足的條件： （1）構造出兩份或兩份以上真正平行的測驗（即A、B卷） （2）被試要有條件接受兩個測驗，這種條件主要取決于時間、經(jīng)費等幾個方面2022/7/16中南財經(jīng)政法大學公共管理學院9第一節(jié) 人才素質測評的信度分析二、信度分析的方法（三）分半信度1.概念： 分半信度是指將一個測驗分成對等的兩半后，所有被試在這兩半上所得分數(shù)的一致性程度。公式如下：2.滿足的條件： （1）在只能施測一次或沒有復本的情況下使用 （2）使用公式時，要求全體被試在兩半測驗上得分的變異數(shù)要相等2022/7/16中南財經(jīng)政法大學公共管理學院10

5、第一節(jié) 人才素質測評的信度分析二、信度分析的方法（四）同質性信度1.概念： 同質性信度也稱為內(nèi)部一致性信度，是指測驗內(nèi)部所有題目間的一致性程度。公式如下：（五）評分者信度1.概念： 評分者信度指的是多個評分者給同一批的答卷進行評分的一致性程度。公式如下：2022/7/16中南財經(jīng)政法大學公共管理學院11第一節(jié) 人才素質測評的信度分析三、影響信度的因素（一）被試方面（二）主試者方面（三）施測情景方面（四）測量工具方面（五）兩次施測的間隔時間2022/7/16中南財經(jīng)政法大學公共管理學院12第一節(jié) 人才素質測評的信度分析四、提高信度的方法（一）適當增加測驗的長度（二）使測驗中所有試題的難度接近正態(tài)

6、分布，并控制在中等水平（三）努力提高測驗試題的區(qū)分度（四）選取恰當?shù)谋辉噲F體，提高測驗在各同質性較強的亞團體的信度2022/7/16中南財經(jīng)政法大學公共管理學院13第二節(jié) 人才素質測評的效度分析一、效度分析的概述（一）效度的概念1.概念： 效度是指測評結果對于所測素質反映的真實程度，也就是被測者所能達到期望目標的程度有多高。2.需要注意的地方： （1）效度的相對性 （2）效度的程度性 （3）效度受誤差的影響 （4）效度評價要從多方面搜集證據(jù)2022/7/16中南財經(jīng)政法大學公共管理學院14第二節(jié) 人才素質測評的效度分析一、效度分析的概述（二）效度的類型1.內(nèi)容效度 概念： 內(nèi)容效度是指實際測評

7、的結果與我們想要測評的內(nèi)容的吻合度。 內(nèi)容效度的兩個方面： （1）測評是否涵蓋了欲測內(nèi)容的所有范圍 （2）范圍內(nèi)各個內(nèi)容掌握的程度 代表性考察的兩個要點： （1）全面性 （2）適度性2022/7/16中南財經(jīng)政法大學公共管理學院15第二節(jié) 人才素質測評的效度分析一、效度分析的概述（二）效度的類型2.結構效度 概念： 結構效度也叫建構效度、構念效度，它是指實際的測評結果與欲測素質的同構程度，也就是實際測評的結果在多大程度上可以替代我們所想測評的素質。 結構效度的特點： （1）結構效度首先取決于事先假定的素質理論 （2）當實際測評的結果無法證實我們的理論假設時，并不一定就表明該測評的結構效度不高。

8、2022/7/16中南財經(jīng)政法大學公共管理學院16第二節(jié) 人才素質測評的效度分析一、效度分析的概述（二）效度的類型3.關聯(lián)效度 概念： 關聯(lián)效度是指測評結果與效標的一致性程度。效標是用來衡量測評有效性的參照標準。 關聯(lián)效度的劃分： （1）同時效度 （2）預測效度2022/7/16中南財經(jīng)政法大學公共管理學院17第二節(jié) 人才素質測評的效度分析二、效度分析的方法（一）內(nèi)容效度分析法1.藍圖對照分析法2.專家比較判斷法 具體步驟： （1）明確欲測內(nèi)容的范圍，包括知識范圍和能力要求兩個方面 （2）明確每個題目的欲測內(nèi)容是什么 （3）制定評價量表并對整個測驗的有效性做出總評價3.再測法2022/7/16

9、中南財經(jīng)政法大學公共管理學院18第二節(jié) 人才素質測評的效度分析二、效度分析的方法（二）結構效度分析法1.對欲測素質的結構界定一個操作化定義2.根據(jù)事實資料對結構效度進行評判 具體方法：（1）排除法 （2）咨詢法 （3）相關法 （4）邏輯分析法 （5）多元分析法2022/7/16中南財經(jīng)政法大學公共管理學院19第二節(jié) 人才素質測評的效度分析二、效度分析的方法（三）關聯(lián)效度分析法1.相關法 優(yōu)點：（1）提供預測源與效標間的數(shù)量關系 （2）利用回歸方程式來預測每個人的效標分數(shù) 缺點：（1）如果預測源與效標之間不是直線關系， 便會低估測驗的效度 （2）不能提供關于取舍正確性的指標 2022/7/16中

10、南財經(jīng)政法大學公共管理學院20第二節(jié) 人才素質測評的效度分析二、效度分析的方法（三）關聯(lián)效度分析法2.分組法 常用的效標：（1）學術成果 （2）工作績效 （3）團隊特征 （4）評定結果 （5）已被證實有效的測評結果 效度的標準：（1）高效度：效度系數(shù)應高于0.70 （2）中等效度：效度系數(shù)在0.30-0.70之間 （3）低效度：效度系數(shù)低于0.302022/7/16中南財經(jīng)政法大學公共管理學院21第二節(jié) 人才素質測評的效度分析三、影響效度的因素 （一）測評本身 1.測評質量 2.測評長度 測評長度與效度的關系可以總結為如下公式： （二）測評過程 測評過程實際上也會影響到測評效度，如測驗的環(huán)境太

11、差、在施測時不遵照指導語、被試者作弊、測驗環(huán)境太差、評分標準不客觀，記分錯誤等。2022/7/16中南財經(jīng)政法大學公共管理學院22第二節(jié) 人才素質測評的效度分析三、影響效度的因素 （三）被測評者 首先，被測評者的興趣、動機、情緒、態(tài)度、反應心向和身體狀況等都會影響被試的反應，從而影響測評效度。 其次，測評效度與樣本特點具有很大的關系。 （四）效標因素 首先，效標本身是需要具有效度的； 其次，測評的時間和效標獲得的時間之間的間隔長短也在很大程度上影響效度的大小，時間間隔過長會導致效度比較低。2022/7/16中南財經(jīng)政法大學公共管理學院23第二節(jié) 人才素質測評的效度分析三、影響效度的因素 （五）

12、測評信度 測評的信度是測評隨機誤差的反映，而任何誤差的增加都會降低測評的效度。 所以在考察測評效度時，一定要注意測評的信度。 信度不高的測評一定不可能具有很高的效度。2022/7/16中南財經(jīng)政法大學公共管理學院24第二節(jié) 人才素質測評的效度分析四、提高效度的方法 （一）精心編制量表 （二）妥善組織測評 （三）創(chuàng)造標準情境 （四）選擇正確效標2022/7/16中南財經(jīng)政法大學公共管理學院25【本章小結】2022/7/16中南財經(jīng)政法大學公共管理學院26本章系統(tǒng)論述了人才素質測評質量保障體系的兩大基礎內(nèi)容，即信度分析和效度分析。其中，重點要求掌握信度分析和效度分析的概念、方法、影響因素和提升方法。難點