第2章 2 教育測量與評價的質(zhì)量特性-效度課件_第1頁
第2章 2 教育測量與評價的質(zhì)量特性-效度課件_第2頁
第2章 2 教育測量與評價的質(zhì)量特性-效度課件_第3頁
第2章 2 教育測量與評價的質(zhì)量特性-效度課件_第4頁
第2章 2 教育測量與評價的質(zhì)量特性-效度課件_第5頁
已閱讀5頁,還剩117頁未讀 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)

文檔簡介

教育測量與評價廣西師范大學(xué)教育科學(xué)學(xué)院秦娟qinjuan2003@126.com18教學(xué)周/36學(xué)時1教育測量與評價廣西師范大學(xué)教育科學(xué)學(xué)院秦娟18教學(xué)周第二章教育與心理測量的質(zhì)量指標(biāo)

2第二章教育與心理測量的質(zhì)量指標(biāo)2本章內(nèi)容提要:教育測量與評價的信度教育測量與評價的效度教育測量與評價的難度教育測量與評價的區(qū)分度3本章內(nèi)容提要:教育測量與評價的信度3第二節(jié)教育與心理測量的效度效度的理論意義效度的統(tǒng)計學(xué)意義效度與信度的關(guān)系效標(biāo)關(guān)聯(lián)效度及其估算方法內(nèi)容效度及其分析方法結(jié)構(gòu)效度及其分析方法4第二節(jié)教育與心理測量的效度效度的理論意義4一、效度的理論意義效度指一次測量的有效程度。效度指一次測驗(yàn)對其所欲測量的屬性能夠測量到的程度,即測量的正確性。效度是指測驗(yàn)所測量到的結(jié)果與測驗(yàn)編制者想要測量的心理特性之間的一致性程度。5一、效度的理論意義效度指一次測量的有效程度。5說明:效度始終是針對一定測量目的而言的。效度只是程度上的差異。效度是針對測量結(jié)果而言的。評價效度需要多角度、多方面的收集證據(jù)。6說明:效度始終是針對一定測量目的而言的。6二、效度的統(tǒng)計學(xué)意義測驗(yàn)總方差由所欲測量的屬性所引起的方差與所欲測量的無關(guān)屬性所引起的方差由誤差引起的方差7二、效度的統(tǒng)計學(xué)意義測驗(yàn)由所欲測量的屬性所引起的方差與所欲公式推導(dǎo):8公式推導(dǎo):8公式推導(dǎo):9公式推導(dǎo):9效度的統(tǒng)計學(xué)意義為:☆即表示所欲測量的屬性引起的方差在測驗(yàn)分?jǐn)?shù)總方差中所占的比率。10效度的統(tǒng)計學(xué)意義為:☆即表示所欲測量的屬性引起的方三、信度與效度之間的關(guān)系信度高是效度高的必要而非充分條件信度系數(shù)與效度系數(shù)之間的關(guān)系11三、信度與效度之間的關(guān)系信度高是效度高的必要而非充分條件1四、效標(biāo)關(guān)聯(lián)效度及其估算方法效標(biāo)?12四、效標(biāo)關(guān)聯(lián)效度及其估算方法效標(biāo)?12何為效標(biāo)?所謂效標(biāo),是檢驗(yàn)測驗(yàn)效度的參照標(biāo)準(zhǔn),效標(biāo)實(shí)際上是本測驗(yàn)說想測量或要預(yù)測的特性或功能,這些特性和功能通常以另一獨(dú)立測驗(yàn)結(jié)果來表示。13何為效標(biāo)?所謂效標(biāo),是檢驗(yàn)測驗(yàn)效度的參照標(biāo)準(zhǔn),效標(biāo)實(shí)際上是本優(yōu)良效標(biāo)的標(biāo)準(zhǔn)可靠性有效性客觀性實(shí)用性14優(yōu)良效標(biāo)的標(biāo)準(zhǔn)可靠性14(一)定義:以測驗(yàn)分?jǐn)?shù)與其效標(biāo)分?jǐn)?shù)之間的相關(guān)來表示測驗(yàn)的效度。又稱之為統(tǒng)計效度或?qū)嵶C效度,二者之間的相關(guān)系數(shù)就是效標(biāo)關(guān)聯(lián)效度系數(shù)?!罡鶕?jù)測驗(yàn)分?jǐn)?shù)與效標(biāo)分?jǐn)?shù)二者所獲得的時間關(guān)系,可以將效標(biāo)關(guān)聯(lián)效度分為同時效度和預(yù)測效度。15(一)定義:以測驗(yàn)分?jǐn)?shù)與其效標(biāo)分?jǐn)?shù)之間的相關(guān)來表示測驗(yàn)的效度(二)估算方法積差相關(guān)法二列相關(guān)法點(diǎn)二列相關(guān)法等級相關(guān)法四分相關(guān)法及相關(guān)法列聯(lián)相關(guān)法命中率法顯著差異法16(二)估算方法積差相關(guān)法16積差相關(guān)法

☆當(dāng)測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)均為正態(tài)連續(xù)變量時,可以用二者的積差相關(guān)系數(shù)來表示測驗(yàn)的效標(biāo)關(guān)聯(lián)效度系數(shù)。17積差相關(guān)法☆當(dāng)測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)均為正二列相關(guān)法☆當(dāng)測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)兩個均為正態(tài)連續(xù)變量,而其中一個變量被人為地分為二分變量時,測驗(yàn)的效標(biāo)關(guān)聯(lián)系數(shù)可以用二列相關(guān)系數(shù)來表示。正態(tài)分布表:教材P34718二列相關(guān)法☆當(dāng)測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)兩個均為正態(tài)連續(xù)點(diǎn)二列相關(guān)法☆當(dāng)測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)其中一個變量為連續(xù)變量,而另外一個為真正的二分變量時,測驗(yàn)的效標(biāo)關(guān)聯(lián)效度系數(shù)可以用點(diǎn)二列相關(guān)系數(shù)來表示。19點(diǎn)二列相關(guān)法☆當(dāng)測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)其中一個變量為等級相關(guān)法(斯皮爾曼等級相關(guān))☆當(dāng)測驗(yàn)成績和效標(biāo)成績兩個變量(或其中一個變量)以等級次序排列或以等級次序表示時,測驗(yàn)的效標(biāo)關(guān)聯(lián)系數(shù)可以用等級相關(guān)系數(shù)來表示。20等級相關(guān)法(斯皮爾曼等級相關(guān))☆當(dāng)測驗(yàn)成績和效標(biāo)四分相關(guān)法及相關(guān)法☆當(dāng)測驗(yàn)成績和效標(biāo)成績都是二分變量或以二分變量表示時,測驗(yàn)的效標(biāo)關(guān)聯(lián)效度系數(shù)可以用四分相關(guān)系數(shù)或相關(guān)系數(shù)來表示。21四分相關(guān)法及相關(guān)法☆當(dāng)測驗(yàn)成績和效標(biāo)成績都【舉例說明】42名學(xué)生大學(xué)考試數(shù)學(xué)成績(優(yōu)和良)與修業(yè)四年后,研究生入學(xué)考試數(shù)學(xué)成績(通過和未通過)如下表所示,試估計研究生入學(xué)考試數(shù)學(xué)試卷的效標(biāo)關(guān)聯(lián)效度系數(shù)。22【舉例說明】42名學(xué)生大學(xué)考試數(shù)學(xué)成績(優(yōu)和良)與修表42名大學(xué)生及研究生入學(xué)考試數(shù)學(xué)成績23表42名大學(xué)生及研究生入學(xué)考試數(shù)學(xué)成績23列聯(lián)相關(guān)法☆當(dāng)測驗(yàn)和效標(biāo)成績其中一個變量不止分為兩個類別時,測驗(yàn)的效標(biāo)關(guān)聯(lián)效度系數(shù)可以用列聯(lián)相關(guān)系數(shù)來表示。24列聯(lián)相關(guān)法☆當(dāng)測驗(yàn)和效標(biāo)成績其中一個變量不止分為兩【舉例說明】初三137名學(xué)生性向測驗(yàn)及高一物理學(xué)科成績?nèi)缦卤硭?,試估計學(xué)生性向測驗(yàn)的預(yù)測性效標(biāo)關(guān)聯(lián)效度。25【舉例說明】初三137名學(xué)生性向測驗(yàn)及高一物理學(xué)表初三學(xué)生性向測驗(yàn)與高一物理學(xué)科成績26表初三學(xué)生性向測驗(yàn)與高一物理學(xué)科成績26命中率法總命中率正命中率負(fù)命中率27命中率法總命中率27顯著差異法根據(jù)效標(biāo)將被試分為兩個極端組(如:好與差、成功與失?。?,然后檢驗(yàn)兩組測驗(yàn)分?jǐn)?shù)是否具有統(tǒng)計學(xué)上的顯著性差異。28顯著差異法根據(jù)效標(biāo)將被試分為兩個極端組(如:好與使用相關(guān)系數(shù)表示效度時,可以采用以下參照標(biāo)準(zhǔn)來解釋效度:29使用相關(guān)系數(shù)表示效度時,可以采用以下參照標(biāo)準(zhǔn)來解釋效度:2五、內(nèi)容效度及其分析方法30五、內(nèi)容效度及其分析方法30(一)定義內(nèi)容效度就是指測驗(yàn)內(nèi)容對所要測量的內(nèi)容的代表性程度,也指測驗(yàn)內(nèi)容與要測內(nèi)容之間的一致性程度。一個測驗(yàn)要具有較高的內(nèi)容效度必須具備兩個條件:一是測驗(yàn)內(nèi)容范圍明確;二是取樣具有代表性。31(一)定義內(nèi)容效度就是指測驗(yàn)內(nèi)容對所要測量的內(nèi)容的代表性程度說明:這種代表性程度表現(xiàn)為測驗(yàn)的內(nèi)容范圍、材料與所要測量的內(nèi)容范圍、教育目標(biāo)是否相等,測量試題所引起的行為是不是所要測量屬性的明確反應(yīng),測量結(jié)果是不是一個具有代表性的行為樣本,等等。內(nèi)容效度一般用于考查學(xué)生學(xué)業(yè)成績測驗(yàn)的有效性,而不適合應(yīng)用于心理測驗(yàn)。

32說明:這種代表性程度表現(xiàn)為測驗(yàn)的內(nèi)容范圍、材料與所要測量的內(nèi)說明:內(nèi)容效度的確定方法與效標(biāo)關(guān)聯(lián)效度不同,它一般不能用數(shù)量化的指標(biāo)來反映測驗(yàn)內(nèi)容的有效性程度,而是在某種依據(jù)的基礎(chǔ)上作出邏輯判斷。對于測驗(yàn)內(nèi)容效度的分析,要以對所要測量的內(nèi)容范圍和教育目標(biāo)系統(tǒng)的邏輯分析為基礎(chǔ),要以這些內(nèi)容范圍和教育目標(biāo)層次所占的比重為依據(jù)來考察測驗(yàn)是否按比重覆蓋了目標(biāo)內(nèi)容。33說明:內(nèi)容效度的確定方法與效標(biāo)關(guān)聯(lián)效度不同,它一般不能用數(shù)量(二)內(nèi)容效度的建立過程定義測量屬性,界定測量內(nèi)容、范圍對教學(xué)內(nèi)容和教學(xué)目標(biāo)進(jìn)行邏輯分析將各部分內(nèi)容和教學(xué)目標(biāo)進(jìn)行分類。設(shè)計題型和試題34(二)內(nèi)容效度的建立過程定義測量屬性,界定測量內(nèi)容、范圍對教(三)內(nèi)容效度的分析方法邏輯分析法量化分析法比較差異法35(三)內(nèi)容效度的分析方法邏輯分析法35邏輯分析法將實(shí)際測驗(yàn)題目分析所得的“題目雙向分類表”與事先制定的“命題雙向細(xì)目表”進(jìn)行比較分析,由專家對考試內(nèi)容的一致性和有效性作出評價。36邏輯分析法將實(shí)際測驗(yàn)題目分析所得的“題目雙向分類表某初中化學(xué)測驗(yàn)命題雙向細(xì)目表37某初中化學(xué)測驗(yàn)命題雙向細(xì)目表37量化分析法表兩名專家量化評價表38量化分析法表兩名專家量化評價表38比較差異法對同一組被試用一個測驗(yàn)的兩個復(fù)本在某一學(xué)科(內(nèi)容)教學(xué)訓(xùn)練前后分別進(jìn)行測驗(yàn),若兩次測驗(yàn)成績差異顯著,且教學(xué)訓(xùn)練后優(yōu)于教學(xué)訓(xùn)練前,則表明所測驗(yàn)內(nèi)容與教學(xué)內(nèi)容或訓(xùn)練內(nèi)容相符,具有較好的內(nèi)容效度;否則,則可說明內(nèi)容效度較低。39比較差異法對同一組被試用一個測驗(yàn)的兩個復(fù)本在某一學(xué)科六、結(jié)構(gòu)效度及其分析方法40六、結(jié)構(gòu)效度及其分析方法40(一)定義結(jié)構(gòu)效度是指測驗(yàn)成績能夠解釋心理學(xué)理論上的某種結(jié)構(gòu)或特質(zhì)的程度?!罱Y(jié)構(gòu)實(shí)質(zhì)指對測量屬性的一種理論假設(shè)。結(jié)構(gòu)效度主要適用于心理測驗(yàn)效度的確定。41(一)定義結(jié)構(gòu)效度是指測驗(yàn)成績能夠解釋心理學(xué)理論上的某種結(jié)構(gòu)圖初中生自主學(xué)習(xí)能力結(jié)構(gòu)——學(xué)習(xí)動機(jī)性信念42圖初中生自主學(xué)習(xí)能力結(jié)構(gòu)——學(xué)習(xí)動機(jī)性信念42圖初中生自主學(xué)習(xí)能力結(jié)構(gòu)——自主學(xué)習(xí)策略43圖初中生自主學(xué)習(xí)能力結(jié)構(gòu)——自主學(xué)習(xí)策略43【實(shí)例】少年道德品質(zhì)形成原因,

提出幾點(diǎn)理論假設(shè):少年道德品質(zhì)傾向與家庭因素有密切關(guān)系;少年道德品質(zhì)傾向與居住地區(qū)和環(huán)境有關(guān)系;少年道德品質(zhì)傾向與學(xué)校教育有關(guān)系;少年道德品質(zhì)傾向與他們在校內(nèi)外結(jié)交朋友有關(guān)系。44【實(shí)例】少年道德品質(zhì)形成原因,

提出(二)確定結(jié)構(gòu)效度的步驟和方法首先根據(jù)一定的心理學(xué)理論建立某種心理品質(zhì)的理論結(jié)構(gòu);然后根據(jù)這一理論結(jié)構(gòu)提出有關(guān)測驗(yàn)成績的假設(shè);最后用邏輯和實(shí)證的研究由果求因來驗(yàn)證最初提出的假設(shè)。45(二)確定結(jié)構(gòu)效度的步驟和方法首先根據(jù)一定的心理學(xué)理論建立舉例說明:某智力測驗(yàn)首先根據(jù)有關(guān)智力理論建立一套理論結(jié)構(gòu),如智力的定義、智力的結(jié)構(gòu)、智力與遺傳環(huán)境的關(guān)系、智力與年齡的關(guān)系等;然后根據(jù)這些理論,提出有關(guān)智力測驗(yàn)的假設(shè),如:①測驗(yàn)分?jǐn)?shù)在16歲以前隨年齡的增加而增加;②智力測驗(yàn)受教學(xué)測直接影響不大;③一種智力測驗(yàn)的分?jǐn)?shù)與其他智力測驗(yàn)的分?jǐn)?shù)有正相關(guān);④智商是相對穩(wěn)定的等等。最后通過搜集材料(這里主要指通過智力測驗(yàn)獲得)來驗(yàn)證假設(shè),如果假設(shè)獲得支持,即如果測驗(yàn)分?jǐn)?shù)在16歲以前隨著年齡的增加而增加,智力測驗(yàn)受教學(xué)的直接影響不大,兩個智力分?jǐn)?shù)之間有正相關(guān),智商在一段時間內(nèi)保持相對的穩(wěn)定性,這些假設(shè)都得到一一證實(shí),那么就認(rèn)為該測驗(yàn)具有較好的構(gòu)想效度。如果上述假設(shè)沒有得到完全驗(yàn)證,比如智商在一段時間內(nèi)不保持相對穩(wěn)定性,則說明測驗(yàn)的構(gòu)想效度不高,不能有效的測量智力。46舉例說明:某智力測驗(yàn)首先根據(jù)有關(guān)智力理論建立一套理論結(jié)構(gòu),如(三)結(jié)構(gòu)效度的驗(yàn)證方法邏輯思辨法統(tǒng)計分析法測驗(yàn)的同質(zhì)性與異質(zhì)性相容效度、聚合效度、區(qū)分效度綜合分析法顯著差異法因素分析法47(三)結(jié)構(gòu)效度的驗(yàn)證方法邏輯思辨法47邏輯思辨法內(nèi)容效度結(jié)構(gòu)效度理論支持48邏輯思辨法內(nèi)容效度結(jié)構(gòu)效度理論支持48測驗(yàn)的同質(zhì)性與異質(zhì)性☆如果測驗(yàn)所測的是單一特質(zhì),則測驗(yàn)各題目之間的相關(guān)應(yīng)該高,即測驗(yàn)的同質(zhì)性信度高;☆如果測驗(yàn)所測的是一個由多種特質(zhì)構(gòu)成的復(fù)合體,則測量同一特質(zhì)的題目之間的相關(guān)應(yīng)高于測量不同特質(zhì)題目之間的相關(guān)。同質(zhì)性異質(zhì)性49測驗(yàn)的同質(zhì)性與異質(zhì)性☆如果測驗(yàn)所測的是單一特質(zhì),則相容效度、聚合效度、區(qū)分效度

等指標(biāo)綜合分析法一個新編的有待確定其結(jié)構(gòu)的測驗(yàn)與另一個已知其結(jié)構(gòu)的測驗(yàn),二者共同測量相同結(jié)構(gòu)的程度。一個未經(jīng)過結(jié)構(gòu)效度檢定的測驗(yàn)和一個已經(jīng)經(jīng)過結(jié)構(gòu)效度檢定的測驗(yàn),二者共同測量相同結(jié)構(gòu)的程度。方法:基于兩個等價結(jié)構(gòu)測試下兩組分?jǐn)?shù)之間的相關(guān)相容效度①50相容效度、聚合效度、區(qū)分效度

等指標(biāo)綜合分析法一個新編

使用不同方法對同一特質(zhì)進(jìn)行測量,其結(jié)果之間的相關(guān)。聚合效度②聚合效度(幅合效度/求同效度)51使用不同方法對同一特質(zhì)進(jìn)行測量,其結(jié)果之間的相關(guān)。聚合效度

使用相同的方法對不同特質(zhì)進(jìn)行測量,其結(jié)果之間的相關(guān)。區(qū)分效度③區(qū)分效度(辨別效度/求異效度)52使用相同的方法對不同特質(zhì)進(jìn)行測量,其結(jié)果之間的相關(guān)。區(qū)分效

使用相同方法對同一特質(zhì)進(jìn)行測量,其結(jié)果之間的相關(guān)。信度④信度53使用相同方法對同一特質(zhì)進(jìn)行測量,其結(jié)果之間的相關(guān)。信度④綜合分析法的內(nèi)在邏輯使用相同方法測量相同特質(zhì)使用不同方法測量相同特質(zhì)使用相同方法測量不同特質(zhì)使用不同方法測量不同特質(zhì)聚合效度信度區(qū)分效度54綜合分析法的內(nèi)在邏輯使用相同方法測量相同特質(zhì)使用不同方法測量【實(shí)例】教材P67特質(zhì)A(支配性)特質(zhì)B(社會性)特質(zhì)C(成就動機(jī))方法1(自陳法)方法2(投射法)方法3(同伴評價法)55【實(shí)例】教材P67特質(zhì)A(支配性)方法1(自陳法)55顯著差異法差異被試比較法先后測試分析法56顯著差異法差異被試比較法56因素分析法圖初中生自主學(xué)習(xí)能力結(jié)構(gòu)——學(xué)習(xí)動機(jī)性信念57因素分析法圖初中生自主學(xué)習(xí)能力結(jié)構(gòu)——學(xué)習(xí)動機(jī)性信念57表學(xué)習(xí)動機(jī)性信念分量表因素負(fù)荷表58表學(xué)習(xí)動機(jī)性信念分量表因素負(fù)荷表58小結(jié)效標(biāo)關(guān)聯(lián)效度既適用于學(xué)業(yè)成就測試也適用于心理測試效度計算,關(guān)鍵是要尋找優(yōu)良的效標(biāo);內(nèi)容效度適用于學(xué)業(yè)成就測試效度計算,同時也適用于分析心理測試效度,關(guān)鍵是對測試內(nèi)容要有較為深刻、全面的解讀;結(jié)構(gòu)效度一般適用于心理測試的效度計算,而不適用于學(xué)業(yè)成就測試。59小結(jié)效標(biāo)關(guān)聯(lián)效度既適用于學(xué)業(yè)成就測試也適用于心理測試效度計算補(bǔ)充效度的計算有時可采用平均區(qū)分度的方法代替,即:60補(bǔ)充效度的計算有時可采用平均區(qū)分度的方法代替,即:60Thankyou!61Thankyou!61教育測量與評價廣西師范大學(xué)教育科學(xué)學(xué)院秦娟qinjuan2003@126.com18教學(xué)周/36學(xué)時62教育測量與評價廣西師范大學(xué)教育科學(xué)學(xué)院秦娟18教學(xué)周第二章教育與心理測量的質(zhì)量指標(biāo)

63第二章教育與心理測量的質(zhì)量指標(biāo)2本章內(nèi)容提要:教育測量與評價的信度教育測量與評價的效度教育測量與評價的難度教育測量與評價的區(qū)分度64本章內(nèi)容提要:教育測量與評價的信度3第二節(jié)教育與心理測量的效度效度的理論意義效度的統(tǒng)計學(xué)意義效度與信度的關(guān)系效標(biāo)關(guān)聯(lián)效度及其估算方法內(nèi)容效度及其分析方法結(jié)構(gòu)效度及其分析方法65第二節(jié)教育與心理測量的效度效度的理論意義4一、效度的理論意義效度指一次測量的有效程度。效度指一次測驗(yàn)對其所欲測量的屬性能夠測量到的程度,即測量的正確性。效度是指測驗(yàn)所測量到的結(jié)果與測驗(yàn)編制者想要測量的心理特性之間的一致性程度。66一、效度的理論意義效度指一次測量的有效程度。5說明:效度始終是針對一定測量目的而言的。效度只是程度上的差異。效度是針對測量結(jié)果而言的。評價效度需要多角度、多方面的收集證據(jù)。67說明:效度始終是針對一定測量目的而言的。6二、效度的統(tǒng)計學(xué)意義測驗(yàn)總方差由所欲測量的屬性所引起的方差與所欲測量的無關(guān)屬性所引起的方差由誤差引起的方差68二、效度的統(tǒng)計學(xué)意義測驗(yàn)由所欲測量的屬性所引起的方差與所欲公式推導(dǎo):69公式推導(dǎo):8公式推導(dǎo):70公式推導(dǎo):9效度的統(tǒng)計學(xué)意義為:☆即表示所欲測量的屬性引起的方差在測驗(yàn)分?jǐn)?shù)總方差中所占的比率。71效度的統(tǒng)計學(xué)意義為:☆即表示所欲測量的屬性引起的方三、信度與效度之間的關(guān)系信度高是效度高的必要而非充分條件信度系數(shù)與效度系數(shù)之間的關(guān)系72三、信度與效度之間的關(guān)系信度高是效度高的必要而非充分條件1四、效標(biāo)關(guān)聯(lián)效度及其估算方法效標(biāo)?73四、效標(biāo)關(guān)聯(lián)效度及其估算方法效標(biāo)?12何為效標(biāo)?所謂效標(biāo),是檢驗(yàn)測驗(yàn)效度的參照標(biāo)準(zhǔn),效標(biāo)實(shí)際上是本測驗(yàn)說想測量或要預(yù)測的特性或功能,這些特性和功能通常以另一獨(dú)立測驗(yàn)結(jié)果來表示。74何為效標(biāo)?所謂效標(biāo),是檢驗(yàn)測驗(yàn)效度的參照標(biāo)準(zhǔn),效標(biāo)實(shí)際上是本優(yōu)良效標(biāo)的標(biāo)準(zhǔn)可靠性有效性客觀性實(shí)用性75優(yōu)良效標(biāo)的標(biāo)準(zhǔn)可靠性14(一)定義:以測驗(yàn)分?jǐn)?shù)與其效標(biāo)分?jǐn)?shù)之間的相關(guān)來表示測驗(yàn)的效度。又稱之為統(tǒng)計效度或?qū)嵶C效度,二者之間的相關(guān)系數(shù)就是效標(biāo)關(guān)聯(lián)效度系數(shù)?!罡鶕?jù)測驗(yàn)分?jǐn)?shù)與效標(biāo)分?jǐn)?shù)二者所獲得的時間關(guān)系,可以將效標(biāo)關(guān)聯(lián)效度分為同時效度和預(yù)測效度。76(一)定義:以測驗(yàn)分?jǐn)?shù)與其效標(biāo)分?jǐn)?shù)之間的相關(guān)來表示測驗(yàn)的效度(二)估算方法積差相關(guān)法二列相關(guān)法點(diǎn)二列相關(guān)法等級相關(guān)法四分相關(guān)法及相關(guān)法列聯(lián)相關(guān)法命中率法顯著差異法77(二)估算方法積差相關(guān)法16積差相關(guān)法

☆當(dāng)測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)均為正態(tài)連續(xù)變量時,可以用二者的積差相關(guān)系數(shù)來表示測驗(yàn)的效標(biāo)關(guān)聯(lián)效度系數(shù)。78積差相關(guān)法☆當(dāng)測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)均為正二列相關(guān)法☆當(dāng)測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)兩個均為正態(tài)連續(xù)變量,而其中一個變量被人為地分為二分變量時,測驗(yàn)的效標(biāo)關(guān)聯(lián)系數(shù)可以用二列相關(guān)系數(shù)來表示。正態(tài)分布表:教材P34779二列相關(guān)法☆當(dāng)測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)兩個均為正態(tài)連續(xù)點(diǎn)二列相關(guān)法☆當(dāng)測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)其中一個變量為連續(xù)變量,而另外一個為真正的二分變量時,測驗(yàn)的效標(biāo)關(guān)聯(lián)效度系數(shù)可以用點(diǎn)二列相關(guān)系數(shù)來表示。80點(diǎn)二列相關(guān)法☆當(dāng)測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)其中一個變量為等級相關(guān)法(斯皮爾曼等級相關(guān))☆當(dāng)測驗(yàn)成績和效標(biāo)成績兩個變量(或其中一個變量)以等級次序排列或以等級次序表示時,測驗(yàn)的效標(biāo)關(guān)聯(lián)系數(shù)可以用等級相關(guān)系數(shù)來表示。81等級相關(guān)法(斯皮爾曼等級相關(guān))☆當(dāng)測驗(yàn)成績和效標(biāo)四分相關(guān)法及相關(guān)法☆當(dāng)測驗(yàn)成績和效標(biāo)成績都是二分變量或以二分變量表示時,測驗(yàn)的效標(biāo)關(guān)聯(lián)效度系數(shù)可以用四分相關(guān)系數(shù)或相關(guān)系數(shù)來表示。82四分相關(guān)法及相關(guān)法☆當(dāng)測驗(yàn)成績和效標(biāo)成績都【舉例說明】42名學(xué)生大學(xué)考試數(shù)學(xué)成績(優(yōu)和良)與修業(yè)四年后,研究生入學(xué)考試數(shù)學(xué)成績(通過和未通過)如下表所示,試估計研究生入學(xué)考試數(shù)學(xué)試卷的效標(biāo)關(guān)聯(lián)效度系數(shù)。83【舉例說明】42名學(xué)生大學(xué)考試數(shù)學(xué)成績(優(yōu)和良)與修表42名大學(xué)生及研究生入學(xué)考試數(shù)學(xué)成績84表42名大學(xué)生及研究生入學(xué)考試數(shù)學(xué)成績23列聯(lián)相關(guān)法☆當(dāng)測驗(yàn)和效標(biāo)成績其中一個變量不止分為兩個類別時,測驗(yàn)的效標(biāo)關(guān)聯(lián)效度系數(shù)可以用列聯(lián)相關(guān)系數(shù)來表示。85列聯(lián)相關(guān)法☆當(dāng)測驗(yàn)和效標(biāo)成績其中一個變量不止分為兩【舉例說明】初三137名學(xué)生性向測驗(yàn)及高一物理學(xué)科成績?nèi)缦卤硭荆嚬烙媽W(xué)生性向測驗(yàn)的預(yù)測性效標(biāo)關(guān)聯(lián)效度。86【舉例說明】初三137名學(xué)生性向測驗(yàn)及高一物理學(xué)表初三學(xué)生性向測驗(yàn)與高一物理學(xué)科成績87表初三學(xué)生性向測驗(yàn)與高一物理學(xué)科成績26命中率法總命中率正命中率負(fù)命中率88命中率法總命中率27顯著差異法根據(jù)效標(biāo)將被試分為兩個極端組(如:好與差、成功與失敗),然后檢驗(yàn)兩組測驗(yàn)分?jǐn)?shù)是否具有統(tǒng)計學(xué)上的顯著性差異。89顯著差異法根據(jù)效標(biāo)將被試分為兩個極端組(如:好與使用相關(guān)系數(shù)表示效度時,可以采用以下參照標(biāo)準(zhǔn)來解釋效度:90使用相關(guān)系數(shù)表示效度時,可以采用以下參照標(biāo)準(zhǔn)來解釋效度:2五、內(nèi)容效度及其分析方法91五、內(nèi)容效度及其分析方法30(一)定義內(nèi)容效度就是指測驗(yàn)內(nèi)容對所要測量的內(nèi)容的代表性程度,也指測驗(yàn)內(nèi)容與要測內(nèi)容之間的一致性程度。一個測驗(yàn)要具有較高的內(nèi)容效度必須具備兩個條件:一是測驗(yàn)內(nèi)容范圍明確;二是取樣具有代表性。92(一)定義內(nèi)容效度就是指測驗(yàn)內(nèi)容對所要測量的內(nèi)容的代表性程度說明:這種代表性程度表現(xiàn)為測驗(yàn)的內(nèi)容范圍、材料與所要測量的內(nèi)容范圍、教育目標(biāo)是否相等,測量試題所引起的行為是不是所要測量屬性的明確反應(yīng),測量結(jié)果是不是一個具有代表性的行為樣本,等等。內(nèi)容效度一般用于考查學(xué)生學(xué)業(yè)成績測驗(yàn)的有效性,而不適合應(yīng)用于心理測驗(yàn)。

93說明:這種代表性程度表現(xiàn)為測驗(yàn)的內(nèi)容范圍、材料與所要測量的內(nèi)說明:內(nèi)容效度的確定方法與效標(biāo)關(guān)聯(lián)效度不同,它一般不能用數(shù)量化的指標(biāo)來反映測驗(yàn)內(nèi)容的有效性程度,而是在某種依據(jù)的基礎(chǔ)上作出邏輯判斷。對于測驗(yàn)內(nèi)容效度的分析,要以對所要測量的內(nèi)容范圍和教育目標(biāo)系統(tǒng)的邏輯分析為基礎(chǔ),要以這些內(nèi)容范圍和教育目標(biāo)層次所占的比重為依據(jù)來考察測驗(yàn)是否按比重覆蓋了目標(biāo)內(nèi)容。94說明:內(nèi)容效度的確定方法與效標(biāo)關(guān)聯(lián)效度不同,它一般不能用數(shù)量(二)內(nèi)容效度的建立過程定義測量屬性,界定測量內(nèi)容、范圍對教學(xué)內(nèi)容和教學(xué)目標(biāo)進(jìn)行邏輯分析將各部分內(nèi)容和教學(xué)目標(biāo)進(jìn)行分類。設(shè)計題型和試題95(二)內(nèi)容效度的建立過程定義測量屬性,界定測量內(nèi)容、范圍對教(三)內(nèi)容效度的分析方法邏輯分析法量化分析法比較差異法96(三)內(nèi)容效度的分析方法邏輯分析法35邏輯分析法將實(shí)際測驗(yàn)題目分析所得的“題目雙向分類表”與事先制定的“命題雙向細(xì)目表”進(jìn)行比較分析,由專家對考試內(nèi)容的一致性和有效性作出評價。97邏輯分析法將實(shí)際測驗(yàn)題目分析所得的“題目雙向分類表某初中化學(xué)測驗(yàn)命題雙向細(xì)目表98某初中化學(xué)測驗(yàn)命題雙向細(xì)目表37量化分析法表兩名專家量化評價表99量化分析法表兩名專家量化評價表38比較差異法對同一組被試用一個測驗(yàn)的兩個復(fù)本在某一學(xué)科(內(nèi)容)教學(xué)訓(xùn)練前后分別進(jìn)行測驗(yàn),若兩次測驗(yàn)成績差異顯著,且教學(xué)訓(xùn)練后優(yōu)于教學(xué)訓(xùn)練前,則表明所測驗(yàn)內(nèi)容與教學(xué)內(nèi)容或訓(xùn)練內(nèi)容相符,具有較好的內(nèi)容效度;否則,則可說明內(nèi)容效度較低。100比較差異法對同一組被試用一個測驗(yàn)的兩個復(fù)本在某一學(xué)科六、結(jié)構(gòu)效度及其分析方法101六、結(jié)構(gòu)效度及其分析方法40(一)定義結(jié)構(gòu)效度是指測驗(yàn)成績能夠解釋心理學(xué)理論上的某種結(jié)構(gòu)或特質(zhì)的程度?!罱Y(jié)構(gòu)實(shí)質(zhì)指對測量屬性的一種理論假設(shè)。結(jié)構(gòu)效度主要適用于心理測驗(yàn)效度的確定。102(一)定義結(jié)構(gòu)效度是指測驗(yàn)成績能夠解釋心理學(xué)理論上的某種結(jié)構(gòu)圖初中生自主學(xué)習(xí)能力結(jié)構(gòu)——學(xué)習(xí)動機(jī)性信念103圖初中生自主學(xué)習(xí)能力結(jié)構(gòu)——學(xué)習(xí)動機(jī)性信念42圖初中生自主學(xué)習(xí)能力結(jié)構(gòu)——自主學(xué)習(xí)策略104圖初中生自主學(xué)習(xí)能力結(jié)構(gòu)——自主學(xué)習(xí)策略43【實(shí)例】少年道德品質(zhì)形成原因,

提出幾點(diǎn)理論假設(shè):少年道德品質(zhì)傾向與家庭因素有密切關(guān)系;少年道德品質(zhì)傾向與居住地區(qū)和環(huán)境有關(guān)系;少年道德品質(zhì)傾向與學(xué)校教育有關(guān)系;少年道德品質(zhì)傾向與他們在校內(nèi)外結(jié)交朋友有關(guān)系。105【實(shí)例】少年道德品質(zhì)形成原因,

提出(二)確定結(jié)構(gòu)效度的步驟和方法首先根據(jù)一定的心理學(xué)理論建立某種心理品質(zhì)的理論結(jié)構(gòu);然后根據(jù)這一理論結(jié)構(gòu)提出有關(guān)測驗(yàn)成績的假設(shè);最后用邏輯和實(shí)證的研究由果求因來驗(yàn)證最初提出的假設(shè)。106(二)確定結(jié)構(gòu)效度的步驟和方法首先根據(jù)一定的心理學(xué)理論建立舉例說明:某智力測驗(yàn)首先根據(jù)有關(guān)智力理論建立一套理論結(jié)構(gòu),如智力的定義、智力的結(jié)構(gòu)、智力與遺傳環(huán)境的關(guān)系、智力與年齡的關(guān)系等;然后根據(jù)這些理論,提出有關(guān)智力測驗(yàn)的假設(shè),如:①測驗(yàn)分?jǐn)?shù)在16歲以前隨年齡的增加而增加;②智力測驗(yàn)受教學(xué)測直接影響不大;③一種智力測驗(yàn)的分?jǐn)?shù)與其他智力測驗(yàn)的分?jǐn)?shù)有正相關(guān);④智商是相對穩(wěn)定的等等。最后通過搜集材料(這里主要指通過智力測驗(yàn)獲得)來驗(yàn)證假設(shè),如果假設(shè)獲得支持,即如果測驗(yàn)分?jǐn)?shù)在16歲以前隨著年齡的增加而增加,智力測驗(yàn)受教學(xué)的直接影響不大,兩個智力分?jǐn)?shù)之間有正相關(guān),智商在一段時間內(nèi)保持相對的穩(wěn)定性,這些假設(shè)都得到一一證實(shí),那么就認(rèn)為該測驗(yàn)具有較好的構(gòu)想效度。如果上述假設(shè)沒有得到完全驗(yàn)證,比如智商在一段時間內(nèi)不保持相對穩(wěn)定性,則說明測驗(yàn)的構(gòu)想效度不高,不能有效的測量智力。107舉例說明:某智力測驗(yàn)首先根據(jù)有關(guān)智力理論建立一套理論結(jié)構(gòu),如(三)結(jié)構(gòu)效度的驗(yàn)證方法邏輯思辨法統(tǒng)計分析法測驗(yàn)的同質(zhì)性與異質(zhì)性相容效度、聚合效度、區(qū)分效度綜合分析法顯著差異法因素分析法108(三)結(jié)構(gòu)效度的驗(yàn)證方法邏輯思辨法47邏輯思辨法內(nèi)容效度結(jié)構(gòu)效度理論支持109邏輯思辨法內(nèi)容效度結(jié)構(gòu)效度理論支持48測驗(yàn)的同質(zhì)性與異質(zhì)性☆如果測驗(yàn)所測的是單一特質(zhì),則測驗(yàn)各題目之間的相關(guān)

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

最新文檔

評論

0/150

提交評論