ch7測量信度與效度

1、ch7測量信度與效度測量是針對某一特定對象、人、或組織，有關(guān)某種特徵或行為(消費(fèi)、所得、人格特質(zhì))，賦予其一個(gè)值，使其數(shù)值能代表(或符合)構(gòu)念中所代表的概念或狀況。它是屬於衡量的問題。測量就是研究者根據(jù)一定規(guī)則將數(shù)值(或其它符號)指派給物體或事物(變數(shù))身上之一種程序。*2測量的三個(gè)程序(1)選擇可觀察的個(gè)體或事物(即對象 (2)以數(shù)字或符號代表事件的特性，即數(shù)值系統(tǒng)(numerical system)(3)依據(jù)指派規(guī)則賦予觀察對象一個(gè)符號或數(shù)字，此種規(guī)則就是操作型定義。*3測量資料尺度分類1.名義尺度：為標(biāo)示目的指定的數(shù)值，主要目的是分類。例如身分證號碼、性別，不同號碼沒有大小區(qū)分，不能做加

2、減。2.順序尺度：此尺度資料可表示事物間的等級或順序，但不能衡量不同等級間的距離。只有大小沒有距離，例如Likert五點(diǎn)計(jì)分量表所得數(shù)據(jù)，可能是分，亦可能是-2+2分，且假設(shè)54，但5-41。4數(shù)值系統(tǒng)可分四大類3.等距(區(qū)間)尺度：具有前兩者的資料的特性，可比大小亦可比差距。前後距離相等，但沒有倍數(shù)關(guān)係，所以沒有絕對的0(有距離，但沒有絕對的零點(diǎn))。例如5-4=1, 但422。4.比例尺度：具有前三者的資料特性，且可以做倍數(shù)比較。有距離，有絕對的零點(diǎn)。例如，4=22。比例尺度是最好的衡量尺度，其與等距尺度的區(qū)別在於比例尺度有絕對的原點(diǎn) 0。56.1.2 變數(shù)(variable)種類1.自變數(shù)

3、：在實(shí)驗(yàn)法中又稱因變數(shù)或?qū)嶒?yàn)變數(shù)，它是經(jīng)由實(shí)驗(yàn)者安排或操弄的變數(shù)。2.依變數(shù)：在實(shí)驗(yàn)法中又稱果變數(shù)或反應(yīng)變數(shù)，它是實(shí)驗(yàn)者企圖觀察測量的行為或反應(yīng)。3.外生(extraneous)變數(shù)：指自變數(shù)以外，但凡可能影響結(jié)果 (依變數(shù))之因素。64.中介變數(shù)：指介於自變數(shù)與依變數(shù)之間，但凡會對研究結(jié)果會產(chǎn)生作用的內(nèi)在歷程。通常是不能直接觀察辨認(rèn)的，只能憑個(gè)體外顯行為的線索來推知。*76.2 數(shù)值指派的規(guī)則數(shù)值指派規(guī)則牽涉到如何將測量結(jié)果(如a)推論到構(gòu)念(以A表示)，推論結(jié)果有四種情況：情況1：有信度，效度低情況2：有信度，有效度情況3：信度低，效度低情況4：無信度，無效度8三種無效度的推論：情況1：測

4、量結(jié)果a與b有關(guān)，但無法代表構(gòu)念A(yù),B情況2：測量結(jié)果a與b有關(guān)，但構(gòu)念A(yù),B不相關(guān)情況3：測量結(jié)果a與b無關(guān)，但構(gòu)念A(yù),B有關(guān)9測量誤差指真正差異以外任何引起測量分?jǐn)?shù)的差異。測量誤差(誤差分?jǐn)?shù))的來源有二大類：(1)系統(tǒng)性誤差：它會對測量結(jié)果產(chǎn)生一致性固定的影響；(2)隨機(jī)性誤差：主要是來自受訪者身心狀況(情緒、性格、動機(jī))、情境因素(噪音、太太在場、趕飛機(jī)、太熱)、及測量試題(內(nèi)容太長、太難)的干擾影響*10(1)系統(tǒng)性誤差系統(tǒng)性誤差(systematic errors)只要使用測量工具，它就會產(chǎn)生。系統(tǒng)性誤差對個(gè)案間及研究間的影響方式都是固定不變的。換言之，對一樣情境受訪者或不同情境受訪

5、者的同一位受訪者，均產(chǎn)生同樣的影響。*11(2)隨機(jī)性誤差每一次以不同方式來影響測量工具的使用。隨機(jī)性誤差(又稱非系統(tǒng)性誤差)之主要來源，可分成以下六種因素，這些因素是施測者無法控制的:*12隨機(jī)性誤差之主要來源(1)受測者因素:因受測者本身特質(zhì)(如隨和性)不同、當(dāng)時(shí)個(gè)人的情緒好壞，都會導(dǎo)致測量結(jié)果的不同。例如： 老大愛問：蕃茄為何有紅有綠？鵝為什麼叫聲大？岳母為什麼眼睛紅？ 老二愛答：蕃茄因?yàn)闀竦教?、鵝因?yàn)椴弊娱L、岳母沒睡好。 老三愛質(zhì)疑：胡蘿蔔也會曬到變紅、青蛙脖子短但叫聲也很大、母豬每天睡眼睛也會紅。13隨機(jī)性誤差之主要來源(2)情境因素：訪談時(shí)任何外力的影響(3)施測者因素：例如，訪

6、談?wù)叩慕忉?、重述、語氣、態(tài)度、肢體動作、草率的資料處理等。(4)量表使用方式：是由訪問員代填，還是受訪者親自填答。(5)資料的分析處理之影響。14隨機(jī)性誤差之主要來源(6)測量工具因素：量表的設(shè)計(jì)及形式，包括：(I)測量工具內(nèi)容：混淆(區(qū)別效度不佳)、語意不清(信度不佳)、編排不良(建構(gòu)效度不佳)等；(II)測量項(xiàng)目缺乏，未能涵蓋所欲測量的特性(即內(nèi)容效度不佳)、項(xiàng)目的篩選(III)有無引導(dǎo)作答的嫌疑等。*15測量工具好壞的評量準(zhǔn)則1.效度：該量表是否真能測量到我們欲衡量的特性(系統(tǒng)誤差小)。2.信度：該測量工具所衡量的結(jié)果是否具有穩(wěn)定性、一致性(隨機(jī)誤差小)。3.敏感度：事物起了變化，該測量

7、工具是否能顯現(xiàn)出差異。4.實(shí)用性：即考量該測量工具的經(jīng)濟(jì)性、便利性、可解釋性。*166.4 量表(scale)的設(shè)計(jì)所謂量表化(scaling)，它是一種測量的程序，旨在將衡量對象或欲衡量的特性(property)指派某些數(shù)值，以便將測量對象之特性數(shù)值化。衡量變數(shù)可用單一問項(xiàng)來量衡量構(gòu)念則要用量表來量。量表是用一個(gè)以上的指標(biāo)(indicant ,item, manifested)來測量某個(gè)體/事物的特性。176.5 量表設(shè)計(jì)的技術(shù)1.李克特量表：採評分加總之計(jì)分方式2.Thurstone量表：又稱共識量表3.語意差異量表：4.Guttman量表：採累計(jì)量表計(jì)分方式18李克特量表李克特(Like

8、rt)量表是屬評分加總式量表最常用的一種，屬同一構(gòu)念的這些項(xiàng)目是用加總方式來計(jì)分，單獨(dú)或個(gè)別項(xiàng)目是無意義的。評分加總式量表是對某一概念/構(gòu)念所設(shè)計(jì)的數(shù)個(gè)項(xiàng)目，測量每位受訪者對它們的態(tài)度反應(yīng)(同意程度)。每一個(gè)反應(yīng)都給一個(gè)數(shù)值，以代表受訪者對該項(xiàng)目的贊同程度，將每位受訪者在這些項(xiàng)目的得分加總，即是受訪者對該題的態(tài)度。*19李克特量表加總式量表有二個(gè)假說或特徵：(1)每一個(gè)態(tài)度項(xiàng)目都具有一樣量值，但項(xiàng)目之間則沒有差別量值。(2)對同一項(xiàng)目而言，受訪者的反應(yīng)程度是不同的(具有差別量值)。20Likert量表設(shè)計(jì)的步驟1.建立大量有關(guān)某一態(tài)度構(gòu)念之題庫，每一個(gè)敘述等於一個(gè)項(xiàng)目，並隨機(jī)式排列這些項(xiàng)目。2

9、.邀請一組樣本，請各受訪者對上述態(tài)度各項(xiàng)目表達(dá)立場(前測、預(yù)測)3.進(jìn)行項(xiàng)目分析:旨在對量表之題庫做篩選，它是假定每一項(xiàng)目都具有一樣的量值。項(xiàng)目的好壞是依據(jù)其是否具有區(qū)別力，以決定項(xiàng)目保存或刪除。21項(xiàng)目分析之方法1.相關(guān)分析法：計(jì)算每一項(xiàng)目與總分的積差相關(guān)(以符號Rti表示)，當(dāng)作該題的區(qū)別指數(shù)，區(qū)別指數(shù)偏低者，即表示該題未能區(qū)分受試者的反應(yīng)程度，沒有區(qū)別效果，可予剔除。2.內(nèi)部一致性效標(biāo)分析法：將所有受試者在預(yù)試量表得分的總和依上下分排序，前25%為高分組，後25%為低分組。爾後以高分組受試者在某一項(xiàng)目(題)得分之平均數(shù)減低分組受試者在同一題得分之平均數(shù)，其差即代表此題的鑑別力。(p136

10、)22Thurstone 量表是由一群專家依以下準(zhǔn)則篩選項(xiàng)目：主題之關(guān)聯(lián)性3.項(xiàng)目所表達(dá)之態(tài)度層次：Thurstone量表能否編製成功之關(guān)鍵點(diǎn)，是在編製過程。將專家意見(該題去留)不一致者的項(xiàng)目刪除。23語意差異量表 語意差異(量表瞭解受訪者對事物的認(rèn)知)是假設(shè)事物的意涵可能有多種層面，而這些特質(zhì)層面之空間，謂之語意空間，例如：好的 1 2 3 4 5 6 7 差的快的 1 2 3 4 5 6 7 慢的強(qiáng)的 1 2 3 4 5 6 7 弱的24語意差異量表之設(shè)計(jì)步驟1.先建立題庫(一組項(xiàng)目)，並對態(tài)度目標(biāo)物，就受訪者可能的反應(yīng)，選擇其兩極化的形容詞，來橫跨1至7之選答區(qū)，以便受訪者填答資料分析

11、，計(jì)算出每題(變數(shù))的平均數(shù)。3.依據(jù)項(xiàng)目順序，將每題(變數(shù))平均數(shù)集結(jié)起來，以形成整個(gè)量表之特徵輪廓(p142)25Guttman量表Guttman量表則可用來檢定具有不同強(qiáng)弱程度之一組項(xiàng)目是否都屬單一構(gòu)面(uni-dimension)，所謂單一構(gòu)面是指受訪者對項(xiàng)目所反應(yīng)的態(tài)度，均集中在某一方向上。例如，組織階層、社會差距、種族歧視、自主性(反權(quán)威、反傳統(tǒng)、開放性)等等。*26Guttman量表27Guttman量表編製步驟1.建立可用以測量某事實(shí)之具體句子或項(xiàng)目。前測，將被80%受訪者填答同意或不同意的項(xiàng)目刪除。後測。4.整理後測回收資料，將彙總後的數(shù)據(jù)代入CR公式，以求出複製係數(shù)，假設(shè)C

12、R值在0.8以上者，才可以說：這些強(qiáng)烈程度題確實(shí)屬於同一構(gòu)面 。286.6 效度信度過低，則沒有效度效度過低，則信度沒有意義。三種效度：內(nèi)容效度、效標(biāo)關(guān)聯(lián)效度、及建構(gòu)效度。*296.6.1 內(nèi)容效度1.抽樣效度：量表所包含的項(xiàng)目是否能代表母體構(gòu)念的項(xiàng)目。內(nèi)容效度的上下，端賴項(xiàng)目取樣代表性之大小而定。2.外表效度：是指量表項(xiàng)目和形式上，給人的主觀印象，假設(shè)該量表從外表來看，似乎確實(shí)可適切地測量其欲測的特質(zhì)或行為，便稱它具有外表效度。306.6.2 效標(biāo)關(guān)聯(lián)效度又稱實(shí)用效度或?qū)嵲^效度，意指這種效度應(yīng)建立在實(shí)証資料之上。效標(biāo)關(guān)聯(lián)效度並不涉及構(gòu)念的問題。依據(jù)效標(biāo)不同，效標(biāo)關(guān)聯(lián)效度可分為同時(shí)效標(biāo)及預(yù)測效

13、標(biāo)，兩者皆表示測量工具(分?jǐn)?shù))和效標(biāo)之間相關(guān)的程度。311.同時(shí)效標(biāo)：是指測量工具與效標(biāo)同時(shí)存在。例如，以口袋中零用錢(屬測量工具)衡量受訪者的所得(屬效標(biāo))上下，假設(shè)兩者相關(guān)很高，則同時(shí)效度高。 所謂效標(biāo)是用來顯示測量工具所欲測量(或預(yù)測)的特質(zhì)之獨(dú)立量數(shù)，以作為檢定效度的參考標(biāo)準(zhǔn)。326.6.2 效標(biāo)關(guān)聯(lián)效度2.預(yù)測效標(biāo)：是指測量工具出現(xiàn)在校標(biāo)之前。例如，研究者自編成就測驗(yàn)(量表)即可用預(yù)測兩年後研究生英文成績當(dāng)效標(biāo)，假設(shè)兩者相關(guān)很高，則表示該量表預(yù)測效標(biāo)高。336.6.3 建構(gòu)效度指量表能測量理論上某概念或特質(zhì)的程度，強(qiáng)調(diào)的是量表所衡量的是否能代表所要衡量的構(gòu)念。建構(gòu)效度有二類：收歛效度

14、及區(qū)別效度34收歛(convergent)效度收歛效度是指來自一樣構(gòu)念的這些項(xiàng)目，彼此之間相關(guān)性高。如假設(shè)要衡量一樣的東西(筆試、口試)，則所得分?jǐn)?shù)(結(jié)果)應(yīng)一樣(筆試與口試成績之相關(guān)要高)區(qū)別效度：是指來自不同構(gòu)念的項(xiàng)目，彼此之間相關(guān)性低。35效度之另種分類1.測量效度：即測量工具的效度，指量表的有效性2.設(shè)計(jì)效度：分內(nèi)部效度及外部效度，指所測量到的變數(shù)關(guān)係是否有效(不受外生變數(shù)影響)3.分析效度：統(tǒng)計(jì)分析所發(fā)現(xiàn)的結(jié)果。4.推論效度：又稱外部效度，指結(jié)果可推論到母群的程度366.6.6 影響效度的因素1.樣本性質(zhì)：樣本多樣性、代表性愈高，測量工具效度就愈高。2.測驗(yàn)信度：假設(shè)信度太低，則效度

15、亦低3.干擾變數(shù)：它是指存在於測驗(yàn)所欲測特質(zhì)及其效標(biāo)之外，但卻與兩者間具有某種相關(guān)程度的變數(shù)。例如，年齡層、性別、環(huán)境背景等。*376. 信度信度(reliability)是指一個(gè)測量工具包含變數(shù)誤差的程度。變數(shù)誤差即在任一次測量中，觀察值之間呈現(xiàn)之不一致、或採用一樣測量工具，然而對特定單位施測，每次所得結(jié)果都不同。信度是指測量資料的可靠性，即一個(gè)測量工具在測量的一致性或穩(wěn)定性*386.7.1 信度種類1.等值性信度：又稱複本法，專門為檢定同一測驗(yàn)中不同複本上分?jǐn)?shù)的一致。(1)複本信度：不同研究者運(yùn)用同一量表，對不同一批的樣本施測，結(jié)果的一致性。(2)折半係數(shù)：將同一量表項(xiàng)目內(nèi)容相似，分成兩半(單數(shù)題、雙數(shù)題)，計(jì)算各半測驗(yàn)的總分之相關(guān)。396.7.1 信度種類2.穩(wěn)定性信度：對同一批樣本，前後二期測兩次，假設(shè)兩者的相關(guān)愈高，則表示該測驗(yàn)的穩(wěn)定係數(shù)愈高。3.一致性信度：旨在檢定某量表在各種不同層面的一致性。例如，量表單獨(dú)項(xiàng)目與總分是否一致性等等。此種信度又可分成：折半信度