調(diào)查問卷的信度效度分析方法

..調(diào)查問卷的信度效度分析方法問卷調(diào)查法是教育研究中廣泛采用的一種調(diào)查方法,根據(jù)調(diào)查目的設(shè)計(jì)的調(diào)查問卷是問卷調(diào)查法獲取訊息的工具,其質(zhì)量高低對(duì)調(diào)查結(jié)果的真實(shí)性、適用性等具有決定性的作用。為了保證問卷具有較高的可靠性和有效性,在形成正式問卷之前,應(yīng)當(dāng)對(duì)問卷進(jìn)行試測,并對(duì)試測結(jié)果進(jìn)行信度和效度分析,根據(jù)分析結(jié)果篩選問卷題項(xiàng),調(diào)整問卷架構(gòu),從而提升問卷的信度和效度。信度和效度分析的方法包括邏輯分析和統(tǒng)計(jì)分析,本文主要討論后者。一、信度分析信度〔Reliability即可靠性,它是指采用同樣的方法對(duì)同一對(duì)象重復(fù)測量時(shí)所得結(jié)果的一致性程度。信度指標(biāo)多以相關(guān)系數(shù)來表示：大致可分為三類：穩(wěn)定系數(shù)〔跨時(shí)間的一致性、等值系數(shù)〔跨形式的一致性和內(nèi)在一致性系數(shù)〔跨項(xiàng)目的一致性。若以信度系數(shù)來表示信度的大小。信度系數(shù)越大,表示測量的可信程度越大。究竟信度系數(shù)要多少才算有高的信度。學(xué)者DeVellis<1991>認(rèn)為,0.60～0.65〔最好不要；0.65～0.70〔最小可接受值；0.70～0.80〔相當(dāng)好；0.80～0.90〔非常好。由此,一份信度系數(shù)好的量表或問卷,最好在0.80以上,0.70至0.80之間還算是可以接受的范圍；分量表最好在0.70以上,0.60至0.70之間可以接受。若分量表的內(nèi)部一致性系數(shù)在0.60以下或者總量表的信度系數(shù)在0.80以下,應(yīng)考慮重新修訂量表或增刪題項(xiàng)。信度分析的方法主要有以下四種︰1、重測信度法這一方法是用同樣的問卷對(duì)同一組被調(diào)查者間隔一定時(shí)間重復(fù)施測,計(jì)算兩次施測結(jié)果的相關(guān)系數(shù)。顯然,重測信度屬于穩(wěn)定系數(shù)。重測信度法特別適用于事實(shí)式問卷,如性別、出生年月等在兩次施測中不應(yīng)有任何差異,大多數(shù)被調(diào)查者的興趣、愛好、習(xí)慣等在短時(shí)間內(nèi)也不會(huì)有十分明顯的變化。如果沒有突發(fā)事件導(dǎo)致被調(diào)查者的態(tài)度、意見突變,這種方法也適用于態(tài)度、意見式問卷。由于重測信度法需要對(duì)同一樣本試測兩次,被調(diào)查者容易受到各種事件、活動(dòng)和他人的影響,而且間隔時(shí)間長短也有一定限制,因此在實(shí)施中有一定困難。2、復(fù)本信度法復(fù)本信度法是讓同一組被調(diào)查者一次填答兩份問卷復(fù)本,計(jì)算兩個(gè)復(fù)本的相關(guān)系數(shù)。復(fù)本信度屬于等值系數(shù)。復(fù)本信度法要求兩個(gè)復(fù)本除表述模式不同外,在內(nèi)容、格式、難度和對(duì)應(yīng)題項(xiàng)的提問方向等方面要完全一致,而在實(shí)際調(diào)查中,很難使調(diào)查問卷達(dá)到這種要求,因此采用這種方法者較少。3、折半信度法折半信度法是將調(diào)查項(xiàng)目分為兩半,計(jì)算兩半得分的相關(guān)系數(shù),進(jìn)而估計(jì)整個(gè)量表的信度。折半信度屬于內(nèi)在一致性系數(shù),測量的是兩半題項(xiàng)得分間的一致性。這種方法一般不適用于事實(shí)式問卷〔如年齡與性別無法相比,常用于態(tài)度、意見式問卷的信度分析。在問卷調(diào)查中,態(tài)度測量最常見的形式是5級(jí)李克特〔Likert量表。進(jìn)行折半信度分析時(shí),如果量表中含有反意題項(xiàng),應(yīng)先將反意題項(xiàng)的得分作逆向處理,以確保各題項(xiàng)得分方向的一致性,然后將全部題項(xiàng)按奇偶或前后分為盡可能相等的兩半,計(jì)算二者的相關(guān)系數(shù)〔rhh,即半個(gè)量表的信度系數(shù),最后用斯皮爾曼-布朗〔Spearman-Brown公式︰ru=2rhh/<1+rhh>求出整個(gè)量表的信度系數(shù)〔ru。4、α信度系數(shù)法HYPERLINKCronbachα信度系數(shù)是目前最常用的信度系數(shù),其公式為︰α=<n/n-1>*<1-<∑Si2>/ST2>其中,n為量表中題項(xiàng)的總數(shù),Si2為第i題得分的題內(nèi)方差,ST2為全部題項(xiàng)總得分的方差。從公式中可以看出,α系數(shù)評(píng)價(jià)的是量表中各題項(xiàng)得分間的一致性,屬于內(nèi)在一致性系數(shù)。這種方法適用于態(tài)度、意見式問卷〔量表的信度分析。二、效度分析效度〔Validity即有效性,它是指測量工具或手段能夠準(zhǔn)確測出所需測量的事物的程度。效度分為三種類型︰內(nèi)容效度〔FaceValidity>、準(zhǔn)則效度<CriterionValidity>和架構(gòu)效度ConstructValidity>。效度分析有多種方法,其測量結(jié)果反映效度的不同方面。常用于調(diào)查問卷效度分析的方法主要有以下幾種。1、單項(xiàng)與總和相關(guān)效度分析這種方法用于測量量表的內(nèi)容效度。內(nèi)容效度又稱表面效度或邏輯效度,它是指所設(shè)計(jì)的題項(xiàng)能否代表所要測量的內(nèi)容或主題。對(duì)內(nèi)容效度常采用邏輯分析與統(tǒng)計(jì)分析相結(jié)合的方法進(jìn)行評(píng)價(jià)。邏輯分析一般由研究者或?qū)＜以u(píng)判所選題項(xiàng)是否"看上去"符合測量的目的和要求。統(tǒng)計(jì)分析主要采用單項(xiàng)與總和相關(guān)分析法獲得評(píng)價(jià)結(jié)果,即計(jì)算每個(gè)題項(xiàng)得分與題項(xiàng)總分的相關(guān)系數(shù),根據(jù)相關(guān)是否顯著判斷是否有效。若量表中有反意題項(xiàng),應(yīng)將其逆向處理后再計(jì)算總分。2、準(zhǔn)則效度分析準(zhǔn)則效度又稱為效標(biāo)效度或預(yù)測效度。準(zhǔn)則效度分析是根據(jù)已經(jīng)得到確定的某種理論,選擇一種指標(biāo)或測量工具作為準(zhǔn)則〔效標(biāo),分析問卷題項(xiàng)與準(zhǔn)則的聯(lián)系,若二者相關(guān)顯著,或者問卷題項(xiàng)對(duì)準(zhǔn)則的不同取值、特性表現(xiàn)出顯著差異,則為有效的題項(xiàng)。評(píng)價(jià)準(zhǔn)則效度的方法是相關(guān)分析或差異顯著性檢驗(yàn)。在調(diào)查問卷的效度分析中,選擇一個(gè)合適的準(zhǔn)則往往十分困難,使這種方法的應(yīng)用受到一定限制。3、結(jié)構(gòu)效度分析結(jié)構(gòu)效度是指測量結(jié)果體現(xiàn)出來的某種結(jié)構(gòu)與測值之間的對(duì)應(yīng)程度。架構(gòu)效度分析所采用的方法是因子分析。有的學(xué)者認(rèn)為,效度分析最理想的方法是利用因子分析測量量表或整個(gè)問卷的架構(gòu)效度。因子分析的主要功能是從量表全部變量〔題項(xiàng)中提取一些公因子,各公因子分別與某一群特定變量高度關(guān)聯(lián),這些公因子即代表了量表的基本架構(gòu)。透過因子分析可以考察問卷是否能夠測量出研究者設(shè)計(jì)問卷時(shí)假設(shè)的某種架構(gòu)。在因子分析的結(jié)果中,用于評(píng)價(jià)架構(gòu)效度的主要指標(biāo)有累積貢獻(xiàn)率、共同度和因子負(fù)荷。累積貢獻(xiàn)率反映公因子對(duì)量表或問卷的累積有效程度,共同度反映由公因子解釋原變量的有效程度,因子負(fù)荷反映原變量與某個(gè)公因子的相關(guān)程度。為了提升調(diào)查問卷的質(zhì)量,進(jìn)而提升整個(gè)研究的價(jià)值,問卷的信度和效度分析絕非贅疣蛇足,而是研究過程中必不可少的重要環(huán)節(jié)。Cronbachα系數(shù)柯隆巴哈〔Cronbach1951提出計(jì)算一個(gè)測量系統(tǒng)〔問卷或測驗(yàn)的信度稱為Cronbachα系數(shù)〔簡稱α系數(shù),是目前社會(huì)科會(huì)研究最常使用的信度。當(dāng)一個(gè)研究主題〔或構(gòu)面由很多項(xiàng)目組合,每個(gè)問項(xiàng)都與主題相關(guān),由總分的變異數(shù)與問項(xiàng)的變異數(shù)做為評(píng)量信度的指標(biāo)即為α系數(shù)。01.Cronbachα系數(shù)的定義利用各問項(xiàng)變異數(shù)之和與整份量表分?jǐn)?shù)的變異數(shù)的比值,可用來估計(jì)一份量表的信度,柯隆巴哈〔Cronbach提出α系數(shù)為：此式為最常作為信度指標(biāo),其中s2i表示第i個(gè)問項(xiàng)xi的變異數(shù),s2H表所有問項(xiàng)總和〔H=x1+x2+...+xn的變異數(shù)〔即整份測驗(yàn)分?jǐn)?shù)的變異數(shù),n是問項(xiàng)個(gè)數(shù)。02.Cronbachα系數(shù)的實(shí)施技巧要做信度分析需先檢查每個(gè)問項(xiàng)是否都是同方向的〔即都是正面問法,也就是題間的相關(guān)系數(shù)都是正的,如有一題與其它題相關(guān)系數(shù)都是負(fù)的,應(yīng)考慮將此題先"變號(hào)"或"刪除"后再進(jìn)行計(jì)算α系數(shù)。如有受測者亂答,可將它的數(shù)據(jù)刪除后再算α值。對(duì)問卷調(diào)查當(dāng)有題目與其它題目是負(fù)相關(guān)時(shí)須注意是否反向問法。如是,則應(yīng)先將得分反向,再計(jì)算α信度或是刪除該題。若為測驗(yàn),則不能做反向處理,只能做刪除題目。03.標(biāo)準(zhǔn)化Cronbachα系數(shù)的定義若一份量表有n題,題間的平均相關(guān)系數(shù)為r,則此量表的標(biāo)準(zhǔn)化α系數(shù)為04.利用SPSS進(jìn)行信度分析在SPSS中,專門用來進(jìn)行測驗(yàn)信度分析的模塊為Scale下的ReliabilityAnalysis；使用DataReduction之下的Factor模塊。ReliabilityAnalysis模塊主要功能是檢驗(yàn)測驗(yàn)的信度,主要用來檢驗(yàn)折半信度、庫李及a系數(shù)以及Hoyt信度系數(shù)值。至于重測信度和復(fù)本信度,只需將樣本在二次〔份測驗(yàn)的分?jǐn)?shù)的數(shù)據(jù)合并到同一數(shù)據(jù)文件之后,利用Correlate之下的Bivariate求其相關(guān)系數(shù),即為重測或復(fù)本信度；而評(píng)分者信度則使用的Spearman等級(jí)相關(guān)及Kendall和諧系數(shù)。表1ReliabilityAnalysis模塊的Model選項(xiàng)的參數(shù)術(shù)語關(guān)鍵詞功能AlphaCronbacha系數(shù)Split-half折半信度,n是第二份量表的題數(shù)GuttmanGuttman最低下限真實(shí)信度法Parallel各題目變異數(shù)同質(zhì)時(shí)的最大概率〔maximum-likelihood信度Strictparallel各題目平均數(shù)與變異數(shù)均同質(zhì)時(shí)的最大概率信度表2ReliabilityAnalysis模塊的Statistics部分選項(xiàng)的參數(shù)術(shù)語關(guān)鍵詞功能FtestHoyt信度系數(shù)FriedmanChiFriedman等級(jí)變異數(shù)分析及Kendall和諧系數(shù)CochranChiCochran’sQ檢驗(yàn),適用于答案為二分〔如是非題的量表Hotelling’sTHotelling’sT2檢驗(yàn)Tukey’sTukey的可加性檢驗(yàn)Intraclass量表內(nèi)各題目平均數(shù)相關(guān)系數(shù)建議進(jìn)行因素分析之樣本數(shù)宜大于330份。論文：Afirstcourseinfactoranalysis出處：NewYork:AcademicPress,1973.Comrey,A.L.在因素分析前先以「KMO抽樣適合性衡量」<KaiserMeyerOlkin>和「巴列特球型檢定」<Bartlett’sTestofSphericity>,當(dāng)KMO值愈大時(shí),表示變項(xiàng)間的共同因素愈多,愈適合進(jìn)行因素分析,根據(jù)學(xué)者Kaiser<1974>觀點(diǎn),如果KMO的值小于0.5時(shí),較不宜進(jìn)行因素分析Kaiser,H.F."AnIndexofFactorialSimplicity,"Psychometrika<39>,1974,pp.31-36.KMO是做主成分分析的效度檢驗(yàn)指標(biāo)之一,以前的文獻(xiàn)中寫說,KMO在0.9以上,非常適合做因子分析；在之間,很適合；在之間,適合；在之間,尚可；在之間,表示很差；在0.5以下應(yīng)該放棄.量表題之處理量表題的運(yùn)用,通常是因?yàn)橛靡活}無法完整測量某一個(gè)變量,因而需要使用數(shù)道題目來表示一個(gè)變量,然而這些題目真的能有效并一致地指涉同一個(gè)變項(xiàng)嗎？這時(shí)我們便需要透過因素分析與信度分析來檢視量表的信、效度。因素分析量表題組是否具有效度,這組題目是否測量同一面向〔或同一因素,其能解釋的變異量又有多高,便需要靠因素分析來檢驗(yàn)。選擇分析、數(shù)據(jù)縮減下之因子。將量表題組〔請注意,只能同時(shí)放一組量表,如同儕關(guān)系量表,切勿將多組量表或所有的題目一起點(diǎn)選進(jìn)去點(diǎn)選至右邊之窗格。按下描述性統(tǒng)計(jì)量,勾選KMO與Bartlett球形檢定。萃取選擇「主成分」分析,并選擇「陡坡圖」。至選項(xiàng)內(nèi)勾選「依據(jù)因素負(fù)荷排序」。全都選完后,即可按下確定。KMO與Bartlett檢定,是在檢定量表題組之間的相關(guān)。Bartlett：量表題組是用來測量一個(gè)變項(xiàng),因此應(yīng)具有一定的相關(guān)程度,當(dāng)Bartlett檢定達(dá)顯著〔顯著性＝.000,即表示此題組具有共同之因素〔一或數(shù)個(gè)因素。KMO：然而題組間的相關(guān)程度若太高,則會(huì)造成多重共線性的問題,也就是說相關(guān)程度特別高的題目,事實(shí)上就是同一題拆成數(shù)題,如此便不符合設(shè)計(jì)量表題的原意,也會(huì)造成重復(fù)解釋、過度膨脹解釋力的后果,因此接著要看KMO取樣適切性量數(shù),KMO必須要在0.6以上,KMO越接近1,表示量表題目間的相關(guān)情形良好,越適合進(jìn)行因素分析。解說總變異量,在此會(huì)從題組中采用主成分分析法選擇出數(shù)個(gè)成分,并指出成分中的數(shù)個(gè)題目共同解釋的總變異量,通常以第一個(gè)成分之解釋變異量最高,如自右圖中所選出之第一個(gè)成分的題組,此一成分所能解釋的變異量為46.53％,而本次研究法報(bào)告亦以選取第一個(gè)成分之題組即可。因素陡坡圖,亦即解說總變異量中每一成分之總和的圖示。如第1到第2成分間之落差特別大,則表示第1成分內(nèi)有重要的因素,而第2至第3、第4...成分間之坡度十分平緩,表示第2～第6成份并未出現(xiàn)重要的因素,則不采用第2～第6成份之題目。從最后的成分矩陣中,SPSS只抽選出一個(gè)成分,以及每一道題目在此成分中的因素負(fù)荷量。因素負(fù)荷量越高,表示該題在此成分中的重要性越高若因素負(fù)荷量低于0.6,則此題〔如V47.6_1不被列入該成分中,因此,在做下一階段的信度分析時(shí),此題亦需被剔除。但下面仍將此題放入,看看該題信度分析之結(jié)果。信度分析具有信度〔Reliability的題目,必須具有穩(wěn)定性、一致性與精確性。至于量表是由「題組」所構(gòu)成,這些題目間的穩(wěn)定性、一致性與精確性,就必須用信度分析來檢測。自「分析」下的「量尺法」進(jìn)入信度分析的對(duì)話框。將一組量表題〔請注意,只能同時(shí)放一組量表,如同儕關(guān)系量表,切勿將多組量表或所有的題目一起點(diǎn)選進(jìn)去的題目自左邊點(diǎn)選至右邊的「項(xiàng)目」框內(nèi)。按下「統(tǒng)計(jì)量」,進(jìn)入另一個(gè)窗口,將左上角的描述性統(tǒng)計(jì)量對(duì)象的三個(gè)選項(xiàng)勾選起來。模式部分,請選取Alpha值〔即α值,即可按確定,讓SPSS自動(dòng)執(zhí)行信度分析。接下來出現(xiàn)的信度分析輸出檔,首先可以看到最下面出現(xiàn)的Alpha值,α值越高,表示此組量表的信度越高,各題之間也具有更高的一致性。α值若低于0.6,則此量表信度太低,不宜采用。若α值低時(shí),首先可以看AlphaifItemDeleted,這部分是指在這個(gè)量表題組中,若刪掉V47.1_1題,則此量表的α值將由0.7314降到0.6733,刪掉V47.6_1題〔亦即作因素分析后,被剔除的無效的題目,則量表的α值會(huì)提升至0.7946；因此,此一量表題組便需刪去V47.6_1題以提升信度,其它題目則要保留。若整體的α值都低于0.6時(shí),此時(shí)只能藉由修改題目內(nèi)容來提升其信度。在CorrectedItem-TotalCorrelation的部分看到的是這些題目之間的相關(guān)程度,其相關(guān)系數(shù)越高,表示該題和其它題目間的一致性越高,像V47.6_1,和其它題目間的相關(guān)系數(shù)低,因此和其它題目較不一致?？偠灾?一組量表的信度〔α值不得低于0.5,若太低