常用綜合評(píng)價(jià)方法7課件

1、常用綜合評(píng)價(jià)方法Synthetical Evaluation第1頁，共48頁。例如，某人英語考試成績58分是否對(duì)照某標(biāo)準(zhǔn)判斷此結(jié)果是否評(píng) 價(jià)（evaluation)僅是描述，反映現(xiàn)狀第2頁，共48頁。一、綜合評(píng)價(jià)方法的基本概念 綜合評(píng)價(jià)的問題:對(duì)被評(píng)價(jià)對(duì)象所進(jìn)行的客觀、公正、合理的全面評(píng)價(jià)。通常的綜合評(píng)價(jià)問題都是有若干個(gè)同類的被評(píng)價(jià)對(duì)象(或系統(tǒng))，每個(gè)被評(píng)價(jià)對(duì)象往往都涉及到多個(gè)屬性（或指標(biāo)）。 綜合評(píng)價(jià)的目的:根據(jù)系統(tǒng)的屬性判斷確定這些系統(tǒng)的運(yùn)行（或發(fā)展）狀況哪個(gè)優(yōu)，哪個(gè)劣，即按優(yōu)劣對(duì)各被評(píng)價(jià)對(duì)象進(jìn)排序或分類。這類問題又稱為多屬性（或多指標(biāo)）的綜合評(píng)價(jià)問題。 綜合評(píng)價(jià)的應(yīng)用:研究多目標(biāo)決策問題

2、的前提，因此研究解決這類問題在實(shí)際中是很有意義的，特別是在政治、經(jīng)濟(jì)、社會(huì)及軍事管理、工程技術(shù)及科學(xué)決策等領(lǐng)域都有重要的應(yīng)用價(jià)值。 第3頁，共48頁。 構(gòu)成綜合評(píng)價(jià)問題的五個(gè)要素分別為:被評(píng)價(jià)對(duì)象、評(píng)價(jià)指標(biāo)、權(quán)重系數(shù)、綜合評(píng)價(jià)模型和評(píng)價(jià)者。一、綜合評(píng)價(jià)方法的基本概念 1 構(gòu)成綜合評(píng)價(jià)問題的五個(gè)要素 第4頁，共48頁。1 構(gòu)成綜合評(píng)價(jià)問題的五個(gè)要素 （2）評(píng)價(jià)指標(biāo) 評(píng)價(jià)指標(biāo)是反映被評(píng)價(jià)對(duì)象(或系統(tǒng))的運(yùn)行(或發(fā)展)狀況的基本要素。通常的問題都是有多項(xiàng)指標(biāo)構(gòu)成，每一項(xiàng)指標(biāo)都是從不同的側(cè)面刻畫系統(tǒng)所具有某種特征大小的一個(gè)度量。 一個(gè)綜合評(píng)價(jià)問題的評(píng)價(jià)指標(biāo)一般可用一個(gè)向量表示，其中每一個(gè)分量就是從一個(gè)

3、側(cè)面反映系統(tǒng)的狀態(tài)，即稱為綜合評(píng)價(jià)的指標(biāo)體系。 第5頁，共48頁。 注意到:當(dāng)各被評(píng)價(jià)對(duì)象和評(píng)價(jià)指標(biāo)值都確定以后，問題的綜合評(píng)價(jià)結(jié)果就完全依賴于權(quán)重系數(shù)的取值了，即權(quán)重系數(shù)確定的合理與否，直接關(guān)系到綜合評(píng)價(jià)結(jié)果的可信度，甚至影響到最后決策的正確性。1 構(gòu)成綜合評(píng)價(jià)問題的五個(gè)要素 第6頁，共48頁。 （4）綜合評(píng)價(jià)模型 對(duì)于多指標(biāo)（或多因素）的綜合評(píng)價(jià)問題,就是要通過建立合適的綜合評(píng)價(jià)數(shù)學(xué)模型將多個(gè)評(píng)價(jià)指標(biāo)綜合成為一個(gè)整體的綜合評(píng)價(jià)指標(biāo)，作為綜合評(píng)價(jià)的依據(jù)，從而得到相應(yīng)的評(píng)價(jià)結(jié)果。第7頁，共48頁。 （5）評(píng)價(jià)者 評(píng)價(jià)者是直接參與評(píng)價(jià)的人，可以是某一個(gè)人，也可以是一個(gè)團(tuán)體。對(duì)于評(píng)價(jià)目的選擇、評(píng)價(jià)

4、指標(biāo)體系確定、評(píng)價(jià)模型的建立和權(quán)重系數(shù)的確定都與評(píng)價(jià)者有關(guān)。 1 構(gòu)成綜合評(píng)價(jià)問題的五個(gè)要素 返回第8頁，共48頁。2.1 綜合評(píng)價(jià)的一般步驟對(duì)某事件進(jìn)行多因素綜合評(píng)價(jià)的過程，實(shí)質(zhì)上就是科學(xué)研究與決策的過程，原則上應(yīng)包括設(shè)計(jì)、收集資料和分析資料幾個(gè)基本階段，實(shí)施中應(yīng)著重注意以下幾個(gè)基本環(huán)節(jié)。選擇恰當(dāng)?shù)脑u(píng)價(jià)指標(biāo)(evaluation indicator)確定各評(píng)價(jià)指標(biāo)權(quán)重合理確定各單個(gè)指標(biāo)的評(píng)價(jià)等級(jí)(evaluation grade)及其界限建立綜合評(píng)價(jià)模型(synthetical evaluation model)確定多指標(biāo)綜合評(píng)價(jià)的等級(jí)數(shù)量界限，并根據(jù)實(shí)踐對(duì)已建立模 型考察、修改及完善。研究

5、目的第9頁，共48頁。2.1例：學(xué)生綜合測(cè)評(píng)（綜合評(píng)分）評(píng)價(jià)指標(biāo)：德育總分、智育總分、體育 總分（加分：CET）權(quán)重： 方案1：德育0.3 智育0.6 體育0.1 方案2：德育0.1 智育0.8 體育0.1 方案3：德育0.3 智育0.6 體育0.1 加分評(píng)價(jià)模型：評(píng)分法、總分為100，加分不封頂，累加法。 評(píng)價(jià)結(jié)果: 學(xué)生甲：德育90 智育70 體育80 學(xué)生乙：德育70 智育80 體育70第10頁，共48頁。第11頁，共48頁。2.2 綜合評(píng)價(jià)一般步驟示例研制新生兒缺氧狀況的Apgar評(píng)分方法研究目的據(jù)專業(yè)知識(shí)，選擇5個(gè)指標(biāo) 心率 呼吸肌張力 反射 皮膚顏色 5個(gè)指標(biāo)具有相等權(quán)重選擇指標(biāo)確

6、定權(quán)重以累加法累計(jì)總分：810分為正常；47分為輕度缺氧；03分為重度缺氧。 確定指標(biāo)評(píng)價(jià)等級(jí)及界限建立模型第12頁，共48頁。3.1 評(píng)價(jià)指標(biāo)的基本要求基本要求 代表性：各層次指標(biāo)能最好地表達(dá)所代表的層次。 確定性：指指標(biāo)值確定，其高低在評(píng)價(jià)中有確切含義。 區(qū)別能力/ 靈敏性：即指標(biāo)值有一定的波動(dòng)范圍，而且其高低在評(píng)價(jià)中有確切的含義。 獨(dú)立性：即選入的指標(biāo)各有所用，相互不能替代。 選擇綜合評(píng)價(jià)指標(biāo)第13頁，共48頁。3.2 系統(tǒng)分析法及文獻(xiàn)資料分析優(yōu)選法篩選指標(biāo)缺乏有關(guān)歷史資料，或指標(biāo)難以數(shù)量化時(shí) 系統(tǒng)分析法(systematic analysis method)：是一種常用的憑經(jīng)驗(yàn)挑選指標(biāo)

7、的方法，首先將所有備選指標(biāo)按系統(tǒng)（或?qū)傩浴㈩悇e）劃分，再通過座談或填調(diào)查表的方法獲得對(duì)各指標(biāo)的專家評(píng)分，確定主次，再從各系統(tǒng)內(nèi)挑選主要的指標(biāo)作為評(píng)價(jià)指標(biāo)。 文獻(xiàn)資料分析優(yōu)選法：即全面查閱有關(guān)評(píng)價(jià)指標(biāo)設(shè)置的文獻(xiàn)資料，分析各指標(biāo)的優(yōu)缺點(diǎn)并加以取舍。 第14頁，共48頁。3.3 常用客觀篩選指標(biāo)方法逐個(gè)指標(biāo)進(jìn)行假設(shè)檢驗(yàn)的方法：是在掌握有關(guān)歷史資料基礎(chǔ)上，依照可能的評(píng)價(jià)結(jié)果將評(píng)價(jià)對(duì)象分組，并對(duì)各指標(biāo)進(jìn)行假設(shè)檢驗(yàn)，挑選有統(tǒng)計(jì)意義的指標(biāo)作為評(píng)價(jià)指標(biāo)。多元回歸與逐步回歸法：多元回歸分析挑選標(biāo)準(zhǔn)化偏回歸系數(shù)絕對(duì)值較大或偏回歸系數(shù)假設(shè)檢驗(yàn)有顯著性的指標(biāo)作為評(píng)價(jià)指標(biāo)；逐步回歸有自動(dòng)挑選主要影響指標(biāo)的功能，是目前最

8、常用的指標(biāo)挑選方法。指標(biāo)聚類法：在存在眾多指標(biāo)的情況下，可將相似指標(biāo)聚成類，再從每類中找一個(gè)典型指標(biāo)作為代表，從而用少量幾個(gè)典型指標(biāo)作為評(píng)價(jià)指標(biāo)來代表原來眾多的指標(biāo)建立評(píng)價(jià)模型。第15頁，共48頁。3.5 評(píng)價(jià)指標(biāo)的權(quán)重估計(jì) 確定指標(biāo)權(quán)重方法主觀定權(quán)法客觀定權(quán)法專家評(píng)分法成對(duì)比較法Saaty權(quán)重法秩和比法相關(guān)系數(shù)法其它方法模糊定權(quán)法熵權(quán)法 定權(quán)帶有一定的主觀性，用不同方法確定的權(quán)重分配，可能不盡一致，這將導(dǎo)致權(quán)重分配的不確定性，最終可能導(dǎo)致評(píng)價(jià)結(jié)果的不確定性。因而在實(shí)際工作中，不論用哪種方法確定權(quán)重分配，都應(yīng)當(dāng)依賴于較為合理的專業(yè)解釋。 第16頁，共48頁。3.6 專家評(píng)分法評(píng)分方式1）專家個(gè)

9、人判斷 即分別征求專家個(gè)人意見，在專家各自單獨(dú)給評(píng)價(jià)指標(biāo)的相對(duì)重要性打分的基礎(chǔ)上，進(jìn)行統(tǒng)計(jì)處理，以確定各指標(biāo)的權(quán)重。 優(yōu)點(diǎn)：專家打分時(shí)不受外界影響，沒有心理壓力，可以最大限度地發(fā)揮個(gè)人創(chuàng)造能力。 缺點(diǎn)：僅憑個(gè)人判斷，易受專家知識(shí)深度與廣度的影響，難免帶有片面性。 2）專家會(huì)議 即召開所有被挑選專家，以集體討論的方式進(jìn)行評(píng)分，然后再以統(tǒng)計(jì)手段確定各指標(biāo)的權(quán)重。 優(yōu)點(diǎn)：可以交換意見，相互啟發(fā)，彌補(bǔ)個(gè)人之不足。 缺點(diǎn)：主要表現(xiàn)在易受心理因素的影響，如屈從于權(quán)威和大多數(shù)人的意見，受勸說性意見的影響，不愿公開修正已發(fā)表的意見等等。第17頁，共48頁。6個(gè)專家對(duì)4個(gè)評(píng)價(jià)指標(biāo)的重要性評(píng)價(jià)結(jié)果得分不考慮專家權(quán)

10、威程度：權(quán)重分別是0.41,0.31,0.18,0.10第18頁，共48頁。3.7 常用的客觀定權(quán)方法某些統(tǒng)計(jì)方法分析結(jié)果，可提供有關(guān)因素權(quán)重分配的客觀信息:多元回歸分析及逐步回歸分析中，各自變量的標(biāo)準(zhǔn)化偏回歸系數(shù)值以及由此而推算的貢獻(xiàn)率；計(jì)數(shù)資料判別分析中的指數(shù)，計(jì)量資料判別分析中各因子的貢獻(xiàn)率；主成分分析中得到的因子載荷和貢獻(xiàn)率。某些特定的統(tǒng)計(jì)方法 例如去某死因后期望壽命的增量、減壽年數(shù)(Potential Years of Life Lost,PYLL)都可為各死因的相對(duì)重要性提供有關(guān)權(quán)重分配的信息獻(xiàn)率。 第19頁，共48頁。3.8 組合權(quán)重及其計(jì)算方法組合權(quán)重(combined wei

11、ght) 當(dāng)評(píng)價(jià)指標(biāo)可分層時(shí)，即某項(xiàng)或某幾項(xiàng)評(píng)價(jià)指標(biāo)可再分為次級(jí)評(píng)價(jià)指標(biāo)時(shí)，則次級(jí)評(píng)價(jià)指標(biāo)的權(quán)重既應(yīng)考慮其本身在所有次級(jí)評(píng)價(jià)指標(biāo)中的權(quán)重分配，又要考慮其高層評(píng)價(jià)指標(biāo)在所有評(píng)價(jià)指標(biāo)中的權(quán)重分配。組合權(quán)重有兩種求法：代數(shù)和法 乘積法 第20頁，共48頁。組合權(quán)重計(jì)算表第21頁，共48頁。幾種常用綜合評(píng)價(jià)方法現(xiàn)有的統(tǒng)計(jì)方法： 主要為多元統(tǒng)計(jì)方法，如多元回歸、逐步回歸分析、判別分析、因子分析、時(shí)間序列分析等。模糊多元分析方法：由模糊數(shù)學(xué)發(fā)展而來，包括模糊聚類、模糊判別、模糊綜合評(píng)價(jià)等方法。3簡易方法：主要包括綜合評(píng)分法、綜合指數(shù)法、層次分析法、Topsis法、秩和比法等。 特點(diǎn)：簡單實(shí)用；適用于各種資

12、料；存在一定的局限性。第22頁，共48頁。4.1 層次分析法概念 層次分析法(Analytic Hierarchy Process,簡稱AHP)：由美國科學(xué)家T.L.Saaty于20世紀(jì)70年代提出,是用系統(tǒng)分析的方法，對(duì)評(píng)價(jià)對(duì)象依評(píng)價(jià)目的所確定的總評(píng)價(jià)目標(biāo)進(jìn)行連續(xù)性分解,得到各級(jí)（各層）評(píng)價(jià)目標(biāo)，并以最下層指標(biāo)作為衡量目標(biāo)達(dá)到程度的評(píng)價(jià)指標(biāo)。然后依據(jù)這些指標(biāo)計(jì)算出一綜合評(píng)分指數(shù)對(duì)評(píng)價(jià)對(duì)象的總評(píng)價(jià)目標(biāo)進(jìn)行評(píng)價(jià)，依其大小來確定評(píng)價(jià)對(duì)象的優(yōu)劣等級(jí)。第23頁，共48頁。4.2 層次分析法示例例4：擬采用層次分析法建立一個(gè)評(píng)價(jià)綜合醫(yī)院工作質(zhì)量的綜合指標(biāo)，并采用該指標(biāo)對(duì)某市6所綜合醫(yī)院的工作質(zhì)量進(jìn)行綜合

13、評(píng)價(jià)。醫(yī)院工作質(zhì)量綜合評(píng)價(jià)的基本步驟： 1）對(duì)總評(píng)價(jià)目標(biāo)進(jìn)行連續(xù)性分解以得到不同層次的評(píng)價(jià)目標(biāo)，將各層評(píng)價(jià)目標(biāo)用圖有機(jī)地標(biāo)示出來，即建立目標(biāo)樹圖，見圖1。 第24頁，共48頁。4.3 建立目標(biāo)圖第25頁，共48頁。4.4 計(jì)算權(quán)重系數(shù)2) 對(duì)目標(biāo)樹自上而下分層次一一對(duì)比打分，建立成對(duì)比較判斷優(yōu)選矩陣。各層評(píng)分標(biāo)準(zhǔn)見表3,表4為第一層子目標(biāo)成對(duì)比較判斷優(yōu)選矩陣。表3 目標(biāo)樹圖各層次評(píng)分標(biāo)準(zhǔn) 對(duì)比打分 相對(duì)重要程度 說 明1同等重要 兩者對(duì)目標(biāo)的貢獻(xiàn)相同3略為重要 根據(jù)經(jīng)驗(yàn)一個(gè)比另一個(gè)評(píng)價(jià)稍有利5基本重要 根據(jù)經(jīng)驗(yàn)一個(gè)比另一個(gè)評(píng)價(jià)更為有利7確實(shí)重要 一個(gè)比另一個(gè)評(píng)價(jià)更有利，且在實(shí)踐中證明9絕對(duì)重要

14、 重要程度明顯兩相鄰程度的中間值 需要折衷時(shí)采用表4 第一層子目標(biāo)成對(duì)比較判斷優(yōu)選矩陣 醫(yī)療工作護(hù)理工作膳食供應(yīng)醫(yī)療工作1(a11)3(a12)5(a13)護(hù)理工作1/3(a12)1(a22)3(a23)膳食供應(yīng)1/5(a13)1/3(a23)1(a33)第26頁，共48頁。4.4 計(jì)算權(quán)重系數(shù)(續(xù)1)(2)按公式 計(jì)算初始權(quán)重系數(shù) 得(3)按公式 計(jì)算歸一化權(quán)重系數(shù) 得 用同樣方法可獲得其他分層中各項(xiàng)目指標(biāo)的權(quán)重系數(shù)，現(xiàn)以醫(yī)療工作一項(xiàng)為例說明，見表5。第27頁，共48頁。4.4 計(jì)算權(quán)重系數(shù)(續(xù)2)表5 醫(yī)療工作第二層、第三層子目標(biāo)權(quán)重系數(shù) 層 次評(píng)價(jià)目標(biāo)及權(quán)重系數(shù) 第二層醫(yī)療制度醫(yī)療質(zhì)量病

15、床使用0.16340.53960.2970第三層療 效重癥收容0.66700.3330(4)計(jì)算各個(gè)評(píng)價(jià)指標(biāo)的組合權(quán)重系數(shù)，見圖2。 膳食供應(yīng)優(yōu)良率的組合權(quán)重系數(shù) C1=0.1047 護(hù)理制度優(yōu)良執(zhí)行率的組合權(quán)重系數(shù)C2=0.2583 治療有效率的組合權(quán)重系數(shù) C6=0.2292第28頁，共48頁。4.4 計(jì)算權(quán)重系數(shù)(續(xù)3)圖2 乘積法求各層次評(píng)價(jià)指標(biāo)的組合權(quán)重 第29頁，共48頁。4.5 求綜合評(píng)分指數(shù)(5)對(duì)評(píng)價(jià)對(duì)象的總評(píng)價(jià)目標(biāo)進(jìn)行綜合評(píng)估。綜合評(píng)分指數(shù)GI的計(jì)算公式如下： 其中Pi為第i個(gè)評(píng)價(jià)指標(biāo)的測(cè)量值，為評(píng)價(jià)指標(biāo)的個(gè)數(shù)。 例4 某市有6所綜合醫(yī)院，試對(duì)其醫(yī)院工作質(zhì)量進(jìn)行綜合評(píng)價(jià),醫(yī)

16、院的6項(xiàng)評(píng)價(jià)指標(biāo)分別為病床使用率(P1) 95%，治療有效率( P2) 88.1%，重癥收容率(P3) 15.4%，醫(yī)療制度執(zhí)行優(yōu)良率(P4) 74.7%，護(hù)理制度執(zhí)行優(yōu)良率(P5) 54.7%，膳食供應(yīng)優(yōu)良率(P6) 41.3%,其綜合評(píng)分指數(shù)為： 其他醫(yī)院綜合評(píng)分指數(shù)GI的計(jì)算結(jié)果見表6。 第30頁，共48頁。4.5 求綜合評(píng)分指數(shù)(續(xù)1）由表6工作質(zhì)量順位可見，A醫(yī)院工作質(zhì)量最佳，D醫(yī)院工作質(zhì)量最差。表6 某市6所醫(yī)院工作質(zhì)量的綜合評(píng)價(jià)表 評(píng)價(jià)指標(biāo) 組合權(quán)重 醫(yī) 院 ABCDEF病床使用率0.189295.092.094.895.689.177.4治療有效率0.229288.191.29

17、0.094.093.692.2重癥收容率0.114515.48.37.93.19.53.7醫(yī)療制度執(zhí)行優(yōu)良率0.104174.753.461.950.061.967.1護(hù)理制度執(zhí)行優(yōu)良率0.258354.720.726.120.027.435.5膳食供應(yīng)優(yōu)良率0.104741.341.422.820.034.030.3綜合評(píng)分指數(shù)66.254.555.052.556.555.5工作質(zhì)量順位154623第31頁，共48頁。4.6 層次分析法評(píng)價(jià)1、應(yīng)用層次分析法時(shí)，注意在計(jì)算歸一化權(quán)重系數(shù)后，應(yīng)檢驗(yàn)所計(jì)算得出的權(quán)重系數(shù)是否符合邏輯。通常用一致性指標(biāo)檢驗(yàn)該項(xiàng)目的相對(duì)優(yōu)先順序有無邏輯混亂，一般認(rèn)為，

18、當(dāng)CI0.10時(shí)，可能無邏輯混亂，即計(jì)算得的各項(xiàng)權(quán)重可以接受。 按下述公式可計(jì)算 一致性指標(biāo) ： 其中m為受檢驗(yàn)層次的子目標(biāo)數(shù)， 為最大特征根, 為該層子目標(biāo)成對(duì)比較判斷優(yōu)選矩陣的特征根。第32頁，共48頁。4.6 層次分析法評(píng)價(jià)（續(xù)1） 2、為了度量不同階判斷矩陣是否具有滿意的一致性，我們還需引入判斷矩陣的平均隨機(jī)一致性指標(biāo)值。對(duì)于1，2階判斷矩陣，只是形式上的，因?yàn)?，2階判斷矩陣總具有完全一致性。當(dāng)階數(shù)大于2時(shí)，判斷矩陣一致性指標(biāo)與同階平均隨機(jī)一致性指標(biāo)之比稱為隨機(jī)一致性比率，記為CR，其計(jì)算公式為：如本例第一層：第33頁，共48頁。4.6 層次分析法評(píng)價(jià)（續(xù)2）對(duì)于19階判斷矩陣，RI值見表7。表 7 19階平均隨機(jī)一致性指標(biāo)的取值 階數(shù) 123456789RI0.000.000.580.901.121.241.321.411.45 當(dāng)CR0.10時(shí)，即認(rèn)為判斷矩陣具有滿意的一致性，否則就需要調(diào)整判斷矩陣，并使之具有滿意的一致性。以本例第一層為例： 認(rèn)為第一層子目標(biāo)各項(xiàng)權(quán)重判斷無邏輯錯(cuò)誤。依此類推，運(yùn)用此法逐步檢測(cè)每一層子目標(biāo)權(quán)重系數(shù)，判斷它們是否都合乎邏輯。第34頁，共48頁。 線性加權(quán)綜合法的適用條件:各評(píng)價(jià)指標(biāo)之間相互獨(dú)立。 對(duì)于不完全獨(dú)立的情況采用該方法，其結(jié)果將導(dǎo)致各指標(biāo)間信息的重復(fù)，使得評(píng)價(jià)結(jié)