醫(yī)學(xué)科研評(píng)價(jià)指標(biāo)體系研究

醫(yī)學(xué)科研評(píng)價(jià)指標(biāo)體系研究

科研評(píng)估是全世界最常見(jiàn)的科學(xué)研究管理方法之一。隨著我國(guó)科研體制改革的日益深化,科研基金制度的逐步建立和完善,建立科研評(píng)價(jià)制度,制定科學(xué)、合理的科研評(píng)價(jià)方法已經(jīng)成為我國(guó)科研管理工作的重要內(nèi)容之一?？蒲性u(píng)價(jià)指標(biāo)體系已被采用并受到廣泛重視。本文就醫(yī)學(xué)科研評(píng)價(jià)指標(biāo)體系的研究綜述如下。1評(píng)價(jià)指標(biāo)體系的功能指標(biāo)是反映變化的參數(shù),是具體化可測(cè)量的目標(biāo),一系列系統(tǒng)化了的指標(biāo)集合稱(chēng)為指標(biāo)體系。評(píng)價(jià)是評(píng)價(jià)主體對(duì)評(píng)價(jià)對(duì)象進(jìn)行價(jià)值判斷的過(guò)程,價(jià)值往往體現(xiàn)在標(biāo)準(zhǔn)(評(píng)價(jià)目標(biāo))上,進(jìn)而又體現(xiàn)在一組具體的指標(biāo)體系上。建立指標(biāo)體系就是將價(jià)值標(biāo)準(zhǔn)轉(zhuǎn)化為指標(biāo)體系的過(guò)程。評(píng)價(jià)指標(biāo)體系就是由若干個(gè)指標(biāo)組成的整體,通過(guò)各項(xiàng)指標(biāo)之間的有機(jī)聯(lián)系(橫向結(jié)構(gòu)、層次結(jié)構(gòu))和合理的數(shù)量關(guān)系,體現(xiàn)事物的不同側(cè)面、不同部分、不同層次及相互邏輯關(guān)系。評(píng)價(jià)指標(biāo)體系的功能:(1)導(dǎo)向功能。由于評(píng)價(jià)主體對(duì)評(píng)價(jià)客體有較強(qiáng)的引導(dǎo)、制約作用,有什么樣的評(píng)價(jià)標(biāo)準(zhǔn),評(píng)價(jià)客體就會(huì)朝什么樣的方向努力。這種評(píng)價(jià)指標(biāo)體系對(duì)科研工作的導(dǎo)向作用,可形象地稱(chēng)為“指揮棒”的作用。(2)鑒定選優(yōu)功能。應(yīng)用評(píng)價(jià)指標(biāo)體系,可以鑒定申報(bào)課題是否合格,并區(qū)分其水平的高低,以確定予以資助的優(yōu)秀課題。(3)督促激勵(lì)與自律功能。項(xiàng)目管理主體應(yīng)用指標(biāo)體系進(jìn)行目標(biāo)評(píng)價(jià)和過(guò)程評(píng)價(jià),督促進(jìn)展較差的項(xiàng)目及時(shí)采取措施、改進(jìn)工作,同時(shí)激勵(lì)開(kāi)展較好的項(xiàng)目;項(xiàng)目執(zhí)行主體應(yīng)用指標(biāo)體系可以自我評(píng)價(jià),發(fā)現(xiàn)薄弱環(huán)節(jié),提高項(xiàng)目質(zhì)量。評(píng)價(jià)指標(biāo)體系可以促進(jìn)預(yù)期成果在“過(guò)程”中“優(yōu)育”。(4)診斷功能。項(xiàng)目管理主體應(yīng)用指標(biāo)體系,及時(shí)、動(dòng)態(tài)地收集、分析科研項(xiàng)目的信息,可以判斷項(xiàng)目產(chǎn)生問(wèn)題的原因,為決策提供科學(xué)依據(jù)。(5)預(yù)警功能。項(xiàng)目實(shí)施過(guò)程評(píng)價(jià)指標(biāo)體系可用于項(xiàng)目預(yù)警,依據(jù)既定的警限值分別發(fā)出不同級(jí)別的警報(bào),或提示項(xiàng)目應(yīng)該進(jìn)行實(shí)施過(guò)程決策,或提示項(xiàng)目必須立即進(jìn)行決策,以確定是否調(diào)整研究目標(biāo)或中止研究。2科研評(píng)價(jià)的對(duì)象科研評(píng)價(jià)是對(duì)一個(gè)多層次、復(fù)雜的科學(xué)研究系統(tǒng)的某種科研活動(dòng),達(dá)到科研目標(biāo)程度的價(jià)值或績(jī)效進(jìn)行評(píng)判、估量的過(guò)程。因此,科研評(píng)價(jià)的對(duì)象包括所有的科研活動(dòng)或科研現(xiàn)象。評(píng)價(jià)指標(biāo)體系作為科研評(píng)價(jià)的方法和工具,其研究對(duì)象涵蓋科研項(xiàng)目、科研機(jī)構(gòu)和科研人員等科研活動(dòng)的諸多方面,這與我國(guó)科研評(píng)價(jià)的目的和“出人才、出成果、出效益”的目標(biāo)是一致的。3中國(guó)醫(yī)學(xué)科研評(píng)估體系的形成目前,我國(guó)的醫(yī)學(xué)科研評(píng)價(jià)研究已廣泛采用了評(píng)價(jià)指標(biāo)體系,其較為科學(xué)、公正的特點(diǎn)已得到一致公認(rèn)。3.1科學(xué)評(píng)價(jià)指標(biāo)體系的研究3.1.1指標(biāo)篩選及聚類(lèi)分析張明等綜合應(yīng)用專(zhuān)家咨詢(xún)法和層次分析法,建立了醫(yī)學(xué)科研項(xiàng)目立項(xiàng)評(píng)價(jià)指標(biāo)體系,并對(duì)86項(xiàng)課題的綜合評(píng)價(jià)得分和科研成果得分進(jìn)行直線相關(guān)分析,結(jié)果顯示兩者有非常顯著的正相關(guān)。該研究針對(duì)第一層指標(biāo)在三大類(lèi)型科研中具有不同相對(duì)重要程度的特點(diǎn),分別構(gòu)造了三組不同的權(quán)重系數(shù)。齊松仁等應(yīng)用判別分析提出課題立項(xiàng)評(píng)估篩選的四項(xiàng)關(guān)鍵指標(biāo),并對(duì)院級(jí)課題比較四項(xiàng)指標(biāo)的篩選結(jié)果與專(zhuān)家評(píng)估結(jié)果,顯示了該四項(xiàng)指標(biāo)具有較高的靈敏度和特異度。劉興太等建立了“科研課題立項(xiàng)評(píng)價(jià)指標(biāo)體系”,由專(zhuān)家依據(jù)該指標(biāo)體系對(duì)課題立項(xiàng)進(jìn)行定量評(píng)分,對(duì)180份評(píng)分結(jié)果進(jìn)行聚類(lèi)分析,結(jié)果顯示某些二級(jí)指標(biāo)的歸類(lèi)不符合實(shí)際評(píng)價(jià)結(jié)果,提示聚類(lèi)分析法可以科學(xué)、合理地歸類(lèi)指標(biāo);其隨后應(yīng)用該指標(biāo)體系篩檢申報(bào)課題,結(jié)果顯示申報(bào)課題的資助率以及論文、成果的產(chǎn)出有明顯提高,說(shuō)明該指標(biāo)體系能選出較高質(zhì)量課題。林端宜等采用層次分析法建立了中醫(yī)藥科研項(xiàng)目立項(xiàng)評(píng)價(jià)指標(biāo)體系,并應(yīng)用指標(biāo)體系對(duì)申請(qǐng)國(guó)家中醫(yī)藥管理局科研基金的課題進(jìn)行了試評(píng)估,所得結(jié)果與實(shí)際中標(biāo)情況基本相符。3.1.2對(duì)研究科研項(xiàng)目的評(píng)價(jià)結(jié)果陳光偉等采用典型案例調(diào)查法和專(zhuān)家咨詢(xún)法,建立了科研項(xiàng)目實(shí)施過(guò)程質(zhì)量評(píng)價(jià)指標(biāo)體系和評(píng)價(jià)模型,對(duì)48個(gè)科研項(xiàng)目的評(píng)價(jià)結(jié)果顯示,該評(píng)價(jià)指標(biāo)體系及模型有效。李俊勇等應(yīng)用Delphi法,建立了一套適用于應(yīng)用基礎(chǔ)研究類(lèi)型的醫(yī)學(xué)科研項(xiàng)目的全程評(píng)價(jià)指標(biāo)體系,并應(yīng)用該指標(biāo)體系的實(shí)施過(guò)程評(píng)價(jià)指標(biāo)對(duì)在研項(xiàng)目進(jìn)行了評(píng)價(jià),結(jié)果表明實(shí)施過(guò)程評(píng)價(jià)指標(biāo)有效、可行。3.1.3醫(yī)學(xué)科技成果評(píng)價(jià)應(yīng)用自80年代開(kāi)始,多位學(xué)者對(duì)科技成果的綜合評(píng)價(jià)指標(biāo)體系進(jìn)行了探索性研究,對(duì)評(píng)價(jià)方法的研究也趨于系統(tǒng)化。李芳等以3套(科研項(xiàng)目、技術(shù)鑒定、成果評(píng)獎(jiǎng))4類(lèi)(每套分基礎(chǔ)文獻(xiàn)、臨床、開(kāi)發(fā)、軟科學(xué))3級(jí)(每類(lèi)分目標(biāo)、準(zhǔn)則、評(píng)價(jià)指標(biāo))5等(每級(jí)5個(gè)等級(jí))組成綜合評(píng)價(jià)指標(biāo)體系,并建立了由綜合評(píng)價(jià)指標(biāo)體系、綜合評(píng)價(jià)數(shù)據(jù)處理和科研項(xiàng)目、技術(shù)鑒定、成果評(píng)獎(jiǎng)3部分組成的科技成果綜合評(píng)價(jià)方法。李海燕等應(yīng)用Delphi法建立了適合于軍民兩用的醫(yī)學(xué)科技成果評(píng)價(jià)指標(biāo)體系,初步應(yīng)用的結(jié)果表明,該指標(biāo)體系可用于醫(yī)學(xué)科技成果評(píng)價(jià)。該研究分別對(duì)應(yīng)用研究成果和理論研究成果設(shè)置權(quán)重,使兩種成果的評(píng)價(jià)更具科學(xué)性。張明等從科研投入-產(chǎn)出系統(tǒng)分析出發(fā),提出了一種較為科學(xué)與適用的科研效績(jī)?cè)u(píng)價(jià)指標(biāo)及其計(jì)算方法、人力與產(chǎn)出結(jié)構(gòu)分析方法。齊松仁等運(yùn)用成本—效果分析方法,采用Delphi法建立投入產(chǎn)出比的量化指標(biāo)體系,對(duì)已結(jié)題的45項(xiàng)課題評(píng)價(jià)的結(jié)果顯示,科研投入產(chǎn)出效益評(píng)價(jià)指標(biāo)體系具有科學(xué)性、可行性。王偉成綜合運(yùn)用專(zhuān)家咨詢(xún)法、指標(biāo)聚類(lèi)法和變異系數(shù)法,建立了一套醫(yī)學(xué)科研投入產(chǎn)出評(píng)價(jià)指標(biāo)體系和醫(yī)學(xué)科研課題質(zhì)量二級(jí)判別模型,并對(duì)福建醫(yī)科大學(xué)10年間結(jié)研課題質(zhì)量進(jìn)行綜合評(píng)價(jià),比較分析了各種統(tǒng)計(jì)學(xué)方法的適用性。唐玉平等應(yīng)用專(zhuān)家會(huì)議法建立了科研項(xiàng)目投入產(chǎn)出指標(biāo)體系,對(duì)北京市1988—1998年間預(yù)防醫(yī)學(xué)領(lǐng)域的科研項(xiàng)目進(jìn)行了綜合評(píng)估,并對(duì)科研課題產(chǎn)出的各種影響因素進(jìn)行了分析研究。3.1.4評(píng)價(jià)體系的使用李俊勇等應(yīng)用Delphi法建立了“醫(yī)學(xué)科研項(xiàng)目全程評(píng)價(jià)指標(biāo)體系”,該指標(biāo)體系既可對(duì)應(yīng)用基礎(chǔ)研究類(lèi)型醫(yī)學(xué)科研項(xiàng)目進(jìn)行全過(guò)程評(píng)價(jià),也可在項(xiàng)目不同階段獨(dú)立應(yīng)用,實(shí)施過(guò)程和產(chǎn)出指標(biāo)還可反復(fù)使用;該指標(biāo)體系可評(píng)價(jià)不同項(xiàng)目的同一階段(橫向比較)或同一項(xiàng)目的不同階段(縱向比較);項(xiàng)目管理主體和項(xiàng)目執(zhí)行主體均可應(yīng)用。楊一風(fēng)等運(yùn)用系統(tǒng)理論、專(zhuān)家咨詢(xún)、層次分析等方法,建立了一套適合軍隊(duì)醫(yī)學(xué)科研特點(diǎn)的科研課題評(píng)價(jià)指標(biāo)體系,該指標(biāo)體系能對(duì)不同階段(開(kāi)題、中期、結(jié)題)的課題進(jìn)行關(guān)鍵點(diǎn)評(píng)價(jià)。3.2基于質(zhì)量評(píng)估的科研績(jī)效評(píng)估1986—1990年,衛(wèi)生部科技司、中國(guó)醫(yī)科大學(xué)和同濟(jì)醫(yī)科大學(xué)開(kāi)展了“醫(yī)學(xué)科研機(jī)構(gòu)科研能力評(píng)估的研究”。該研究應(yīng)用了定性研究與定量研究相結(jié)合的研究方法,采用多種數(shù)理統(tǒng)計(jì)方法篩選評(píng)價(jià)指標(biāo)、確定指標(biāo)權(quán)重,建立了一套符合我國(guó)國(guó)情的比較科學(xué)的評(píng)估方法和評(píng)估指標(biāo)體系,并應(yīng)用該指標(biāo)體系首次對(duì)我國(guó)505所省級(jí)以上科研機(jī)構(gòu)的科研能力進(jìn)行了綜合評(píng)價(jià)。王文正等篩選出科研管理、科研條件、科研課題、科研效率、科研成果五大指標(biāo)和38個(gè)因素,并應(yīng)用指標(biāo)體系評(píng)估了全省醫(yī)藥衛(wèi)生科研機(jī)構(gòu)的績(jī)效,較為客觀地反映了各研究機(jī)構(gòu)的績(jī)效。王猷金等應(yīng)用數(shù)據(jù)包絡(luò)分析(DEA)法評(píng)價(jià)了15所省級(jí)獨(dú)立醫(yī)學(xué)科研機(jī)構(gòu)的科技效率,并探討了DEA的適用性及優(yōu)缺點(diǎn),結(jié)果顯示,DEA法可以為科研主管部門(mén)及科研機(jī)構(gòu)評(píng)價(jià)科技效率提供科學(xué)依據(jù)。陳韶光等以軍隊(duì)醫(yī)學(xué)科研機(jī)構(gòu)582名科技人員為研究對(duì)象,運(yùn)用聚類(lèi)分析法建立了適合各級(jí)各類(lèi)人員工作特點(diǎn)的多套業(yè)務(wù)考核指標(biāo)體系,為科技人員考核提供科學(xué)依據(jù)。孫瑞華等應(yīng)用Delphi法構(gòu)建了醫(yī)師科研績(jī)效評(píng)估指標(biāo)體系,并比較指標(biāo)體系評(píng)估與主觀評(píng)估的結(jié)果,結(jié)果顯示兩種評(píng)估結(jié)果基本一致,指標(biāo)體系評(píng)估優(yōu)于主觀評(píng)估法。單廣良等結(jié)合科研人員績(jī)效評(píng)估實(shí)踐,以實(shí)例論述選擇科研績(jī)效指標(biāo)及確定其權(quán)重系數(shù)的依據(jù)。黃亞明等利用評(píng)聘專(zhuān)業(yè)技術(shù)職務(wù)的數(shù)據(jù)資料,篩選出衛(wèi)生科技人員科研業(yè)績(jī)?cè)u(píng)價(jià)指標(biāo)體系,并采用神經(jīng)網(wǎng)絡(luò)軟件和多層感知器算法建立副高組和正高組的網(wǎng)絡(luò)模型,評(píng)價(jià)結(jié)果顯示,兩組模型的網(wǎng)絡(luò)評(píng)價(jià)與同行評(píng)議結(jié)果的符合率分別達(dá)到90%和75%。3.3醫(yī)學(xué)評(píng)價(jià)軟件隨著計(jì)算機(jī)技術(shù)的發(fā)展,醫(yī)學(xué)科研管理逐漸進(jìn)入信息化時(shí)代。將科研評(píng)價(jià)指標(biāo)體系的研究結(jié)果轉(zhuǎn)化成相應(yīng)的軟件,可以為科研管理提供更為簡(jiǎn)便、實(shí)用的評(píng)價(jià)工具。齊松仁等開(kāi)發(fā)的《醫(yī)學(xué)科研管理系統(tǒng)》軟件,實(shí)現(xiàn)了課題、成果、專(zhuān)利、論著、人才、經(jīng)費(fèi)六個(gè)方面的信息管理功能及投入-產(chǎn)出和科研人才評(píng)估功能,該系統(tǒng)具有通用性好、信息共享、信息采集簡(jiǎn)捷實(shí)用等特征。李海燕等建