“世界科學(xué)文獻(xiàn)定性評(píng)價(jià)統(tǒng)計(jì)數(shù)據(jù)庫(kù)”與引文定性分類下的學(xué)術(shù)文獻(xiàn)計(jì)量評(píng)價(jià)方法

1、"世界科學(xué)文獻(xiàn)定性評(píng)價(jià)統(tǒng)計(jì)數(shù)據(jù)庫(kù)"與引文定性分類下的學(xué)術(shù)文獻(xiàn)計(jì)量評(píng)價(jià)方法一. 開展學(xué)術(shù)文獻(xiàn)評(píng)價(jià)的必要性和意義當(dāng)今世界，隨著科技創(chuàng)新成為社會(huì)進(jìn)步的主要?jiǎng)恿蛧?guó)家競(jìng)爭(zhēng)實(shí)力的體 現(xiàn)，科研評(píng)價(jià)也發(fā)揮出越來(lái)越多的社會(huì)作用，表現(xiàn)為其對(duì)科技創(chuàng)新的導(dǎo)向作 用、激勵(lì)作用和學(xué)術(shù)話語(yǔ)權(quán)作用。因此，能否對(duì)科研工作和學(xué)術(shù)成果做出客 觀、合理、公正的評(píng)價(jià)，在一定程度上甚至反映了一個(gè)國(guó)家科研管理的軟實(shí)力?？蒲性u(píng)價(jià)的根本目的在于控制研究活動(dòng)質(zhì)量！因此，科研評(píng)價(jià)的對(duì)象可以是 政策、計(jì)劃、投資、項(xiàng)目、成果、人才、管理等各個(gè)科硏活動(dòng)要素。當(dāng)前”科硏 評(píng)價(jià)的主要方法包括同行評(píng)議、案例調(diào)研、文獻(xiàn)計(jì)量和經(jīng)濟(jì)計(jì)量等多種

2、方法。學(xué)術(shù)文獻(xiàn)是人們開展學(xué)術(shù)研究的信息載體和成果形式z-o優(yōu)秀的學(xué)術(shù)文 獻(xiàn)不僅本身應(yīng)具有創(chuàng)新的觀點(diǎn)、理念、理論、方法、數(shù)據(jù)、結(jié)論，還能反映甚 至引領(lǐng)該學(xué)科領(lǐng)域?qū)W術(shù)發(fā)展方向；同時(shí)，優(yōu)秀的學(xué)術(shù)文獻(xiàn)還具有讓研究者個(gè)人 價(jià)值得到社會(huì)承認(rèn)、進(jìn)行社會(huì)整體性的知識(shí)累積、打破時(shí)空學(xué)術(shù)交流壁壘、推動(dòng) 學(xué)術(shù)認(rèn)知的提高和社會(huì)經(jīng)濟(jì)的發(fā)展等諸多社會(huì)意義。因此，從其產(chǎn)生開始，就 被賦予了客觀折射作者學(xué)術(shù)成就、學(xué)術(shù)水平、社會(huì)貢獻(xiàn)大小高低的特有展性。開展學(xué)術(shù)文獻(xiàn)評(píng)價(jià)并不是最終目的，目的是為科研評(píng)價(jià)服務(wù)。開展學(xué)術(shù)文 獻(xiàn)的評(píng)價(jià)，是科研評(píng)價(jià)的基礎(chǔ)工作，為科研評(píng)價(jià)提供決策參考和客觀支撐！二、問題的提出開展學(xué)術(shù)文獻(xiàn)評(píng)價(jià)非常重要，但當(dāng)前

3、學(xué)術(shù)文獻(xiàn)評(píng)價(jià)體系存在三大本質(zhì)性缺 陷：（1）同行評(píng)議組織模式與評(píng)價(jià)手段落后目前存在兩個(gè)挑戰(zhàn)：既受“同行”（專家群體）專業(yè)水平和主觀評(píng)判能力的 挑戰(zhàn)，也受“評(píng)議”（評(píng)價(jià)標(biāo)準(zhǔn)）的科學(xué)性和評(píng)議過程合理性的挑戰(zhàn)，普遍而 言難以實(shí)現(xiàn)客觀、公正、公平。一些創(chuàng)新程度高、有重大突破性研究結(jié)果的話 題，例如，陶瓷在傳統(tǒng)的概念中是絕緣體，但在高溫超導(dǎo)領(lǐng)域，陶瓷卻能作為 高溫超導(dǎo)材料；又比如，核聚變通常是在高溫下發(fā)生的，清華大學(xué)的教授卻率 先提出了 “常溫核聚變”，即“冷核聚變”。像這樣打破思維范式的東四，同 行評(píng)議在初始階段也較難準(zhǔn)確判斷其學(xué)術(shù)價(jià)值。（2）引證文獻(xiàn)來(lái)源的局限性受統(tǒng)計(jì)源覆蓋面、代表性的影響，基于引文

4、統(tǒng)計(jì)的定量評(píng)價(jià)較難具備全面 的代表性。西方發(fā)達(dá)國(guó)家建立的統(tǒng)計(jì)數(shù)據(jù)庫(kù)以西方國(guó)家的期刊、會(huì)議錄等學(xué)術(shù) 文獻(xiàn)為主，使他們?cè)诮y(tǒng)計(jì)分析的結(jié)果上掌控了代表西方價(jià)值觀的話語(yǔ)權(quán)，而對(duì) 發(fā)展中國(guó)家的評(píng)價(jià)明顯發(fā)生偏差。（3）缺乏對(duì)引證數(shù)據(jù)的定性分析不區(qū)分引證者對(duì)被引文獻(xiàn)持何種評(píng)價(jià)態(tài)度，一律給出被引頻次統(tǒng)計(jì)數(shù)值， 以致學(xué)術(shù)評(píng)價(jià)機(jī)構(gòu)無(wú)法據(jù)此給出論文的定性評(píng)價(jià)意見，并導(dǎo)致了單純的“以數(shù)論 文”、“以刊論文”、“唯wos論”等形式主義傾向，以及種種學(xué)術(shù)不端行為， 嚴(yán)重?fù)p壞學(xué)術(shù)氛圉和創(chuàng)新激勵(lì)機(jī)制。1）定性評(píng)價(jià)如何客觀？高效？低成本？2）如何保證統(tǒng)計(jì)源的代表性、權(quán)威性?指標(biāo)的科學(xué)性？數(shù)據(jù)的及時(shí)性、可靠性？3）文獻(xiàn)計(jì)量統(tǒng)計(jì)如何

5、能反映較為準(zhǔn)確的定性評(píng)價(jià)意見？被引頻次和學(xué)術(shù)價(jià)值到底能否統(tǒng)一起來(lái)？影響因子到底能否反映每篇文章的質(zhì)量？事實(shí)上，有些專家其論文發(fā)表的期刊并非國(guó)際頂級(jí)大刊，其論文的被引頻次、下載次數(shù)等也并非在同學(xué)科內(nèi)最高, 但其學(xué)術(shù)價(jià)值和應(yīng)用價(jià)值一流。例如，我國(guó)著名的小麥育種專家、國(guó)家最高科技獎(jiǎng)獲得者李振聲院士2003年和2007年 分別在中國(guó)農(nóng)業(yè)科學(xué)和植物學(xué)報(bào)上發(fā)表了兩篇論文。數(shù)據(jù)統(tǒng)計(jì)顯示,第一篇水稻氮饑餓誘導(dǎo)基因的克隆與表 達(dá)分析至今在cnki被引2次，下載120次；wos被引3次；cscd被引0次；第二篇選擇牽連效應(yīng)分析:發(fā) 掘重要基因的新思路至今cnki被引1次，下載30次；cscd被引38次。如果不知道

6、李振聲院士工作的創(chuàng)新性，光 看文獻(xiàn)計(jì)量引次的統(tǒng)計(jì)結(jié)果，一般就會(huì)認(rèn)為這不是兩篇好文章。但實(shí)際上這些工作非常重要。我們說不要以刊論文，就 是為了避免上述認(rèn)識(shí)誤區(qū)。三、解決問題的思路因此，解決問題的思路，就要從如何把定性定量相結(jié)合的方法結(jié)合起來(lái)綜合、細(xì)致地進(jìn)行判斷。國(guó)際上的同行評(píng) 議一般認(rèn)為參與評(píng)議的人越多結(jié)果越公平，至少（at least）要有兩個(gè)人來(lái)客觀評(píng)議，但我們現(xiàn)在審稿一般只找兩個(gè)人就 認(rèn)為夠了（ enough ）,這是不對(duì)的。所以說，優(yōu)化的群體評(píng)議是非常重要的。那怎么為群體評(píng)議提供很好的支撐呢？中 國(guó)知網(wǎng)利用海量數(shù)據(jù)庫(kù)和大數(shù)據(jù)思路提岀以下解決方案（見圖1 ）:第一、基于網(wǎng)絡(luò)平臺(tái)的群體評(píng)議和

7、海量大數(shù)據(jù)支持的學(xué)術(shù)不端檢測(cè)機(jī)制，來(lái)幫助評(píng)審者快速發(fā)現(xiàn)并剔除有學(xué)術(shù)不 端行為的文獻(xiàn)；第二、通過基于大數(shù)據(jù)的分析,迅速界定論文創(chuàng)新點(diǎn)；第三、通過基于大數(shù)據(jù)的分析，迅速找出單篇文獻(xiàn)特征化的引證動(dòng)機(jī)。通過一段時(shí)間的努力，我們目前建立起了一套雙 向六維的引文定性分類體系。所謂的“雙向”，是指引文定性分類的內(nèi)容可以分別從被引文獻(xiàn)角度和施引文獻(xiàn)角度進(jìn)行分 析；所謂的“多維”，是指在雙向視野下以多種維度對(duì)引文進(jìn)行分類。例如,我們將文獻(xiàn)的被引價(jià)值分為學(xué)術(shù)價(jià)值、社會(huì)價(jià)值或其他價(jià)值三大類。學(xué)術(shù)價(jià)值包括論文的創(chuàng)新性、重要性、科學(xué)性、先進(jìn)性等。(1)創(chuàng)新性：研究觀點(diǎn)、問題、對(duì)象、方法、結(jié)果、結(jié)論的創(chuàng)新等;(2 )重要

8、性：受關(guān)注范圍、受關(guān)注程度、影響層次、影響面、前瞻性、排他性等；(3)科學(xué)性：設(shè)計(jì)的合理性；過程的可控性；數(shù)據(jù)的準(zhǔn)確性；推論的邏輯性；資料的可靠性；事實(shí)的可重復(fù)性；(4 )先進(jìn)性：概念、技術(shù)、方法、證據(jù)、形式的獨(dú)特性、新穎性、全面性等社會(huì)價(jià)值包括應(yīng)用性與歷史性等。(1 )應(yīng)用性：經(jīng)濟(jì)價(jià)值、倫理價(jià)值、文化價(jià)值。(2 )歷史性：推動(dòng)認(rèn)知、指導(dǎo)實(shí)踐、知識(shí)貢獻(xiàn)。其他價(jià)值則包括語(yǔ)言水平與寫作規(guī)范兩類。我們將引證態(tài)度可以分為兩大類五小類：(1 )實(shí)質(zhì)性引用：分為肯定和否定兩類態(tài)度。“肯定”是指支持、稱贊、認(rèn)可等情感傾向?！胺穸ā笔侵该鞔_表示批駁、質(zhì) 疑等態(tài)度，也指“比較式否定，即部分肯定，部分否定”。(2

9、 )非實(shí)質(zhì)性引用：分為“客觀描述”和“敷衍性弓i用“兩類態(tài)度。“客觀描述”引用具體內(nèi)容，但未表明對(duì)被弓i文獻(xiàn)的態(tài)度。 “敷衍性弓聞”未弓i用具體內(nèi)容，未標(biāo)明對(duì)被弓i文獻(xiàn)的態(tài)度。這樣,就把原來(lái)看似一個(gè)籠統(tǒng)的引證數(shù)字，按不同的性質(zhì)予以區(qū)分，對(duì)學(xué)術(shù)文獻(xiàn)為何被引用的價(jià)值予以深度的揭示，可 以更好地反映其真實(shí)的學(xué)術(shù)價(jià)值。第四、開發(fā)國(guó)際同行參與的在線同行評(píng)議系統(tǒng)，吸納國(guó)際同行對(duì)學(xué)術(shù)文獻(xiàn)的評(píng)價(jià)意見。在論文創(chuàng)新點(diǎn)分析和引文動(dòng)機(jī)分析分析的有力工具輔助下,開發(fā)定性定量相結(jié)合的評(píng)價(jià)方法,為同行評(píng)議提供有力的定 性判斷輔助手段。這樣，既克服同行評(píng)議的偏差，又為文獻(xiàn)計(jì)量注入嶄新內(nèi)容，使學(xué)術(shù)文獻(xiàn)評(píng)價(jià)高效、準(zhǔn)確！四. 世界

10、科學(xué)文獻(xiàn)定性評(píng)價(jià)統(tǒng)計(jì)數(shù)據(jù)庫(kù)介紹內(nèi)容挖掘技術(shù)和科學(xué)文獻(xiàn)定性評(píng)價(jià)標(biāo)準(zhǔn)建立世界科學(xué)文獻(xiàn)定性評(píng)價(jià)統(tǒng)計(jì)數(shù)據(jù)庫(kù)的基本目標(biāo)即在于通過大:一個(gè)國(guó)際首創(chuàng)的、可以支持客觀公正定性評(píng)價(jià)我國(guó)和世界各國(guó)科學(xué)文獻(xiàn)學(xué)術(shù)質(zhì)量與國(guó)際影響力的大型數(shù)據(jù)庫(kù)。該項(xiàng)目目 前已進(jìn)入中期開發(fā)階段，通過構(gòu)建世界范圍的學(xué)術(shù)文獻(xiàn)全文數(shù)據(jù)庫(kù)、引文數(shù)據(jù)庫(kù).專家學(xué)者庫(kù)及國(guó)際同行評(píng)議平臺(tái)，以 引文動(dòng)機(jī)挖掘、分類與網(wǎng)上同行評(píng)議相結(jié)合，建立面向文獻(xiàn)的國(guó)際評(píng)價(jià)體系，并提供科研項(xiàng)目情報(bào)跟蹤、學(xué)術(shù)硏究方向、 學(xué)術(shù)熱點(diǎn)等增值信息服務(wù)，在全球?qū)W術(shù)界和科硏管理界進(jìn)行推廣應(yīng)用,形成具有我國(guó)自主知識(shí)產(chǎn)權(quán)和國(guó)際權(quán)威性的科學(xué) 文獻(xiàn)學(xué)術(shù)評(píng)價(jià)新體系。這一項(xiàng)目的實(shí)施,將進(jìn)一步完善我國(guó)學(xué)術(shù)期刊的國(guó)際影響力評(píng)價(jià)，并推動(dòng)我國(guó)學(xué)術(shù)期刊的國(guó)際國(guó) 內(nèi)更好地樹立品牌、廣泛傳播。根據(jù)用戶需求和管理需求，該項(xiàng)目可以產(chǎn)生不同的產(chǎn)品，為特定用戶提供服務(wù)。包括：(1)宏觀評(píng)價(jià)產(chǎn)品：對(duì)學(xué)科、國(guó)家和地區(qū)、機(jī)構(gòu)、期刊的評(píng)價(jià)。形成世界學(xué)術(shù)期刊引證報(bào)告、中國(guó)學(xué)術(shù)期刊國(guó) 際引證報(bào)告、中國(guó)學(xué)術(shù)期刊影響因子年報(bào)、世界科