美國STAR METRICS項目框架、實施進展及對我國啟示,項目管理論文

美國STARMETRICS項目框架、實施進展及對我們國家啟示,項目管理論文科學政策的首要目的,一是怎樣確保得到公共資金支持的科學研究誠信,二是怎樣確保此類科學研究的產(chǎn)出率。聯(lián)邦投資于科學,其產(chǎn)生的受益之處或者價值是什么這個問題在美國所有時期的科學政策中一直存在。19世紀80年代,這個問題關(guān)注的是受贊助研究的經(jīng)濟價值。但是經(jīng)歷20世紀70年代后期的經(jīng)濟不振之后,政治家開場聚焦于如何提升受聯(lián)邦贊助的科學研究所產(chǎn)生的經(jīng)濟結(jié)果,即產(chǎn)出率。同時,隨著科學變得不那么特殊,而且隨著科學變得越來越同公共政策的其他領(lǐng)域一樣,美國科學研究機構(gòu)與其他所有機構(gòu)一同都歸入了1993年美國國會公布的(績效與結(jié)果法〕(GPRA)的適用范圍之內(nèi)。GPRA法案以立法的形式確立了對的行政機構(gòu)和科研機構(gòu)進行績效評估的制度,旨在提高績效,加強管理。GPRA法案的公布施行有其歷史的延續(xù)性。20世紀60年代,美國曾有(項目、計劃和預算系統(tǒng)〕,它重點強調(diào)項目管理和預算的計劃性。70年代,它被目的管理(ManagementbyObjective)和零基預算(Zero-Base-Budget)所取代。80年代,在目的管理和零基預算的基礎(chǔ)上,美國在預算管理中愈加強調(diào)三個動機:一是提高效率,二是質(zhì)量管理,三是目的管理。怎樣更好地提高效率怎樣更好地測量效率和效果這是美國公布施行GPRA的重要原因。由此可見,美國對于聯(lián)邦科研機構(gòu)的管理理念是將科技作為生產(chǎn)力來進行管理的?？茖W政策是科技政策的一部分。以往的美國科技政策研究缺乏足夠的系統(tǒng)性和科學性,難以支撐做出最佳的科技投資決策,因而聯(lián)邦于2005年提出了發(fā)展科技政策方式方法學(ScienceofSciencePolicy,SoSP)的建議,將科技政策研究作為一門新興穿插學科發(fā)展,重點是開展定量化、可視化、邏輯化的方式方法和工具的研究,搭建科技數(shù)據(jù)的挖掘和展示平臺,將SoSP作為建立美國基于證據(jù)的決策系統(tǒng)的重要舉措。SoSP致力于為科技政策提供定量化的數(shù)據(jù)基礎(chǔ)、方式方法和工具,幫助政策制定者更好地理解科技創(chuàng)新活動的規(guī)律,并開展對科技事業(yè)的評價。SoSP在中觀層面的一個重要研究主題就是科技投資的效益是如何的2008年9月以來,席卷全球的金融危機爆發(fā),美、歐、日等主要經(jīng)濟體陷入全面衰退。經(jīng)過美國國會參議院和眾議院內(nèi)部劇烈辯論以及國會與奧巴馬屢次的協(xié)商后,基于凱恩斯主義經(jīng)濟學理論,2018年2月13日美國第111次國會上參眾兩院通過了總額為7870億美元的一攬子刺激經(jīng)濟復蘇方案,即(2018年美國復蘇與再投資法案〕(TheAmericanRecoveryandReinvestmentActof2018,ARRA)。ARRA牽涉的7870億美元中有約76億美元直接投資于科學研究。EhrenbergR.和SmithR.采用生產(chǎn)函數(shù)模型研究了科學投資怎樣產(chǎn)生就業(yè)崗位的問題。GoldstonD.則指出,聯(lián)邦投資于科學是基于科學研究能夠很快產(chǎn)生更有競爭力的公司和更多更好的工作崗位。例如,美國信息技術(shù)與創(chuàng)新基金會(ITIF)的一份報告指出,200億美元的科研投入能夠每年新增(維持)約402000個工作崗位。MervisJ.和HandE.指出,金融危機中美國聯(lián)邦投資科學研究能夠促進經(jīng)濟增長以及就業(yè)崗位的創(chuàng)造。ARRA法案中76億美元直接投資于科學研究便是基于這一理念。除此之外,奧巴馬總統(tǒng)的競選承諾之一就是:使工作流程合理化、削減開支、提高工作效率。由于GPRA、ARRA方案的要求及其競選承諾,奧巴馬面臨向公眾展示ARRA中用于科學研究的資金怎樣對美國經(jīng)濟社會產(chǎn)生影響,十分是怎樣保存并創(chuàng)造工作時機及促進經(jīng)濟復蘇的壓力。根據(jù)GPRA法案和ARRA法案的要求,為了知足向公眾展示科學研究的資金怎樣對美國經(jīng)濟社會產(chǎn)生影響的需要,在SoSP框架下,美國聯(lián)邦發(fā)起了STARMETRICS項目,旨在通過聯(lián)邦和研究機構(gòu)之間的合作,開創(chuàng)建立跨部門分享的數(shù)據(jù)庫以及數(shù)據(jù)展示工具,進而對聯(lián)邦RD投入的影響從定量角度進行展示與評價。2、美國STARMETRICS項目基本情況STARMETRICS是美國再投資中的科學與技術(shù)測度研究在創(chuàng)新、競爭力以及科學上的影響(ScienceandTechnologyinAmericasReinvestment-MeasuringtheEffecTofResearchonInnovation,CompetitivenessandScience)的簡稱。此項目在美國科技政策辦公室(OSTP)指導下,由美國國立衛(wèi)生研究院(NIH)和美國國家科學基金會(NSF)共同牽頭負責,其目的是由聯(lián)邦部門和贊助機構(gòu)與大學合作開發(fā)一個基于實證的框架來測度科研投資的效果并向公眾展示科研投資的收益,并組織大學和科研贊助機構(gòu)共同構(gòu)建一個支撐該框架的開放式的數(shù)據(jù)基礎(chǔ)。正如美國科技政策辦公室(OSTP)主任JohnP.Holdren所指出的:有必要用可靠的證據(jù)展示美國在研究與開發(fā)活動上的投資所獲得的收益,STARMETRICS就是華而不實重要的組成部分。首先,STARMETRICS將創(chuàng)造一個跨部門的機制對聯(lián)邦資金贊助的研究機構(gòu)的科學家以及支撐人員的人數(shù)做出解釋;其次,STARMETRICS將基于這些信息,構(gòu)建科技對經(jīng)濟效益影響的測度方式方法(如就業(yè)崗位創(chuàng)造),更好地測度科學研究成效(如通過引用和專利來測度新科學的產(chǎn)生和接受),以及測度科研投資的社會效益(如公共健康方面);第三,STARMETRICS將開發(fā)和擴展現(xiàn)有的研究工具,同時將贊助機構(gòu)和受贊助方的負擔降至最低。在項目進行的經(jīng)過中,各方面的利益相關(guān)者將對項目進展的成效不斷進行評估。值得一提的是,STARMETRICS項目還有一個特色是在初期階段,是由PI與大學相關(guān)人員自愿報名參加并構(gòu)成了項目工作組。STARMETRICS項目的產(chǎn)出形式包括三類:一是科學投資在就業(yè)崗位的保存和創(chuàng)造方面的標準測度方式方法;二是科學投資在對經(jīng)濟、科學和社會的長期影響的系統(tǒng)、標準和有效的測量方式方法;三是構(gòu)成科技政策方式方法學研究共同體。STARMETRICS項目的終極目的是構(gòu)建一個成熟的研究領(lǐng)域、聯(lián)邦政策層面成熟的分析工具集合(將科技政策提升到和稅收政策一樣的層面)、構(gòu)建科研贊助機構(gòu)和大學分享的科研管理數(shù)據(jù)平臺以及科技政策研究者分享的政策研究數(shù)據(jù)平臺。3、STARMETRICS項目框架STARMETRICS項目是個多階段的項目,將在不同時期隨著利益相關(guān)者需求的變化而變化,包括先期啟動的一個試點項目(STARPilotProject)。3.1項目框架當前,STARMETRICS項目計劃分為兩個階段,第一階段重點關(guān)注科研投資怎樣創(chuàng)造就業(yè)崗位;第二階段則重點關(guān)注科研投資更廣泛的影響。先期啟動的試點項目則旨在通過現(xiàn)有的科研贊助部門、科研管理部門現(xiàn)有的數(shù)據(jù),來反映聯(lián)邦科學投資在經(jīng)濟、社會以及科學上的成效。試點項目并不能針對ARRA法案中科學投資進行評價,但是從長期來看,對STARMETRICS項目的可行性和價值具有參考意義。STARMETRICS項目框架見圖1。STARMETRICS項目在成功施行了試點項目(PilotProject)的基礎(chǔ)上,大學和科研贊助機構(gòu)上報相關(guān)的科研管理數(shù)據(jù),由大學、科研贊助機構(gòu)和STARMETRICS項目組協(xié)同工作,進行數(shù)據(jù)處理,并構(gòu)成不同的分析報告,分別反應給PI、大學和科研贊助機構(gòu)。3.2第一階段:重點關(guān)注科研投資怎樣創(chuàng)造就業(yè)崗位STARMETRICS項目的第一階段旨在開發(fā)統(tǒng)一的、可審計的、標準的基于科研機構(gòu)現(xiàn)有數(shù)據(jù)的測度科學投入在就業(yè)崗位創(chuàng)造方面的指標。第一階段收集的數(shù)據(jù)不牽涉到個人。作為一個自愿參加的項目,STARMETRICS項目對參加的科研機構(gòu)來講并不難。STARMETRICS項目團隊與科研機構(gòu)協(xié)同工作,在項目的每一個步驟上提供信息、指導和支持。第一階段的若干環(huán)節(jié)見圖2。第一步:與科研機構(gòu)的初步信息溝通。STARMETRICS項目的第一個步驟是組織一次介紹性的會議,一般采用網(wǎng)絡(luò)或視頻會議的形式來向科研機構(gòu)介紹STARMETRICS項目的基本情況以及介入此項目的要求。會議一般持續(xù)1個小時左右,會上將討論項目的若干細節(jié),包括需要采集哪些數(shù)據(jù)以及數(shù)據(jù)采集的經(jīng)過和基于這些數(shù)據(jù)將產(chǎn)生的報告模板。科研機構(gòu)的代表應包括主要的IT技術(shù)人員、財務(wù)代表和人力資源代表,最好有負責科研的部門領(lǐng)導介入。第二步:科研機構(gòu)決定介入。第一次溝通會議之后,科研機構(gòu)和美國國立衛(wèi)生研究院(NIH)(NIH是STARMETRICS項目的數(shù)據(jù)管理機構(gòu))之間簽署一份理解備忘錄(MOU)。在這里經(jīng)過之中,還能夠額外召開若干次技術(shù)會議,來討論需要收集的數(shù)據(jù)細節(jié)。第三步:科研機構(gòu)提交樣本數(shù)據(jù)。STARMETRICS項目的第一階段要求介入的科研機構(gòu)提供本身科研管理系統(tǒng)中的數(shù)據(jù),包括人力資源數(shù)據(jù)、間接成本數(shù)據(jù)、供給商數(shù)據(jù)以及子課題數(shù)據(jù)。STARMETRICS項目團隊和科研機構(gòu)一同提交季度基線數(shù)據(jù),不同的科研機構(gòu)的數(shù)據(jù)時限能夠長達7年或短至2個季度,多年的數(shù)據(jù)能夠在分析報告中展示出長期的趨勢。樣本數(shù)據(jù)的具體信息通過數(shù)據(jù)字典的形式給出,同時STARMETRICS項目組還提供技術(shù)手冊來規(guī)范提交數(shù)據(jù)的細節(jié)。STARMETRICS項目第一階段需要的數(shù)據(jù)包括:項目信息、個人信息、項目直接費用情況、采購信息以及子課題信息等。以項目信息為例,數(shù)據(jù)字典給出了項目信息中包含的要素(字段)以及該要素(字段)的詳細定義,見表2。第四步:STARMETRICS項目團隊提供反應信息和報告。一旦拿到科研機構(gòu)的樣本數(shù)據(jù),項目團隊便對這些數(shù)據(jù)進行深切進入分析,并提供針對就業(yè)崗位創(chuàng)造和保存以及與上一節(jié)度的變化情況報告。除此之外,項目團隊還將對提交數(shù)據(jù)的構(gòu)造進行分析,并提供怎樣更好地提交數(shù)據(jù)的反應信息。第五步:科研機構(gòu)提交最近和歷史數(shù)據(jù)。當科研機構(gòu)確認樣本數(shù)據(jù)格式以及報告的模板符合自個的需求,科研機構(gòu)就需要提交盡可能多的季度數(shù)據(jù)。為了使項目團隊更好地分析這些數(shù)據(jù),科研機構(gòu)最好提交季度數(shù)據(jù)。第六步:STARMETRICS項目團隊開創(chuàng)建立季度報告。此步驟旨在處理納入STARMETRICS數(shù)據(jù)庫的信息,生成相應報告并反應給研究機構(gòu)。STARMETRICS項目團隊將提供季度報告,這些報告中包括一系列關(guān)于聯(lián)邦科學投入產(chǎn)生的直接就業(yè)崗位。同時,STARMETRICS項目團隊還提供額外的報告,這些報告含有聯(lián)邦科學投入中的子課題、采購合同以及Overhead等支出產(chǎn)生的就業(yè)崗位的估計值。這些報告都會提交給研究機構(gòu)來征求意見。3.3第二階段:重點關(guān)注科研投資更廣泛的影響STARMETRICS項目的第二階段旨在開發(fā)用于測度聯(lián)邦科學投資在科學知識、社會效益、勞動力產(chǎn)出以及經(jīng)濟增長等方面的影響。對科學知識的影響主要通過公開出版物和引用數(shù)量方面的指標來表示出;對社會效益影響能夠通過構(gòu)建健康指標以及環(huán)境影響因子等方式表示出;對勞動力產(chǎn)出的影響能夠通過學生流動和招收等方面表示出;對經(jīng)濟增長的影響則能夠通過跟蹤專利以及新公司的開創(chuàng)建立和發(fā)展途徑等表示出。4、項目進展情況及將來瞻望4.1進展情況當前,美國STARMETRICS項目整體上還處于第一階段,其發(fā)展歷程如下:2018年7月,STARMETRICS試點項目開場,有7所大學自愿參加,分別為UniversityofTexasatAustin、UniversityofDelaware、GeorgeMasonUniversity、CaliforniaInstituteofTechnology、UniversityofAlabama和UniversityofMassachusetts和Dartmouth。2018年5月,介入機構(gòu)(Agencies)簽署理解備忘錄。2018年7月,美國預算管理局(OMB)批準擴展這個項目。到當前為止,超過60個機構(gòu)介入了STARMETRICS項目,至少還有50個機構(gòu)表示有興趣參加。同時,STARMETRICS項目還將吸收美國國家科學基金會(NSF)ScienceofScienceandInnovationPolicy(SoSIP)計劃贊助的若干項目的成果和工具。例如,RDDashboard工具是一個科研管理數(shù)據(jù)的展示工具;基于專利數(shù)據(jù)制成的地圖能夠展示美國各州在特定年限內(nèi)申報的專利數(shù)量,贊助來源以及專利的引用情況;TOPICModeling工具能夠抽取NSF贊助的項目申請書的研究主題,并對申請書進行關(guān)聯(lián),有利于辨別學科穿插項目。這些成果和工具有利于向公眾展示聯(lián)邦科學投入產(chǎn)生的成效和影響,同時也有利于提高科研機構(gòu)乃至科研管理部門的管理效率,實現(xiàn)奧巴馬總統(tǒng)建立高績效的目的。4.2STARMETRICS項目將來瞻望STARMETRICS項目將來除了實現(xiàn)第一階段和第二階段的目的之外,還會有多種可能應用,進而進一步提高能夠提高科技機構(gòu)的管理效率,并加深科研人員和科技管理人員對科研活動規(guī)律的了解。例如,通過STARMETRICS項目平臺,能夠根據(jù)科學家的研究興趣,將科學家在地圖上進行直觀展示;通過STARMETRICS還能夠更好地理解科學家之間的合作,并進行圖形化直觀展示。5、對我們國家科技評價的啟示5.1我們國家科技評價現(xiàn)在狀況近年來,隨著我們國家職能的轉(zhuǎn)變和科技管理體制改革,促進了我們國家科技評價需求的穩(wěn)定和持續(xù)增長。同時,伴隨著我們國家科技計劃管理體制改革的深切進入,評估活動越來越遭到各級的高度重視?？萍荚u價是指由科技評價機構(gòu)根據(jù)委托方提出的目的,遵循一定的原則、程序和標準,運用科學、可行的方式方法對科技政策、科技計劃、科技發(fā)展領(lǐng)域、科技項目、科技成果、科技機構(gòu)、科技人員以及與科技活動有關(guān)的行為和要素所進行的專業(yè)化咨詢和評判活動?，F(xiàn)代科技評價已成為構(gòu)建科技競爭發(fā)展環(huán)境的重要基礎(chǔ),成為科技戰(zhàn)略管理和績效管理的重要工具,成為公眾理解科技的重要渠道。從近十年來評價指標理論研究的國際發(fā)展趨勢來看,Geisler從測量理論的角度定義科學技術(shù)指標,并分析不同類型科技評價指標(如文獻計量指標、專利指標、同行評議等)的測量特征[12]。Keeney和Gregory從多目的決策出發(fā),研究怎樣有效選擇或構(gòu)建測量目的完成情況的屬性(即評估指標)。Roper等則從創(chuàng)新經(jīng)濟學出發(fā),分別根據(jù)知識溢出的私有收益和社會收益兩個維度,研究事先評估公共贊助RD活動的指標體系。從我們國家宏觀層面的科技資源或科研機構(gòu)的投入與產(chǎn)出效益評價實踐來看,主要是采用定性或定量方式方法在確定投入、產(chǎn)出指標的前提下進行分析和測算。其存在的問題主要有下面三個方面:一是科技投入與科技產(chǎn)出之間缺乏直觀的聯(lián)絡(luò)。翟立新、韓伯棠、李曉軒以為,從本質(zhì)上看,公共科研機構(gòu)是具有多種投入和多種產(chǎn)出的復雜投入、產(chǎn)出系統(tǒng),是將科技人力資源和研究開發(fā)資本等投入,通過研發(fā)經(jīng)過的知識溢出使之轉(zhuǎn)化成為論文、專著、專利、成果,以及改良的產(chǎn)品和工藝、服務(wù)等產(chǎn)出的生產(chǎn)系統(tǒng)。從這個意義上講,現(xiàn)有研究還不能揭示出產(chǎn)出和投入之間建立明確的函數(shù)關(guān)系,不能通過模型揭示投入轉(zhuǎn)化成產(chǎn)出的經(jīng)過。而STARMETRICS項目則通過統(tǒng)計學的方式方法,試圖構(gòu)建這種函數(shù)關(guān)系,在科學投入之前就能預測到將來的產(chǎn)出情況。二是難以衡量科技對經(jīng)濟社會的影響。當前我們國家科技資源投入與產(chǎn)出評價中的產(chǎn)出指標大部分是直接的科技產(chǎn)出,而這些產(chǎn)出對經(jīng)濟和社會的影響,如就業(yè)崗位的創(chuàng)造,社會效益等沒有牽涉。STARMETRICS項目則致力于構(gòu)建科學投資對經(jīng)濟社會廣泛影響的測度方式方法和數(shù)據(jù)平臺。三是不能直觀展示評價結(jié)果?，F(xiàn)有科技資源投入與產(chǎn)出評價的結(jié)果不能通過可視化的工具直觀展示給決策者,而STARMETRICS項目則吸收、采用大量的可視化工具,圖形化展示評價結(jié)果。5.2對我們國家科技評價的啟示美國STARMETRICS項目的施行預示著美國科技評價正在朝著愈加側(cè)重數(shù)學模型和可視化工具的精細化方向發(fā)展。當前,該項目得到了及科研機構(gòu)的廣泛響應,正在不斷發(fā)展和完善,并已經(jīng)開場顯現(xiàn)出成效。它山之石,能夠攻玉。對我們國家科技評價來講,美國STARMETRICS項目存在可借鑒之處,主要具體表現(xiàn)出在三個方面:一是關(guān)注國家層面科研投資的效果和影響。隨著科教興國等戰(zhàn)略的提出,國家逐步加強對科學研究的經(jīng)費投入,20042008年五年間,國家財政科技撥款由1095.3億元增加到2581.8億元,漲幅到達1.35倍。以中國科學院為例,自1998年知識創(chuàng)新