GRADE方法與系統(tǒng)評價(jià)質(zhì)量評價(jià)

內(nèi)容：1一、影響研究質(zhì)量的因素二、GRADE方法三、系統(tǒng)評價(jià)的質(zhì)量評價(jià)四、實(shí)例第一頁，共50頁。 Winter,2002研究結(jié)果的真實(shí)可靠科研道德隨機(jī)誤差系統(tǒng)誤差機(jī)遇chance偏倚bias一、影響研究質(zhì)量的因素2第二頁，共50頁。幾個(gè)基本概念3試驗(yàn)性研究與非試驗(yàn)性研究總體與樣本抽樣與抽樣誤差偏倚與機(jī)遇第三頁，共50頁。4試驗(yàn)性研究：

對可進(jìn)行人為分組的對象，人為施加某種干預(yù)措施，以探討該措施對各組結(jié)局影響的研究非試驗(yàn)性研究：

亦稱觀察性研究，指對無法進(jìn)行人為分組的對象，被動(dòng)觀察各組相關(guān)特征的差別，以探討某因素（特征）在各組間的差異第四頁，共50頁。5總體：

根據(jù)研究目的確定的全體同質(zhì)觀察對象。樣本：

從總體中按一定方式抽取出來的部分觀察單位的集合。抽樣：

總體中抽取部分觀察單位獲得樣本的過程。抽樣誤差：

樣本與總體之間由于抽樣過程引起的差異，在統(tǒng)計(jì)學(xué)上稱為抽樣誤差。第五頁，共50頁。6偏倚（bias）：

當(dāng)臨床研究受到某些因素的影響，使最終觀察的結(jié)果一致向真實(shí)結(jié)果的某一方向偏離的現(xiàn)象，即稱為偏倚。是一種系統(tǒng)誤差。機(jī)遇（chance）：

又稱為概率（probability），是指某一事件發(fā)生的可能性大小。對于一個(gè)假定完全避免了偏倚的樣本作觀察時(shí)，所得結(jié)果仍會(huì)與真實(shí)情況有一定差異。這是來自于測量過程本身或生物學(xué)變異所產(chǎn)生的隨機(jī)變異（randomvariation）造成的，這種單純由機(jī)會(huì)引起的差異稱為機(jī)遇，是一種隨機(jī)誤差。第六頁，共50頁。7偏倚與機(jī)遇的關(guān)系：偏倚機(jī)遇共性：任何類型研究任何研究階段影響真實(shí)性不同點(diǎn)：本質(zhì)系統(tǒng)誤差隨機(jī)誤差方向性有 無能否避免能不能控制方法完善設(shè)計(jì)、分析手段，客觀測量擴(kuò)大樣本，限制大小第七頁，共50頁。8觀察次數(shù)偏倚真值測量值機(jī)遇●●●●●●●●●●●●●●●●●●●●●●●●●●●●●偏倚與機(jī)遇的關(guān)系示意圖指標(biāo)●●第八頁，共50頁。9偏倚的分類選擇性偏倚（selectionbias）測量性偏倚（measurementbias）混雜性偏倚（confoundingbias）（一）偏倚第九頁，共50頁。101.選擇性偏倚（selectionbias）定義：

不正確地選擇了研究對象，使研究開始時(shí)，兩組研究對象就存在除研究因素以外的其它因素分布的不均衡性，因而導(dǎo)致研究結(jié)果與真實(shí)情況之間產(chǎn)生差異。產(chǎn)生：只要所選的樣本不能代表整體特征就可能產(chǎn)生選擇時(shí)分組時(shí)第十頁，共50頁。11選擇性偏倚的分類：組成成員偏倚（membershipbias）

試驗(yàn)組對照組自愿入組目標(biāo)人群基線情況：試驗(yàn)組≠對照組第十一頁，共50頁。12診斷信息偏倚（detectionsignalbias或unmaskingbias）

在選擇納入觀察病例時(shí)，因某種與觀察內(nèi)容無直接關(guān)系的癥狀或體征，加速或促進(jìn)本病的發(fā)現(xiàn)，而錯(cuò)誤地判定因果關(guān)系。

eg：絕經(jīng)期婦女服用雌激素與子宮內(nèi)膜癌組別以陰道出血納入觀察子宮內(nèi)膜癌病例以病理診斷納入觀察子宮內(nèi)膜癌病例有無合計(jì)有無合計(jì)服用雌激素457525942101未服用雌激素7211018289106195OR=9.8OR=1.786.5%VS58.4%其他選擇性偏倚第十二頁，共50頁。132.測量性偏倚（measurementbias）定義：

在資料收集階段，由于觀察和測量方法上有缺陷，組間不一致，使各組所獲得的信息產(chǎn)生系統(tǒng)誤差，即為測量性偏倚（信息偏倚）。產(chǎn)生：對兩組觀察強(qiáng)度或頻度差異實(shí)驗(yàn)非規(guī)范化操作影像學(xué)資料定性或定量差異第十三頁，共50頁。14測量性偏倚的分類：疑診偏倚（diagnostic-suspiciousbias），也稱期望偏倚關(guān)注組陽性發(fā)現(xiàn)非關(guān)注組陽性發(fā)現(xiàn)沾染性偏倚（contaminationbias）差異干擾性偏倚（co-interventionbias）差異其他測量性偏倚第十四頁，共50頁。153.

混雜性偏倚（confoundingbias）定義：

簡稱混雜，研究暴露于某因素與某疾病之間的關(guān)系時(shí)，由于一個(gè)或多個(gè)既與疾病有關(guān)，又與暴露因素相關(guān)的外部因素（extraneous）的影響，掩蓋或夸大了研究的暴露因素與該疾病的聯(lián)系。這種影響所帶來的誤差稱為混雜偏倚或混雜。第十五頁，共50頁。16研究因素疾病結(jié)局非研究因素真正的關(guān)聯(lián)觀察到的關(guān)聯(lián)未觀察到的關(guān)聯(lián)混雜因素示意推斷的因果關(guān)系第十六頁，共50頁。17產(chǎn)生：存在兩種以上的因素，其中包括研究因素和非研究因素非研究因素對最后結(jié)果有影響，且與研究因素有關(guān)非研究因素不是研究因素與疾病因果關(guān)系的中間因素在研究因素的不同水平，非研究因素的分布不一致第十七頁，共50頁。18eg：服用維生素E與心肌梗死組別心肌梗死有無服用維生素E400600未服用維生素E600400RR=0.67<1（保護(hù)因素）組別心肌梗死有無吸煙820350不吸煙180670RR=3.38（危險(xiǎn)因素）發(fā)現(xiàn)：第十八頁，共50頁。19組別吸煙吸煙率（%）有無服用維生素E27073027未服用維生素E88012088組別心肌梗死有無服用維生素E24030未服用維生素E580300吸煙者中：不吸煙者中：組別心肌梗死有無服用維生素E160570未服用維生素E20100RR=1.35>1RR=1.32>1第十九頁，共50頁。偏倚防控20策略:

制定研究方案（計(jì)劃書）時(shí)：遵循科研設(shè)計(jì)基本原則（隨機(jī)、對照、盲法、基線可比）參照相關(guān)質(zhì)量評價(jià)標(biāo)準(zhǔn)根據(jù)偏倚類型、產(chǎn)生階段及產(chǎn)生原因合理選擇控制措施實(shí)施研究時(shí)：

參照設(shè)計(jì)方案嚴(yán)格實(shí)施，做好關(guān)鍵點(diǎn)控制總結(jié)研究結(jié)果時(shí)：基于研究實(shí)施及結(jié)果，全面規(guī)范報(bào)告第二十頁，共50頁。21措施：設(shè)計(jì)方案的選擇納入/排除標(biāo)準(zhǔn)的制定對照隨機(jī)（隨機(jī)抽樣、隨機(jī)分組）盲法（盲誰？）限制匹配分層方法（分層抽樣、分層隨機(jī)、分層分析等）入組后維持均衡性的措施（依從性、失訪、是否依從者的特征差異等）統(tǒng)計(jì)分析控制（標(biāo)準(zhǔn)化法、分層分析、多因素分析）操作層面的控制（技術(shù)方案、培訓(xùn)、統(tǒng)一工具并校正、數(shù)據(jù)錄入與質(zhì)控、分析方法選擇與參數(shù)設(shè)置、全面報(bào)告）……第二十一頁，共50頁。22影響機(jī)遇的因素1、樣本大小——主要因素RationaleforlargesamplestudyandmetaanalysisVariousrestrictionsinpracticeThresholdsettolimitchance’seffectwithinanacceptableinterval2、觀察對象間的差異大小——重要因素3、觀察結(jié)果的差異——重要參數(shù)4、對兩類錯(cuò)誤的容許范圍

關(guān)注真陰性還是真陽性

兩類錯(cuò)誤的大小僅反映研究受機(jī)遇影響的大小，并不代表研究的總體質(zhì)量（二）機(jī)遇第二十二頁，共50頁。二、GRADE方法23用于系統(tǒng)評價(jià)、衛(wèi)生技術(shù)評估（HTAs）及臨床實(shí)踐指南中備選方案的證據(jù)質(zhì)量評價(jià)和推薦強(qiáng)度評級的系統(tǒng)當(dāng)前最成熟的應(yīng)用領(lǐng)域?yàn)楦深A(yù)性系統(tǒng)評價(jià)和治療性臨床實(shí)踐指南第二十三頁，共50頁。24上述譯文見《中國循證醫(yī)學(xué)雜志》，原文見JournalofClinicalEpidemiology其他資源：GRADE工作組主頁(/)第二十四頁，共50頁。GRADE證據(jù)質(zhì)量評價(jià)與推薦強(qiáng)度評級25GRADE將證據(jù)質(zhì)量分為高、中、低、極低4級，推薦強(qiáng)度分為強(qiáng)、弱2級，對應(yīng)解釋如下：證據(jù)質(zhì)量

高：非常確信（很有把握認(rèn)為真實(shí)值與估計(jì)值接近）

中：信心一般（真實(shí)值可能與估計(jì)值接近，但存在二者

完全不同的可能性）

低：信心有限（真實(shí)值可能與估計(jì)值完全不同）

極低：幾乎沒什么信心（估計(jì)值很不確定）推薦強(qiáng)度

強(qiáng)：明確顯示干預(yù)措施利大于弊或弊大于利

弱：利弊不確定或無論質(zhì)量高低的證據(jù)均顯示利弊相當(dāng)?shù)诙屙摚?0頁。影響證據(jù)質(zhì)量的八因素26可能降低級別的因素：偏倚風(fēng)險(xiǎn)不一致性（對系統(tǒng)評價(jià)）間接性不精確性發(fā)表偏倚（對系統(tǒng)評價(jià)）可能升高級別的因素：效應(yīng)量大劑量反應(yīng)關(guān)系混雜因素會(huì)降低效應(yīng)起點(diǎn)起點(diǎn)第二十六頁，共50頁。27第二十七頁，共50頁。GRADE分級軟件（GRADEprofiler，簡稱GRADEpro）

該軟件可免費(fèi)下載和安裝（）

該軟件主要用于創(chuàng)建結(jié)果總結(jié)表（SummaryofFindings，SoF）和證據(jù)概要表（GRADEevidenceprofile）

第二十八頁，共50頁。結(jié)果總結(jié)表(SummaryofFindings，SoF)示例

Source:GRADE-129第二十九頁，共50頁。續(xù)表：30第三十頁，共50頁。證據(jù)概要表(GRADEevidenceprofile)示例

Source:GRADE-131第三十一頁，共50頁。32續(xù)表：第三十二頁，共50頁。三、系統(tǒng)評價(jià)的質(zhì)量評價(jià)33系統(tǒng)評價(jià)（SR）作為合成證據(jù)，是一種重要的證據(jù)形式，其信息含量高，是決策的重要基礎(chǔ)，但其質(zhì)量仍存在差異以系統(tǒng)評價(jià)為證據(jù)來源的進(jìn)一步研究綜合被稱為系統(tǒng)評價(jià)再評價(jià)（Overview），其本質(zhì)是一種系統(tǒng)評價(jià)，是針對同一問題多個(gè)系統(tǒng)評價(jià)的一種綜合研究方法。Overview在以下情況下可能有用：總結(jié)針對某種疾病的多種干預(yù)措施證據(jù)（最常見），或總結(jié)某種干預(yù)措施治療不同疾病的證據(jù)，或總結(jié)某種干預(yù)措施的不良反應(yīng)（價(jià)值有限）。其方法仍在發(fā)展中。第三十三頁，共50頁。系統(tǒng)評價(jià)再評價(jià)（Overview）的研究現(xiàn)狀

20世紀(jì)末國外學(xué)者開始進(jìn)行系統(tǒng)評價(jià)再評價(jià)研究國內(nèi)發(fā)表的overview始見于2010年，較英、美、澳等國晚十年至2013年4月檢索到十篇中文，之后的兩年內(nèi)發(fā)表文獻(xiàn)增加了一倍以“系統(tǒng)評價(jià)”和“質(zhì)量”為主題詞檢索CNKI（2015-6-30），檢中5486條結(jié)果，文獻(xiàn)可歸納為：以發(fā)表于某雜志的SR為對象的（如《中國循證醫(yī)學(xué)雜志》、《中華兒科雜志》）以研究領(lǐng)域的SR為對象的（如護(hù)理、公共衛(wèi)生）以疾病或疾病狀況的SR為對象的（如肺癌、腦出血）以治療手段的SR為對象的（如針灸、中藥等）以從業(yè)者發(fā)表的SR為對象的（如藥學(xué)人員）

……34第三十四頁，共50頁。35評價(jià)醫(yī)學(xué)文獻(xiàn)的一般原則：

真實(shí)性（研究方法是否科學(xué)合理）

如治療性研究的對照設(shè)置、隨機(jī)化及隱蔽分組、盲法、是否按分配組別分析全部研究對象等等重要性（研究結(jié)果是否有價(jià)值）

如相對效應(yīng)與絕對效應(yīng)（RRR和ARR），NNT，效應(yīng)的一致性，效應(yīng)估計(jì)的精確性（95%CI），統(tǒng)計(jì)學(xué)意義與臨床意義等；靈敏度、特異度、陽性及陰性預(yù)測值等（對診斷性研究）適用性（研究結(jié)果是否可推廣）

如患者特點(diǎn)、干預(yù)措施是否適用、價(jià)值觀等第三十五頁，共50頁。評價(jià)系統(tǒng)評價(jià)需要考慮的方面：

36應(yīng)從其制作全過程的各關(guān)鍵環(huán)節(jié)展開，如：提出的決策問題是否恰當(dāng)該問題是否在進(jìn)行系統(tǒng)評價(jià)前即已提出（對Cochrane系統(tǒng)評價(jià)必須事先發(fā)表系統(tǒng)評價(jià)計(jì)劃書）檢索原始研究是否全面及是否評價(jià)了發(fā)表偏倚納入及排除標(biāo)準(zhǔn)設(shè)置是否恰當(dāng)是否有重復(fù)的文獻(xiàn)篩選、資料提取及原始研究質(zhì)量評價(jià)過程（如至少兩人獨(dú)立地進(jìn)行）是否提供了納入研究特征表或用文字表述綜合各研究結(jié)果的方法是否恰當(dāng)?shù)贸鼋Y(jié)論時(shí)是否考慮了納入研究的質(zhì)量是否申明利益沖突……第三十六頁，共50頁。系統(tǒng)評價(jià)再評價(jià)工具方法學(xué)質(zhì)量評價(jià)工具：OQAQ和AMSTAR報(bào)告質(zhì)量評價(jià)工具：PRISMA37第三十七頁，共50頁。OverviewQualityAssessmentQuestionnaire

(OQAQ)389個(gè)方面，10個(gè)條目，其中1個(gè)綜合評分：第三十八頁，共50頁。AMSTAR11個(gè)條目39第三十九頁，共50頁。40AMSTAR(continued)第四十頁，共50頁。PRISMA7個(gè)方面27個(gè)條目41第四十一頁，共50頁。42PRISMA(continued)第四十二頁，共50頁。注意：43無論何種工具都有其適用條件及局限性，須結(jié)合專業(yè)及具體情況有選擇、有甄別地使用各工具均基于報(bào)告內(nèi)容，研究未報(bào)告某些重要影響因素信息時(shí)對其評價(jià)并不全面有的工具未提供總評價(jià)條目，就不必強(qiáng)求總評分，因涉及各條目的權(quán)重，本身就是一個(gè)需要研究的問題評價(jià)的關(guān)鍵是使用者結(jié)合具體情況，對影響SR質(zhì)量的各個(gè)方面作出自己的判斷評價(jià)系統(tǒng)評價(jià)的核心問題是評價(jià)其可重復(fù)性及偏倚控制情況第四十三頁，共50頁。四、實(shí)例

（一）GRADE應(yīng)用實(shí)例441.GRADE在系統(tǒng)評價(jià)中的應(yīng)用第四十四頁，共50頁。452.GRADE在臨床實(shí)踐指南中的應(yīng)用第四十五頁，共50頁。（二）系統(tǒng)評價(jià)再