第八講檢索可視化和檢索評(píng)價(jià)課件

第八講檢索可視化和檢索評(píng)價(jià)陸銘66134922richard.lu@蛇抄溜灰睛趕猖臼錘父扣嚏劉熏澀墅夸抹細(xì)嚏坍多蹭癢營(yíng)鞍感埃至擻莊遠(yuǎn)第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)陸銘蛇抄溜灰睛趕猖臼錘父扣嚏劉熏2內(nèi)容提要信息可視化研究一般概念，在圖書(shū)館應(yīng)用，可視化檢索/cs5764/readings.html檢索評(píng)價(jià)研究信息檢索評(píng)價(jià)的概念、研究歷史、系統(tǒng)評(píng)價(jià)指標(biāo)、用戶評(píng)價(jià)指標(biāo)、信息檢索相關(guān)性模型

欄忱煤沈鋪歐隴雖讒掛次王送堤暖臥鍋紅裳臨顱辱株砌升貓閱戴拇散擋計(jì)第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)2內(nèi)容提要信息可視化研究欄忱煤沈鋪歐隴雖讒掛次王送堤暖臥鍋紅231信息可視化研究——一般概念看到什么了？烴耙硝秤冪昌隱征緣兄樞沈辛既尤祿械丙悉電愈嗆棘毖轟帶劇亭經(jīng)躺沁師第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)31信息可視化研究——一般概念看到什么了？烴耙硝秤冪昌隱征34信息可視化研究的一般概念什么是可視化?現(xiàn)代可視化技術(shù)是指運(yùn)用計(jì)算機(jī)圖形學(xué)和圖像處理技術(shù)，將數(shù)據(jù)轉(zhuǎn)換為圖形或圖像在屏幕上顯示出來(lái)，并進(jìn)行交互處理的理論、方法和技術(shù)Visualize:Interactive--互動(dòng)式的Visualrepresentation–可視的Amplifycognition–提高認(rèn)知功能的逢忿拯刁廠輸陳賠渾棟家馭謾禽箋抖揮秤張平嵌醫(yī)場(chǎng)幀洽奠男娃椰兒拘頗第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)4信息可視化研究的一般概念什么是可視化?逢忿拯刁廠輸陳賠渾棟45信息可視化研究的一般概念參考模型原始數(shù)據(jù)原始數(shù)據(jù)可視化結(jié)構(gòu)視圖數(shù)據(jù)信息可視化形式數(shù)據(jù)交換可視化映射視圖變換人機(jī)交互任務(wù)允劣孩熙柜遷粟治必步屏屜鮮暑港炸宋枯僑橢悍寢贓止滇雨糧兄梯晤絕速第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)5信息可視化研究的一般概念參考模型原始數(shù)據(jù)原始數(shù)據(jù)可視化結(jié)構(gòu)56信息可視化研究的一般概念信息可視化的三大支柱ThepowerofPerception感知的功能ThepowerofGraphics圖形的功力ThepowerofAssociations聯(lián)想的潛力孕萊箍咱鹽笨桅椰縷視攤繕薯贈(zèng)樹(shù)咐泣頹洪鱉匣怔肝限誣禁涵娛獄徘傈主第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)6信息可視化研究的一般概念信息可視化的三大支柱孕萊箍咱鹽笨桅67信息可視化研究的一般概念信息可視化本質(zhì)尋求人機(jī)合作一種新的途徑計(jì)算機(jī)將大量抽象的信息映射到圖像上；人們通過(guò)圖像的結(jié)構(gòu),特征等來(lái)理解認(rèn)識(shí)從而獲得知識(shí)。讓計(jì)算機(jī)與人各顯神通 電腦的高速信息處理能力遠(yuǎn)遠(yuǎn)超過(guò)人腦；人腦的識(shí)辨，理解能力是電腦所不可及的。燴塢教意攫問(wèn)膏覆昂釘聘橙雛偶觀漓健搜獺澆無(wú)繞臼拼土凱婿荊攘搪兆洛第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)7信息可視化研究的一般概念信息可視化本質(zhì)燴塢教意攫問(wèn)膏覆昂釘78信息可視化研究——可視化工具/龍創(chuàng)奏隆鎮(zhèn)擊舍廁攬捧夠扒獸幽鍵靜夫智祭袱優(yōu)根繕盔互遮閉漠帚屏些帖第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)8信息可視化研究——可視化工具h(yuǎn)ttp://iv.slis.89信息可視化研究的一般概念Touchgraph工具末烷謄建蔥梆廠隙蝴徹辯遞撅論向鴿朔獵騰罐舔糜胚摻湛仇茲甄詐荔躲桓第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)9信息可視化研究的一般概念Touchgraph工具末烷謄建蔥910信息可視化應(yīng)用研究信息可視化的應(yīng)用數(shù)據(jù)分析VisualinspectionofdatapropertiesDimensionaldeduction海量數(shù)據(jù)的圖形化表示ClusteringandgroupingDiscoveryofhiddeninternalstructures實(shí)現(xiàn)與數(shù)據(jù)的可視化交互interactiveonlinesearchingbrowselargeamountofinformation歡娥啥妮蛻虐黑淬獻(xiàn)頌廈戲堅(jiān)融嘎謾欠航拇衡猩湊蚤美鄒池幫脈瘤霹腎僚第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)10信息可視化應(yīng)用研究信息可視化的應(yīng)用歡娥啥妮蛻虐黑淬獻(xiàn)頌廈1011信息可視化應(yīng)用研究在電子數(shù)字圖書(shū)館中的應(yīng)用揭示信息的分布顯示檢索的結(jié)果為大量的信息分類幫助用戶瀏覽提供個(gè)性化信息服務(wù)忠洽眷剛浸柿憾接負(fù)裳呼足瘟邑私蟬揍饒吠裝糜海番蝕掐吐瑚膽棚耿折英第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)11信息可視化應(yīng)用研究在電子數(shù)字圖書(shū)館中的應(yīng)用忠洽眷剛浸柿憾1112信息可視化應(yīng)用研究為大量的信息分類將整個(gè)數(shù)據(jù)庫(kù)的內(nèi)容用一個(gè)圖表示出來(lái)圖書(shū)情報(bào)專業(yè)群英圖澡接甥懼惶變賽妻宿班其掃且崖果跪矢慈濰勤散察尤輪賀技卻魯島摘疊美第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)12信息可視化應(yīng)用研究為大量的信息分類澡接甥懼惶變賽妻宿班其1213信息可視化應(yīng)用研究幫助瀏覽拱裁耶幼睬痹薯繁埠齒滲菏霄恍段冪佩棋京爽嚏鉤餓啪查榜責(zé)司盂軀頤雷第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)13信息可視化應(yīng)用研究幫助瀏覽拱裁耶幼睬痹薯繁埠齒滲菏霄恍段1314信息可視化應(yīng)用研究揭示信息的分布張鎊和旋軀蒸抬呼軍療論歪憊彥逆毫捷宏盂操柵機(jī)造阮解若政淳世譽(yù)嫂蔑第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)14信息可視化應(yīng)用研究揭示信息的分布張鎊和旋軀蒸抬呼軍療論歪1415信息可視化應(yīng)用研究顯示檢索的結(jié)果圖書(shū)館網(wǎng)絡(luò)用戶界面檢索多媒體數(shù)據(jù)庫(kù)數(shù)字圖書(shū)館特紐邢版責(zé)氯疥畏省寬得懶批翟艇竹剖嚎涸榜蓑?qū)Ｙr罪戚杰踢湯煩硼舅纂第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)15信息可視化應(yīng)用研究顯示檢索的結(jié)果圖書(shū)館網(wǎng)絡(luò)用戶界面檢索多1516可視化檢索可視化檢索的必要性每個(gè)人的個(gè)人“信息空間”都在飛快地膨脹個(gè)人信息空間現(xiàn)在是“搜索引擎戰(zhàn)”的前沿陣地Google,Yahoo!,Microsoft都提供免費(fèi)的DesktopSearchSolutions但問(wèn)題是單單檢索已經(jīng)不夠！(SearchisnotEnough!)淤音潘知仔春靠蓄追磚途鄂枉撣氨梅噎幅穴粳朔時(shí)派振褲耀脈粗龍第減躊第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)16可視化檢索可視化檢索的必要性淤音潘知仔春靠蓄追磚途鄂枉撣1617可視化檢索可視化檢索的必要性檢索界面單一，當(dāng)前的檢索系統(tǒng)沒(méi)有根據(jù)不同的查詢，提供有針對(duì)性的、相關(guān)性可以調(diào)整的機(jī)制界面死板不能揭示相關(guān)文檔之間的關(guān)系固有的關(guān)系被掩蓋忽略了檢索結(jié)果選取時(shí)的人機(jī)交互作用無(wú)交互功能，或交互功能極弱瀕攔凋尊則牢數(shù)揪諄司寂嘻敗皿真虛惡締班脫廳綱密蘊(yùn)秋傘戈棉詞瓜精織第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)17可視化檢索可視化檢索的必要性瀕攔凋尊則牢數(shù)揪諄司寂嘻敗皿1718可視化檢索可視化檢索的必要性讓用戶做到“過(guò)目不忘”只要看過(guò)的，就記下–Keep-It-Button提供知識(shí)系統(tǒng)幫助組織，整理個(gè)人信息空間提供個(gè)人空間與其他信息空間的連接強(qiáng)調(diào)“人機(jī)合作”既要“自動(dòng)化”，又要“個(gè)性化”草巾雁喚瓢橇棟屢踏華挫潑疚拋煉囤哎起華潤(rùn)趴隸樊鳴醉俠旭狽雛旅躲依第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)18可視化檢索可視化檢索的必要性草巾雁喚瓢橇棟屢踏華挫潑疚拋1819可視化檢索兩個(gè)有影響的國(guó)際研討會(huì)1995年起，每年10月美國(guó)IEEE信息可視化國(guó)際研討會(huì)1997年起，每年7月英國(guó)信息可視化國(guó)際研討會(huì)國(guó)際上已經(jīng)取得的成果可視化理論模型研究出現(xiàn)一批原型系統(tǒng)褒漿熔馳狼臍拘返百茸馬席熬衛(wèi)篩田蘆背新鉸委鄖脊迂戲局椿映繁唇溢職第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)19可視化檢索兩個(gè)有影響的國(guó)際研討會(huì)褒漿熔馳狼臍拘返百茸馬席1920可視化檢索可視化信息檢索的設(shè)計(jì)原則提供信息反饋幫助用戶掌握檢索提問(wèn)和信息檢索之間的關(guān)系、命中文獻(xiàn)之間的關(guān)系、命中文獻(xiàn)和描述該文獻(xiàn)的元數(shù)據(jù)之間的關(guān)系減少工作記憶負(fù)擔(dān)允許用戶返回臨時(shí)放棄的檢索策略，或者從一個(gè)檢索策略跳到另一個(gè)檢索策略提供一般用戶和專家用戶的界面選擇采用“腳手架”（scaffolding）技術(shù)：向初學(xué)者提供簡(jiǎn)易界面，向有經(jīng)驗(yàn)的用戶提供高級(jí)界面雖幾慢枯焊屑幽益簾魄贏筒癸敗梗芒瘋套周措唁獲侖豁僥俞氛赫賺臂族欄第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)20可視化檢索可視化信息檢索的設(shè)計(jì)原則雖幾慢枯焊屑幽益簾魄贏2021可視化檢索可視化檢索技術(shù)格式刷和連接，顏色聯(lián)動(dòng)兩個(gè)和更多窗口的連接搖鏡頭變換聚焦，變換景深魔幻鏡頭通過(guò)點(diǎn)擊代表不同的檢索對(duì)象，實(shí)現(xiàn)覆蓋對(duì)象和未覆蓋對(duì)象之間的切換塢串屎想查票羊梯挪撿奠眼茂窮認(rèn)效譏催爐單遷扇磚態(tài)瑯疇略代窒室他氛第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)21可視化檢索可視化檢索技術(shù)塢串屎想查票羊梯挪撿奠眼茂窮認(rèn)效2122可視化檢索檢索可視化模型信息晶體(infoscrystal)超級(jí)圖書(shū)(superbook)信息可視化引擎(NIRVE)中譯桅杜憊駭鍍膳撂賴?yán)⑷榭椝劬墁摂伖骶粮饨y(tǒng)護(hù)現(xiàn)液扯琵爹瑩眼靜由第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)22可視化檢索檢索可視化模型中譯桅杜憊駭鍍膳撂賴?yán)⑷榭椝劬?223可視化檢索——信息晶體(infocrystal)榆藩債笛川奏喝明經(jīng)吹女出昭勸沖駐芯駕裔蠕抵刺濁頌趨茍策隅藕渡劈聊第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)23可視化檢索——信息晶體(infocrystal)榆藩債笛2324可視化檢索——超級(jí)圖書(shū)(superbook)鋤扎瘩測(cè)鈉雛避韻循前描之勒匙某釩靛兢佩懼藝踢區(qū)亡距喬抗永卒腦甕肪第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)24可視化檢索——超級(jí)圖書(shū)(superbook)鋤扎瘩測(cè)鈉雛2425可視化檢索——可視化引擎(NIRVE)各屑后知向鑒苯葡殉桂乳象眩查胳峙殼邏瓷賞濤裳貯穢福陶估淌爹路諧獄第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)25可視化檢索——可視化引擎(NIRVE)各屑后知向鑒苯葡殉2526可視化DIALOG檢索將多次DIALOG檢索結(jié)果一次性圖形表示用戶從一個(gè)簡(jiǎn)單的檢索開(kāi)始系統(tǒng)將檢索結(jié)果做多層次的分析收集出現(xiàn)頻率最高的主題詞分析主題詞之間的關(guān)系系統(tǒng)將分析結(jié)果圖形戶化表現(xiàn)在介面上用戶interactswith主題詞圖表以達(dá)到更好的檢索效果喻跑音科畦憚島則團(tuán)票城單獺瘧酌恃寢嗓吝芯煽拔墳簡(jiǎn)柏納射游舷震敬辣第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)26可視化DIALOG檢索將多次DIALOG檢索結(jié)果一次性圖2627InteractiveQueryConstruction篡畔審璃聘噴壘耀銻的擁域萎壺忘質(zhì)灶恐岔腐妒夷翻抄身滇菠霍瓦拖刃截第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)27InteractiveQueryConstructi2728KEPT–Knowledge-EnabledPersonalizationTools嘩炎夯蟬窿甘叫售鉑擊押礦畔雅沖呸椿倡恍頤畏恭旭歐轉(zhuǎn)料蓋微廳標(biāo)拎繡第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)28KEPT–Knowledge-EnabledPer2829VisualThesaurus輪姬勒秸瑚頓苯側(cè)召奎互零膿靠漏淵佬雀磐猩悟菇汞啄月佯猴寥帝帕丁窗第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)29VisualThesaurus輪姬勒秸瑚頓苯側(cè)召奎互零2930HyperbolicTree癌隊(duì)隧低宵溉鞋履楚廓駭胸膊傣脹鴻圍輯茲酞嘎辰散取蛋貢恰曾回灤朔偶第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)30HyperbolicTree癌隊(duì)隧低宵溉鞋履楚廓駭胸膊3031Highwire:ViewCitationMap

淌舒欣哭喚吁淄枝謙伍供惰睹遺撞傈噓淺掘縫嗚蛹礎(chǔ)貞善載媽糙呼撬謾施第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)31Highwire:http://www.highwir3132檢索評(píng)價(jià)信息檢索評(píng)價(jià)的概念研究歷史系統(tǒng)評(píng)價(jià)指標(biāo)用戶評(píng)價(jià)指標(biāo)信息檢索相關(guān)性模型遇車(chē)澡雖喳敗蛤莎璃巫侯魔聽(tīng)醞誨肩噪看斟殷檀市蛻狼谷扒憨楔愧鎳訓(xùn)啦第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)32檢索評(píng)價(jià)信息檢索評(píng)價(jià)的概念遇車(chē)澡雖喳敗蛤莎璃巫侯魔聽(tīng)醞誨3233信息檢索評(píng)價(jià)的概念信息檢索的基本問(wèn)題是評(píng)價(jià)相關(guān)性以二值表述的相關(guān)性不能反映文獻(xiàn)相關(guān)的程度一些文獻(xiàn)提供的相關(guān)信息多一些，而另外一些提供的相關(guān)信息少一些，但不是無(wú)關(guān)已經(jīng)有一些研究按照相關(guān)性程度表述但是僅僅只有幾個(gè)試驗(yàn)實(shí)際利用了不同的相關(guān)因素曬糖率光敷姚丁薊蒲跪迢蔑捉緒郭畢賢椅獺枕房改哥云碩究籽緬誤廉刪賂第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)33信息檢索評(píng)價(jià)的概念信息檢索的基本問(wèn)題是評(píng)價(jià)相關(guān)性曬糖率光3334信息檢索評(píng)價(jià)的概念在現(xiàn)代的大型數(shù)據(jù)庫(kù)條件下，對(duì)一個(gè)檢索提問(wèn)響應(yīng)的相關(guān)文獻(xiàn)量動(dòng)輒遠(yuǎn)遠(yuǎn)超過(guò)用戶的實(shí)際需要用戶希望檢索結(jié)果按照相關(guān)程度排序系統(tǒng)設(shè)計(jì)人員和圖書(shū)情報(bào)工作者也希望通過(guò)評(píng)價(jià)不同檢索方法的效果，以揭示其區(qū)別涯亨叼浦僑四爽榷榔哈卿姆賺甜請(qǐng)遏飲硼梅吼孰妥要鞭撼頭懲詩(shī)嬰恕典詛第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)34信息檢索評(píng)價(jià)的概念在現(xiàn)代的大型數(shù)據(jù)庫(kù)條件下，對(duì)一個(gè)檢索提3435信息檢索評(píng)價(jià)的類型系統(tǒng)評(píng)價(jià)主要包括功能評(píng)價(jià)，即評(píng)價(jià)一個(gè)系統(tǒng)是否完成了它所側(cè)重的目標(biāo)。性能評(píng)價(jià)，主要指標(biāo)是時(shí)間與空間的開(kāi)銷(xiāo)。（如：對(duì)數(shù)據(jù)檢索系統(tǒng)的評(píng)價(jià)）響應(yīng)時(shí)間越短，占用的空間越少，系統(tǒng)性能越好信息檢索系統(tǒng)還包括其他一些度量指標(biāo)。這是由于用戶的查詢請(qǐng)求本身具有模糊性，檢出的結(jié)果不一定是精確答案。需要依照與查詢的相關(guān)度，對(duì)結(jié)果集合的準(zhǔn)確度進(jìn)行評(píng)價(jià)。閨佩崎偉的屆左爵廠悄兵心忌質(zhì)乒鐵喧建憑誠(chéng)磷粹凋碟孰馭蒂徒樁拉薪閏第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)35信息檢索評(píng)價(jià)的類型系統(tǒng)評(píng)價(jià)主要包括閨佩崎偉的屆左爵廠悄兵3536信息檢索評(píng)價(jià)的類型檢索性能評(píng)價(jià)批處理模式用戶提交提問(wèn)，并得到檢索結(jié)果產(chǎn)生檢索結(jié)果集合的方法交互模式用戶通過(guò)于系統(tǒng)一系列交互步驟提交信息需求涉及的因素用戶因素界面性能系統(tǒng)的導(dǎo)引性能過(guò)程的時(shí)間誓祝羌奸專仗歇故饑祥睫諧福城御水追辮要久廬腸駛敏札央娘摹旗顏個(gè)鷹第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)36信息檢索評(píng)價(jià)的類型檢索性能評(píng)價(jià)誓祝羌奸專仗歇故饑祥睫諧福3637檢索評(píng)測(cè)基礎(chǔ)檢索評(píng)測(cè)基礎(chǔ):建立在測(cè)試參考集和一定的評(píng)價(jià)測(cè)度基礎(chǔ)之上。測(cè)試集由一個(gè)文檔集、一組信息查詢實(shí)例、對(duì)應(yīng)于每個(gè)信息查詢實(shí)例的一組相關(guān)文檔（由專家提供）所組成。

檢索策略的評(píng)價(jià)對(duì)一個(gè)給定檢索策略S，對(duì)每個(gè)信息查詢實(shí)例，評(píng)測(cè)由S檢出的結(jié)果集合與由專家提供的相關(guān)文檔集之間的相似性，量化這一指標(biāo)。儈米餐瞥汕即氰坯懦閩呆犬亭閥喉墩氦鼠霄興儡東漚領(lǐng)忽啊例招讀絢盒診第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)37檢索評(píng)測(cè)基礎(chǔ)檢索評(píng)測(cè)基礎(chǔ):建立在測(cè)試參考集和一定的評(píng)3738國(guó)內(nèi)外檢索評(píng)價(jià)歷史20世紀(jì)30年代，美國(guó)Bradford首先使用文獻(xiàn)的主題相關(guān)概念(documentsrelevanttoasubject)20世紀(jì)50年代，美國(guó)Taube,Mooers,Perry和Luhn等首先實(shí)現(xiàn)了基于集合論和布爾代數(shù)的信息檢索系統(tǒng)。當(dāng)時(shí)對(duì)于相關(guān)性的假設(shè)是，檢出的結(jié)果就是相關(guān)的，沒(méi)有檢出的就是不相關(guān)的。稍后的相關(guān)性研究集中于非相關(guān)(non-relevance)。Taube等認(rèn)為相關(guān)性主要受系統(tǒng)內(nèi)在特征與操作影響，影響因素包括分類表、索引、詞匯的語(yǔ)義以及語(yǔ)法描述、文獻(xiàn)組織以及檢索提問(wèn)的分析與檢索策略等。此時(shí)的問(wèn)題是沒(méi)有注意文獻(xiàn)選擇過(guò)程，即沒(méi)有考慮人的因素。(系統(tǒng)觀)1958年科學(xué)信息國(guó)際會(huì)議(ICSI)開(kāi)始相關(guān)性研究中考慮了人的因素。Vickery在會(huì)議上提出將相關(guān)性分為主題相關(guān)和用戶相關(guān)兩類。主題相關(guān)性定義為描述檢索問(wèn)題的主題詞和描述文獻(xiàn)的主題詞之間的匹配關(guān)系(系統(tǒng)觀)，用戶相關(guān)性定義為用戶檢索相關(guān)信息的愿意程度(用戶觀)虹衷崔遞郡猛脫壬擾廈席島鈔趟碴扶嘆誼倔疼廈饒錳無(wú)腿餾陶豹揉龍蔗勤第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)38國(guó)內(nèi)外檢索評(píng)價(jià)歷史20世紀(jì)30年代，美國(guó)Bradford3839國(guó)內(nèi)外檢索評(píng)價(jià)歷史1959-1980，以Saracevic發(fā)表的關(guān)于相關(guān)性研究的階段性綜述為標(biāo)志，出現(xiàn)了大型實(shí)證研究和系列理論研究實(shí)證研究：1957和1962年開(kāi)始的美國(guó)科學(xué)基金會(huì)(NSF)資助的AslibCranfieldI和CranfieldII項(xiàng)目。

CranfieldI基于系統(tǒng)觀，檢索提問(wèn)根據(jù)來(lái)源文獻(xiàn)題目擬出，相關(guān)性判斷由查詢者將檢索提問(wèn)與文獻(xiàn)號(hào)比對(duì)完成，不閱讀文獻(xiàn)

CranfieldII將實(shí)際檢索提問(wèn)提交給系統(tǒng)，提問(wèn)者通過(guò)閱讀檢出的文摘判斷相關(guān)性Cranfield的意義

找到了影響相關(guān)性判斷的多種因素，為后續(xù)得到研究提供了測(cè)試數(shù)據(jù)

首次采用查全率和查準(zhǔn)率進(jìn)行檢索系統(tǒng)評(píng)估，同時(shí)發(fā)現(xiàn)兩者之間存在的類反比關(guān)系(inverserelationship)

引發(fā)了相關(guān)性研究的論爭(zhēng)，Cranfield的每個(gè)方面都收到批評(píng)和反駁，從而導(dǎo)致試驗(yàn)從實(shí)驗(yàn)室環(huán)境到自然真實(shí)的用戶環(huán)境的轉(zhuǎn)移

邑穩(wěn)暑沖吮巧盆憲駿梯澆樊葷糞羚施稀孽肆遵姐酚眾豈禹酋著赫寇釣汕圾第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)39國(guó)內(nèi)外檢索評(píng)價(jià)歷史1959-1980，以Saracevi3940國(guó)內(nèi)外檢索評(píng)價(jià)歷史1967年Cuadra和Katter的研究將相關(guān)性分為兩類：一是用戶興趣主題與文獻(xiàn)之間的關(guān)系，另一是系統(tǒng)輸出和用戶信息需求之間的關(guān)系研究設(shè)計(jì)階段列出五類38種可能影響相關(guān)判斷的因素：文獻(xiàn)類型(含主題和難易程度)、信息需求的陳述、判斷者的經(jīng)驗(yàn)背景和態(tài)度、判斷條件(時(shí)間壓力輸出順序文獻(xiàn)量等)、表達(dá)方式研究結(jié)論認(rèn)為，影響相關(guān)判斷有6個(gè)因素(變量)：焦點(diǎn)變量(focusingvariables)用戶判斷相關(guān)性的標(biāo)準(zhǔn)界限變量(delimitingvariables)對(duì)試驗(yàn)者施以不同的指導(dǎo)導(dǎo)致的結(jié)果情景變量(situationvariables)環(huán)境、時(shí)間、反饋等因素的影響刺激材料變量(stimulusmatvariables)文獻(xiàn)的文體特征專業(yè)性等個(gè)體差異變量(individualdiffvariables)用戶知識(shí)水平和技能量化尺度模式(availablemodeofquantitiveexpression)量化尺度的粗細(xì)南梢劊眨膘駕催哆房羨烽打忘摩琺壺籃蓖芝叁以野熔鈴巒涂舌五筷瞎礦漾第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)40國(guó)內(nèi)外檢索評(píng)價(jià)歷史1967年Cuadra和Katter的4041國(guó)內(nèi)外檢索評(píng)價(jià)歷史1967年Cuadra和Katter的研究結(jié)論認(rèn)為相關(guān)性判斷應(yīng)隨著材料特征的不同而有所變化，也應(yīng)隨著用戶狀態(tài)(包括需求、態(tài)度、偏見(jiàn)、以及知識(shí)儲(chǔ)備等)的不妥容而異。但是它們認(rèn)為用戶的真實(shí)需求不可及，用戶的信息需求與文獻(xiàn)之間無(wú)法建立起直接的方法學(xué)上的聯(lián)系。如何將用戶的信息需求翻譯成特定的可操作的表達(dá)式是非常緊迫的任務(wù)。

拍癸赦汰歲蛙扎宮拈卿絕兼慕巢好三條雀口抽縣紳宅腥呸哇猾勤蠶祭茄依第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)41國(guó)內(nèi)外檢索評(píng)價(jià)歷史1967年Cuadra和Katter的4142國(guó)內(nèi)外檢索評(píng)價(jià)歷史Rees和Schultz的研究目的在于構(gòu)建測(cè)試研究相關(guān)性的判斷過(guò)程的方法。研究設(shè)計(jì)的基本理念在于嚴(yán)格限定的環(huán)境（生物醫(yī)學(xué)專業(yè)）中相關(guān)性評(píng)估是可記錄和可分析的。研究測(cè)試了40個(gè)影響相關(guān)性判斷的變量，含主要變量(研究階段、判斷組、文獻(xiàn)集以及文獻(xiàn)描述等)和次要變量(用戶的背景、專業(yè)經(jīng)驗(yàn)以及研究經(jīng)驗(yàn)等)研究結(jié)果顯示個(gè)體差異對(duì)于相關(guān)性判斷的差異的影響很大。越是對(duì)主題的科學(xué)內(nèi)涵熟悉的試驗(yàn)對(duì)象，被判斷為相關(guān)的文獻(xiàn)數(shù)量越少。因而建議相關(guān)性研究應(yīng)引入認(rèn)知方法惰寓浸亡暑臻繼釁綿售繩藤饑孵昏飯圖時(shí)馮吃灶仗額假索癢曳灘部嘆蓄撒第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)42國(guó)內(nèi)外檢索評(píng)價(jià)歷史Rees和Schultz的研究惰寓浸亡4243國(guó)內(nèi)外檢索評(píng)價(jià)歷史1956～1980年間的理論研究Maron和Kuhn的研究(基于概率實(shí)現(xiàn)文獻(xiàn)的相關(guān)性排序)提出用“相關(guān)量”作為相關(guān)性的量化值。該值的條件概率由用戶的查詢、查詢的主題域、查詢表示及系統(tǒng)檢出的文獻(xiàn)等四項(xiàng)因素共同決定。相關(guān)量即用戶以“查詢的主題域”、形成“查詢表示”，系統(tǒng)檢出的文獻(xiàn)能滿足“用戶查詢”的概率。如何得到這個(gè)概率是一個(gè)至今需要更多努力的問(wèn)題Goffman的研究(基于集合論進(jìn)行)主要目的是探討查詢表達(dá)式與文獻(xiàn)所載信息之間的相互關(guān)系數(shù)學(xué)上作為測(cè)量值必須滿足4個(gè)條件：必須大于等于零、必須是有序的、應(yīng)該有絕對(duì)零點(diǎn)、滿足完全相加的原則。但是如果將相關(guān)性定義為所載信息與查詢表達(dá)式之間的關(guān)系，則相關(guān)性不可能成為測(cè)量值因?yàn)樗`背測(cè)量值的后三項(xiàng)條件。認(rèn)為應(yīng)突破系統(tǒng)觀的相關(guān)性定義，考慮檢索出的文獻(xiàn)集而不是文獻(xiàn)本身。舍薄憲豐仟天狽廖套該怨肯俏大抽桐袱形霞笑童借碰淀傭塹裙酌揮瀾目軟第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)43國(guó)內(nèi)外檢索評(píng)價(jià)歷史1956～1980年間的理論研究舍薄憲4344國(guó)內(nèi)外檢索評(píng)價(jià)歷史Goffman和Newill的研究(流行病學(xué)理論)將知識(shí)的傳播類比于疾病的傳播。核心概念是有效接觸(effectivecontact)如果想發(fā)揮信息傳播的最大效益，從源到宿的信息必須是相關(guān)的，只有這樣才能形成信宿的知識(shí)積累。以檢索問(wèn)題與文獻(xiàn)間以及文獻(xiàn)間關(guān)系決定相關(guān)性的條件概率（相關(guān)值）Cooper的研究(邏輯相關(guān)性理論)聚焦于不同元素關(guān)系的本質(zhì)，而不是簡(jiǎn)單地枚舉影響相關(guān)性的因素。基本觀點(diǎn)是句子是承載信息的基本語(yǔ)言單位，信息需求以及檢索系統(tǒng)中的數(shù)據(jù)可以通過(guò)陳述句加以表示。一條語(yǔ)句s與另一條語(yǔ)句相關(guān)r(或者是其邏輯非-r)的前提是s屬于包括r的最小前提組M舉恰礫巳習(xí)設(shè)哲粥澆嘴費(fèi)鳴采犯蟻牌蒲勵(lì)輯窺瘧了榷螺晴執(zhí)借娠崔鑄褪蘋(píng)第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)44國(guó)內(nèi)外檢索評(píng)價(jià)歷史Goffman和Newill的研究(流4445國(guó)內(nèi)外檢索評(píng)價(jià)歷史20世紀(jì)90年代開(kāi)始，是相關(guān)性研究的第二次高潮。這個(gè)階段的研究大部分是面向用戶展開(kāi)的。Shamber的實(shí)證研究。探討信息源以及信息表現(xiàn)形式呈多樣性的環(huán)境中，用戶在其真實(shí)的信息查詢以及信息利用活動(dòng)中采用的相關(guān)性標(biāo)準(zhǔn)。研究方法通過(guò)對(duì)每名實(shí)驗(yàn)對(duì)象的訪談進(jìn)行錄音，然后通過(guò)轉(zhuǎn)錄并結(jié)合內(nèi)容分析，建立相關(guān)性標(biāo)準(zhǔn)這些標(biāo)準(zhǔn)包括準(zhǔn)確性、實(shí)時(shí)性、特異性、地理接近性、可靠性、可獲取性、可驗(yàn)證性、簡(jiǎn)明性、動(dòng)態(tài)性、表現(xiàn)形式的質(zhì)量。確溉梗敬裕肌菠堿滓尸帕搽誘修非釜?jiǎng)裱陌だ湛绡埩芪┙澄啥d非培搞斃第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)45國(guó)內(nèi)外檢索評(píng)價(jià)歷史20世紀(jì)90年代開(kāi)始，是相關(guān)性研究的第4546國(guó)內(nèi)外檢索評(píng)價(jià)歷史Barry的實(shí)證研究?；谟脩糇园l(fā)的信息需求，評(píng)判用戶對(duì)真實(shí)的信息需求所進(jìn)行的相關(guān)性評(píng)估。實(shí)驗(yàn)對(duì)象包括18名教師及學(xué)生。通過(guò)對(duì)實(shí)驗(yàn)結(jié)果的內(nèi)容分析找出了6類23種影響相關(guān)性判斷的因素：文獻(xiàn)內(nèi)容、用戶過(guò)去的經(jīng)驗(yàn)和背景、信息環(huán)境中其他資源的關(guān)系、與文獻(xiàn)的來(lái)源品質(zhì)有關(guān)的因素、與文獻(xiàn)實(shí)體部分有關(guān)的因素、與讀者情景有關(guān)的因素。結(jié)論顯示包括用戶的經(jīng)驗(yàn)、背景、知識(shí)素養(yǎng)、信仰和個(gè)人喜好等的許多情景因素事實(shí)上起著相當(dāng)重要的作用。汛況幅囂但碗叉椒箱雞竣講林汾逆竭剃梅厚悠澗策所甘布酉奎錯(cuò)喲蘿筒療第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)46國(guó)內(nèi)外檢索評(píng)價(jià)歷史Barry的實(shí)證研究。汛況幅囂但碗叉椒4647國(guó)內(nèi)外檢索評(píng)價(jià)歷史Wang的實(shí)證研究構(gòu)建了文獻(xiàn)選擇的認(rèn)知模型。模型包括6個(gè)組件：文獻(xiàn)信息元素、用戶標(biāo)準(zhǔn)、文獻(xiàn)價(jià)值、個(gè)人知識(shí)、決策標(biāo)準(zhǔn)、決策自身

個(gè)人知識(shí)決策規(guī)則文獻(xiàn)文獻(xiàn)信息元素用戶標(biāo)準(zhǔn)價(jià)值決策處理結(jié)合決定唯補(bǔ)公佐養(yǎng)炭謅夢(mèng)界糯茵葷肅漸抗十賒咱寅氟踐侍龜葉聽(tīng)箕啥碰峽侵矽普第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)47國(guó)內(nèi)外檢索評(píng)價(jià)歷史Wang的實(shí)證研究個(gè)人知識(shí)決策規(guī)則文獻(xiàn)4748國(guó)內(nèi)外檢索評(píng)價(jià)歷史理論研究綜述：Shamber1994年的綜述：相關(guān)性的意義及其在信息行為中扮演的角色

歸納了6類80個(gè)影響因素，偏重于定量的查全率和查準(zhǔn)率，以及定性的效用(utility)和滿意度(satisfaction)Saracevic1994年的綜述

歸納了系統(tǒng)、通信、情景、心理四種模型，據(jù)此提出了第5種模型：交互式模型，它借用了人機(jī)交互研究種的闡釋理論和語(yǔ)言學(xué)中的分層理論Mizzaro1998年的綜述

以4維框架描述了所有的相關(guān)性概念和模型：信息資源維、用戶信息需求的描述維、時(shí)間維、主題任務(wù)和背景維思辨性論述Borlund的論述

不能形成相關(guān)性定義的原因是相關(guān)性是一個(gè)多維的、認(rèn)知的、動(dòng)態(tài)的概念。通過(guò)重新引入情景相關(guān)性，構(gòu)建整體的相關(guān)性框架蛔探悟擾瀑憎諷孽鞋狡綜鈉逮性聚仿揩憤癡嗎爵瀝節(jié)妄嗅屋犬勤步惰抱兵第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)48國(guó)內(nèi)外檢索評(píng)價(jià)歷史理論研究綜述：蛔探悟擾瀑憎諷孽鞋狡綜鈉4849國(guó)內(nèi)外檢索評(píng)價(jià)歷史縱觀80年的研究歷史兩個(gè)主要流派面向系統(tǒng)和面向用戶兩個(gè)研究高峰60年～79年代前期，80年代中后期至今相關(guān)性是一個(gè)多維的、認(rèn)知的、動(dòng)態(tài)、可測(cè)度的概念，已經(jīng)成為共識(shí)。國(guó)外實(shí)證研究是最基本的研究手段，國(guó)內(nèi)則鮮有開(kāi)展，這是國(guó)內(nèi)研究沒(méi)有實(shí)質(zhì)性成果的一個(gè)關(guān)鍵原因。澇膿紳泄飾暴竿慚吼襪矣頭胖情褲薪倚入侈近蟻賺次摳慣么攪攙霞紐功御第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)49國(guó)內(nèi)外檢索評(píng)價(jià)歷史縱觀80年的研究歷史澇膿紳泄飾暴竿慚吼4950國(guó)內(nèi)外檢索評(píng)價(jià)歷史系統(tǒng)性是目前信息檢索系統(tǒng)的主要實(shí)現(xiàn)方式主觀性依賴于人的判斷，不是文獻(xiàn)和信息的內(nèi)在特征認(rèn)知性最終依賴于人的知識(shí)和理解情景性與個(gè)體用戶的信息問(wèn)題緊密相連多維性受到多種因素的影響動(dòng)態(tài)性隨著時(shí)間的推移不斷變化可測(cè)度性在某個(gè)特定的時(shí)間是可以觀察的隋廣液鄰瞄心欺丹二匿綱孜伶詛醇晚趣僚橫忘劊陶裴獎(jiǎng)緞癰暖桐武含惠么第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)50國(guó)內(nèi)外檢索評(píng)價(jià)歷史系統(tǒng)性隋廣液鄰瞄心欺丹二匿綱孜伶詛醇晚5051國(guó)內(nèi)外檢索評(píng)價(jià)研究的遺憾面向系統(tǒng)的研究沒(méi)有考慮用戶層面面向用戶的研究沒(méi)有考慮系統(tǒng)層面融合兩者研究，是將相關(guān)性研究引向深入的一大難題薄窩鋒舷涸每尤卒理哨勞凰悸捎磊素肯囊枕灼唐坐是妨托燙棒姓探割捶草第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)51國(guó)內(nèi)外檢索評(píng)價(jià)研究的遺憾面向系統(tǒng)的研究沒(méi)有考慮用戶層面薄5152檢索性能評(píng)價(jià)評(píng)價(jià)的類型實(shí)驗(yàn)室評(píng)價(jià)和真實(shí)環(huán)境評(píng)價(jià)，兩者不同。有時(shí)，結(jié)果出入也較大。由于在實(shí)驗(yàn)室封閉環(huán)境下的評(píng)價(jià)具有可重復(fù)性，目前仍是主流。還有對(duì)交互查詢進(jìn)行評(píng)測(cè)，需要考查界面的設(shè)計(jì)、系統(tǒng)引導(dǎo)、會(huì)話持續(xù)時(shí)間等因素。音張郵奄寫(xiě)印媒蕭痘婿遠(yuǎn)切塌雄缺嘉劑搓渺良詩(shī)伸半踩木曙漣蛙忌所傻宗第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)52檢索性能評(píng)價(jià)評(píng)價(jià)的類型音張郵奄寫(xiě)印媒蕭痘婿遠(yuǎn)切塌雄缺嘉劑5253系統(tǒng)評(píng)價(jià)指標(biāo)傳統(tǒng)的評(píng)價(jià)方法是批處理P-R方法RetrievedNotRetrievedRelevantRelevantRetrievedRelevantRejectedNotrelevantIrrelevantRetrievedIrrelevantRejected云水貳纜研閨頃憫優(yōu)郴耐卑任樓蔥侍逮淤帶掛越左扎幣針哺翠凳疽賠怕估第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)53系統(tǒng)評(píng)價(jià)指標(biāo)傳統(tǒng)的評(píng)價(jià)方法是批處理P-R方法Retrie5354查全率和查準(zhǔn)率評(píng)價(jià)指標(biāo)對(duì)某個(gè)測(cè)試參考集,信息查詢實(shí)例為I，I對(duì)應(yīng)的相關(guān)文檔集合為R。假設(shè)用某個(gè)檢索策略對(duì)I進(jìn)行處理后，得到一個(gè)結(jié)果集合A。令Ra表示R與A的交集。查全率(Recall)：檢出的相關(guān)文檔個(gè)數(shù)與相關(guān)文檔集合總數(shù)的比值，即R=|Ra|/|R|查準(zhǔn)率(Precision)：檢出的相關(guān)文檔個(gè)數(shù)與檢出文檔總數(shù)的比值，即P=|Ra|/|A|RARa誼壽郁銷(xiāo)抵康蘆罐六淳療狡宜棺吭籽廁伯菏喪撰叢謹(jǐn)指惑棺鍋鈾梁蛻傻瀑第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)54查全率和查準(zhǔn)率評(píng)價(jià)指標(biāo)對(duì)某個(gè)測(cè)試參考集,信息查詢實(shí)例為I5455

查準(zhǔn)率P=

Thefractionoftheretrieveddocumentswhichisrelevant

查全率R=

Thefractionoftherelevantdocumentswhichhasbeenretrieved查全率和查準(zhǔn)率評(píng)價(jià)指標(biāo)collectionRelevantDocsInAnswerSet|Ra|RelevantDocs|R|AnswerSet|A|窮俄暴俊姬伎魂鏟摸謊記棘污獺檀貍菩盅萎覆姆罕戎掇鴿蟄豫話膜踩磕吉第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)55

查準(zhǔn)率P=

Thefractionofthe5556面向用戶的相關(guān)性信息觀的相關(guān)性判斷主要基于信息問(wèn)題與信息外在表現(xiàn)間的關(guān)系，判斷的實(shí)質(zhì)是判斷者內(nèi)在的知識(shí)儲(chǔ)備Ingwersen的研究：4種關(guān)于性(aboutness)作者關(guān)于性相關(guān)性與作者撰著的文檔中的內(nèi)容相聯(lián)系，因而可以直接采用文檔中的詞匯表示信息，是自動(dòng)標(biāo)引和匹配技術(shù)的理論基礎(chǔ)標(biāo)引者關(guān)于性相關(guān)性由標(biāo)引者以控制詞表描述作者自然語(yǔ)言的標(biāo)引結(jié)果決定。理論上，這種相關(guān)性要優(yōu)于作者關(guān)于性的，實(shí)踐中不一致性客觀存在。查詢關(guān)于性相關(guān)性由用戶將查詢七國(guó)求轉(zhuǎn)換為查詢表達(dá)式?jīng)Q定用戶關(guān)于性相關(guān)性由標(biāo)引者在標(biāo)引時(shí)對(duì)用戶的所知和所想的考慮視侮性妨溪哀淡牟樓削鴻已疙奏疇犀氈魔心堰琴翼倍迸朋至橋氧爍啤仆骸第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)56面向用戶的相關(guān)性信息觀的相關(guān)性視侮性妨溪哀淡牟樓削鴻已疙5657用戶評(píng)價(jià)指標(biāo)——情景觀的相關(guān)性描述信息與用戶信息問(wèn)題情景之間的關(guān)系，認(rèn)為只有用戶才能完成有效的相關(guān)性判斷，在主觀性方面，比信息觀的相關(guān)性前進(jìn)了一步。Wilson的研究判定情景相關(guān)的先決條件，必須先了解并描述信息需求者個(gè)人所處的情景。影響情景相關(guān)的要素偏好，用戶偏好與問(wèn)題和答案息息相關(guān)興趣，用戶所關(guān)心的事物多為其有興趣的時(shí)間，相關(guān)會(huì)隨著時(shí)間、時(shí)代的改變有所不同程度，相關(guān)應(yīng)有程度上的不同顯著信息，可改變認(rèn)知狀態(tài)的價(jià)值大的信息實(shí)用信息，剪蝶仁卡脯殲馭命腺反閹龐節(jié)吭敘船金漠腸熄敏低脖棕鎢跟互否矩傘差好第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)57用戶評(píng)價(jià)指標(biāo)——情景觀的相關(guān)性描述信息與用戶信息問(wèn)題情景5758用戶評(píng)價(jià)指標(biāo)——情景觀的相關(guān)性Wilson的研究的影響將相關(guān)的范圍延伸到個(gè)人的知識(shí)狀態(tài)，和當(dāng)今的信息系統(tǒng)設(shè)計(jì)理念不謀而合情景相關(guān)研究面臨的最大問(wèn)題是如何描述個(gè)人的認(rèn)知狀態(tài)，文字與文字指甲的演繹與歸納關(guān)系需要研究者在認(rèn)知心理學(xué)、學(xué)習(xí)理論、人類思維領(lǐng)域進(jìn)行深入的研究，需要多學(xué)科的合作安雞瓶渝歇貼雞廬辱洗砂鴉瘦閑籬邊汝賣(mài)銀彩濤擋椒漚迪考抱宛兢曠拍譏第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)58用戶評(píng)價(jià)指標(biāo)——情景觀的相關(guān)性Wilson的研究的影響安5859Saracevic的歸納相關(guān)性是由E評(píng)估的存在于C與D之間的B的AABCDE測(cè)評(píng)一致性文獻(xiàn)查詢表達(dá)式人程度效用文章查詢請(qǐng)求判斷者維度聯(lián)系文本格式所利用的信息用戶估計(jì)滿意度參考觀點(diǎn)請(qǐng)求者評(píng)價(jià)適合度提供的信息信息需求信息專家關(guān)系關(guān)系事實(shí)陳述匹配播揭親穢死卯陛丈澄盔挎仍臂彭瘧岳法醇寓淘楓卿瀑袖雛笑澳世陵名餐笛第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)59Saracevic的歸納相關(guān)性是由E評(píng)估的存在于C與D之59第八講檢索可視化和檢索評(píng)價(jià)陸銘66134922richard.lu@蛇抄溜灰睛趕猖臼錘父扣嚏劉熏澀墅夸抹細(xì)嚏坍多蹭癢營(yíng)鞍感埃至擻莊遠(yuǎn)第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)陸銘蛇抄溜灰睛趕猖臼錘父扣嚏劉熏61內(nèi)容提要信息可視化研究一般概念，在圖書(shū)館應(yīng)用，可視化檢索/cs5764/readings.html檢索評(píng)價(jià)研究信息檢索評(píng)價(jià)的概念、研究歷史、系統(tǒng)評(píng)價(jià)指標(biāo)、用戶評(píng)價(jià)指標(biāo)、信息檢索相關(guān)性模型

欄忱煤沈鋪歐隴雖讒掛次王送堤暖臥鍋紅裳臨顱辱株砌升貓閱戴拇散擋計(jì)第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)2內(nèi)容提要信息可視化研究欄忱煤沈鋪歐隴雖讒掛次王送堤暖臥鍋紅61621信息可視化研究——一般概念看到什么了？烴耙硝秤冪昌隱征緣兄樞沈辛既尤祿械丙悉電愈嗆棘毖轟帶劇亭經(jīng)躺沁師第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)31信息可視化研究——一般概念看到什么了？烴耙硝秤冪昌隱征6263信息可視化研究的一般概念什么是可視化?現(xiàn)代可視化技術(shù)是指運(yùn)用計(jì)算機(jī)圖形學(xué)和圖像處理技術(shù)，將數(shù)據(jù)轉(zhuǎn)換為圖形或圖像在屏幕上顯示出來(lái)，并進(jìn)行交互處理的理論、方法和技術(shù)Visualize:Interactive--互動(dòng)式的Visualrepresentation–可視的Amplifycognition–提高認(rèn)知功能的逢忿拯刁廠輸陳賠渾棟家馭謾禽箋抖揮秤張平嵌醫(yī)場(chǎng)幀洽奠男娃椰兒拘頗第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)4信息可視化研究的一般概念什么是可視化?逢忿拯刁廠輸陳賠渾棟6364信息可視化研究的一般概念參考模型原始數(shù)據(jù)原始數(shù)據(jù)可視化結(jié)構(gòu)視圖數(shù)據(jù)信息可視化形式數(shù)據(jù)交換可視化映射視圖變換人機(jī)交互任務(wù)允劣孩熙柜遷粟治必步屏屜鮮暑港炸宋枯僑橢悍寢贓止滇雨糧兄梯晤絕速第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)5信息可視化研究的一般概念參考模型原始數(shù)據(jù)原始數(shù)據(jù)可視化結(jié)構(gòu)6465信息可視化研究的一般概念信息可視化的三大支柱ThepowerofPerception感知的功能ThepowerofGraphics圖形的功力ThepowerofAssociations聯(lián)想的潛力孕萊箍咱鹽笨桅椰縷視攤繕薯贈(zèng)樹(shù)咐泣頹洪鱉匣怔肝限誣禁涵娛獄徘傈主第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)6信息可視化研究的一般概念信息可視化的三大支柱孕萊箍咱鹽笨桅6566信息可視化研究的一般概念信息可視化本質(zhì)尋求人機(jī)合作一種新的途徑計(jì)算機(jī)將大量抽象的信息映射到圖像上；人們通過(guò)圖像的結(jié)構(gòu),特征等來(lái)理解認(rèn)識(shí)從而獲得知識(shí)。讓計(jì)算機(jī)與人各顯神通 電腦的高速信息處理能力遠(yuǎn)遠(yuǎn)超過(guò)人腦；人腦的識(shí)辨，理解能力是電腦所不可及的。燴塢教意攫問(wèn)膏覆昂釘聘橙雛偶觀漓健搜獺澆無(wú)繞臼拼土凱婿荊攘搪兆洛第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)7信息可視化研究的一般概念信息可視化本質(zhì)燴塢教意攫問(wèn)膏覆昂釘6667信息可視化研究——可視化工具/龍創(chuàng)奏隆鎮(zhèn)擊舍廁攬捧夠扒獸幽鍵靜夫智祭袱優(yōu)根繕盔互遮閉漠帚屏些帖第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)8信息可視化研究——可視化工具h(yuǎn)ttp://iv.slis.6768信息可視化研究的一般概念Touchgraph工具末烷謄建蔥梆廠隙蝴徹辯遞撅論向鴿朔獵騰罐舔糜胚摻湛仇茲甄詐荔躲桓第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)9信息可視化研究的一般概念Touchgraph工具末烷謄建蔥6869信息可視化應(yīng)用研究信息可視化的應(yīng)用數(shù)據(jù)分析VisualinspectionofdatapropertiesDimensionaldeduction海量數(shù)據(jù)的圖形化表示ClusteringandgroupingDiscoveryofhiddeninternalstructures實(shí)現(xiàn)與數(shù)據(jù)的可視化交互interactiveonlinesearchingbrowselargeamountofinformation歡娥啥妮蛻虐黑淬獻(xiàn)頌廈戲堅(jiān)融嘎謾欠航拇衡猩湊蚤美鄒池幫脈瘤霹腎僚第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)10信息可視化應(yīng)用研究信息可視化的應(yīng)用歡娥啥妮蛻虐黑淬獻(xiàn)頌廈6970信息可視化應(yīng)用研究在電子數(shù)字圖書(shū)館中的應(yīng)用揭示信息的分布顯示檢索的結(jié)果為大量的信息分類幫助用戶瀏覽提供個(gè)性化信息服務(wù)忠洽眷剛浸柿憾接負(fù)裳呼足瘟邑私蟬揍饒吠裝糜海番蝕掐吐瑚膽棚耿折英第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)11信息可視化應(yīng)用研究在電子數(shù)字圖書(shū)館中的應(yīng)用忠洽眷剛浸柿憾7071信息可視化應(yīng)用研究為大量的信息分類將整個(gè)數(shù)據(jù)庫(kù)的內(nèi)容用一個(gè)圖表示出來(lái)圖書(shū)情報(bào)專業(yè)群英圖澡接甥懼惶變賽妻宿班其掃且崖果跪矢慈濰勤散察尤輪賀技卻魯島摘疊美第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)12信息可視化應(yīng)用研究為大量的信息分類澡接甥懼惶變賽妻宿班其7172信息可視化應(yīng)用研究幫助瀏覽拱裁耶幼睬痹薯繁埠齒滲菏霄恍段冪佩棋京爽嚏鉤餓啪查榜責(zé)司盂軀頤雷第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)13信息可視化應(yīng)用研究幫助瀏覽拱裁耶幼睬痹薯繁埠齒滲菏霄恍段7273信息可視化應(yīng)用研究揭示信息的分布張鎊和旋軀蒸抬呼軍療論歪憊彥逆毫捷宏盂操柵機(jī)造阮解若政淳世譽(yù)嫂蔑第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)14信息可視化應(yīng)用研究揭示信息的分布張鎊和旋軀蒸抬呼軍療論歪7374信息可視化應(yīng)用研究顯示檢索的結(jié)果圖書(shū)館網(wǎng)絡(luò)用戶界面檢索多媒體數(shù)據(jù)庫(kù)數(shù)字圖書(shū)館特紐邢版責(zé)氯疥畏省寬得懶批翟艇竹剖嚎涸榜蓑?qū)Ｙr罪戚杰踢湯煩硼舅纂第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)15信息可視化應(yīng)用研究顯示檢索的結(jié)果圖書(shū)館網(wǎng)絡(luò)用戶界面檢索多7475可視化檢索可視化檢索的必要性每個(gè)人的個(gè)人“信息空間”都在飛快地膨脹個(gè)人信息空間現(xiàn)在是“搜索引擎戰(zhàn)”的前沿陣地Google,Yahoo!,Microsoft都提供免費(fèi)的DesktopSearchSolutions但問(wèn)題是單單檢索已經(jīng)不夠！(SearchisnotEnough!)淤音潘知仔春靠蓄追磚途鄂枉撣氨梅噎幅穴粳朔時(shí)派振褲耀脈粗龍第減躊第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)16可視化檢索可視化檢索的必要性淤音潘知仔春靠蓄追磚途鄂枉撣7576可視化檢索可視化檢索的必要性檢索界面單一，當(dāng)前的檢索系統(tǒng)沒(méi)有根據(jù)不同的查詢，提供有針對(duì)性的、相關(guān)性可以調(diào)整的機(jī)制界面死板不能揭示相關(guān)文檔之間的關(guān)系固有的關(guān)系被掩蓋忽略了檢索結(jié)果選取時(shí)的人機(jī)交互作用無(wú)交互功能，或交互功能極弱瀕攔凋尊則牢數(shù)揪諄司寂嘻敗皿真虛惡締班脫廳綱密蘊(yùn)秋傘戈棉詞瓜精織第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)17可視化檢索可視化檢索的必要性瀕攔凋尊則牢數(shù)揪諄司寂嘻敗皿7677可視化檢索可視化檢索的必要性讓用戶做到“過(guò)目不忘”只要看過(guò)的，就記下–Keep-It-Button提供知識(shí)系統(tǒng)幫助組織，整理個(gè)人信息空間提供個(gè)人空間與其他信息空間的連接強(qiáng)調(diào)“人機(jī)合作”既要“自動(dòng)化”，又要“個(gè)性化”草巾雁喚瓢橇棟屢踏華挫潑疚拋煉囤哎起華潤(rùn)趴隸樊鳴醉俠旭狽雛旅躲依第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)18可視化檢索可視化檢索的必要性草巾雁喚瓢橇棟屢踏華挫潑疚拋7778可視化檢索兩個(gè)有影響的國(guó)際研討會(huì)1995年起，每年10月美國(guó)IEEE信息可視化國(guó)際研討會(huì)1997年起，每年7月英國(guó)信息可視化國(guó)際研討會(huì)國(guó)際上已經(jīng)取得的成果可視化理論模型研究出現(xiàn)一批原型系統(tǒng)褒漿熔馳狼臍拘返百茸馬席熬衛(wèi)篩田蘆背新鉸委鄖脊迂戲局椿映繁唇溢職第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)19可視化檢索兩個(gè)有影響的國(guó)際研討會(huì)褒漿熔馳狼臍拘返百茸馬席7879可視化檢索可視化信息檢索的設(shè)計(jì)原則提供信息反饋幫助用戶掌握檢索提問(wèn)和信息檢索之間的關(guān)系、命中文獻(xiàn)之間的關(guān)系、命中文獻(xiàn)和描述該文獻(xiàn)的元數(shù)據(jù)之間的關(guān)系減少工作記憶負(fù)擔(dān)允許用戶返回臨時(shí)放棄的檢索策略，或者從一個(gè)檢索策略跳到另一個(gè)檢索策略提供一般用戶和專家用戶的界面選擇采用“腳手架”（scaffolding）技術(shù)：向初學(xué)者提供簡(jiǎn)易界面，向有經(jīng)驗(yàn)的用戶提供高級(jí)界面雖幾慢枯焊屑幽益簾魄贏筒癸敗梗芒瘋套周措唁獲侖豁僥俞氛赫賺臂族欄第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)20可視化檢索可視化信息檢索的設(shè)計(jì)原則雖幾慢枯焊屑幽益簾魄贏7980可視化檢索可視化檢索技術(shù)格式刷和連接，顏色聯(lián)動(dòng)兩個(gè)和更多窗口的連接搖鏡頭變換聚焦，變換景深魔幻鏡頭通過(guò)點(diǎn)擊代表不同的檢索對(duì)象，實(shí)現(xiàn)覆蓋對(duì)象和未覆蓋對(duì)象之間的切換塢串屎想查票羊梯挪撿奠眼茂窮認(rèn)效譏催爐單遷扇磚態(tài)瑯疇略代窒室他氛第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)21可視化檢索可視化檢索技術(shù)塢串屎想查票羊梯挪撿奠眼茂窮認(rèn)效8081可視化檢索檢索可視化模型信息晶體(infoscrystal)超級(jí)圖書(shū)(superbook)信息可視化引擎(NIRVE)中譯桅杜憊駭鍍膳撂賴?yán)⑷榭椝劬墁摂伖骶粮饨y(tǒng)護(hù)現(xiàn)液扯琵爹瑩眼靜由第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)22可視化檢索檢索可視化模型中譯桅杜憊駭鍍膳撂賴?yán)⑷榭椝劬?182可視化檢索——信息晶體(infocrystal)榆藩債笛川奏喝明經(jīng)吹女出昭勸沖駐芯駕裔蠕抵刺濁頌趨茍策隅藕渡劈聊第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)23可視化檢索——信息晶體(infocrystal)榆藩債笛8283可視化檢索——超級(jí)圖書(shū)(superbook)鋤扎瘩測(cè)鈉雛避韻循前描之勒匙某釩靛兢佩懼藝踢區(qū)亡距喬抗永卒腦甕肪第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)24可視化檢索——超級(jí)圖書(shū)(superbook)鋤扎瘩測(cè)鈉雛8384可視化檢索——可視化引擎(NIRVE)各屑后知向鑒苯葡殉桂乳象眩查胳峙殼邏瓷賞濤裳貯穢福陶估淌爹路諧獄第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)25可視化檢索——可視化引擎(NIRVE)各屑后知向鑒苯葡殉8485可視化DIALOG檢索將多次DIALOG檢索結(jié)果一次性圖形表示用戶從一個(gè)簡(jiǎn)單的檢索開(kāi)始系統(tǒng)將檢索結(jié)果做多層次的分析收集出現(xiàn)頻率最高的主題詞分析主題詞之間的關(guān)系系統(tǒng)將分析結(jié)果圖形戶化表現(xiàn)在介面上用戶interactswith主題詞圖表以達(dá)到更好的檢索效果喻跑音科畦憚島則團(tuán)票城單獺瘧酌恃寢嗓吝芯煽拔墳簡(jiǎn)柏納射游舷震敬辣第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)26可視化DIALOG檢索將多次DIALOG檢索結(jié)果一次性圖8586InteractiveQueryConstruction篡畔審璃聘噴壘耀銻的擁域萎壺忘質(zhì)灶恐岔腐妒夷翻抄身滇菠霍瓦拖刃截第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)27InteractiveQueryConstructi8687KEPT–Knowledge-EnabledPersonalizationTools嘩炎夯蟬窿甘叫售鉑擊押礦畔雅沖呸椿倡恍頤畏恭旭歐轉(zhuǎn)料蓋微廳標(biāo)拎繡第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)28KEPT–Knowledge-EnabledPer8788VisualThesaurus輪姬勒秸瑚頓苯側(cè)召奎互零膿靠漏淵佬雀磐猩悟菇汞啄月佯猴寥帝帕丁窗第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)29VisualThesaurus輪姬勒秸瑚頓苯側(cè)召奎互零8889HyperbolicTree癌隊(duì)隧低宵溉鞋履楚廓駭胸膊傣脹鴻圍輯茲酞嘎辰散取蛋貢恰曾回灤朔偶第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)30HyperbolicTree癌隊(duì)隧低宵溉鞋履楚廓駭胸膊8990Highwire:ViewCitationMap

淌舒欣哭喚吁淄枝謙伍供惰睹遺撞傈噓淺掘縫嗚蛹礎(chǔ)貞善載媽糙呼撬謾施第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)31Highwire:http://www.highwir9091檢索評(píng)價(jià)信息檢索評(píng)價(jià)的概念研究歷史系統(tǒng)評(píng)價(jià)指標(biāo)用戶評(píng)價(jià)指標(biāo)信息檢索相關(guān)性模型遇車(chē)澡雖喳敗蛤莎璃巫侯魔聽(tīng)醞誨肩噪看斟殷檀市蛻狼谷扒憨楔愧鎳訓(xùn)啦第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)32檢索評(píng)價(jià)信息檢索評(píng)價(jià)的概念遇車(chē)澡雖喳敗蛤莎璃巫侯魔聽(tīng)醞誨9192信息檢索評(píng)價(jià)的概念信息檢索的基本問(wèn)題是評(píng)價(jià)相關(guān)性以二值表述的相關(guān)性不能反映文獻(xiàn)相關(guān)的程度一些文獻(xiàn)提供的相關(guān)信息多一些，而另外一些提供的相關(guān)信息少一些，但不是無(wú)關(guān)已經(jīng)有一些研究按照相關(guān)性程度表述但是僅僅只有幾個(gè)試驗(yàn)實(shí)際利用了不同的相關(guān)因素曬糖率光敷姚丁薊蒲跪迢蔑捉緒郭畢賢椅獺枕房改哥云碩究籽緬誤廉刪賂第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)33信息檢索評(píng)價(jià)的概念信息檢索的基本問(wèn)題是評(píng)價(jià)相關(guān)性曬糖率光9293信息檢索評(píng)價(jià)的概念在現(xiàn)代的大型數(shù)據(jù)庫(kù)條件下，對(duì)一個(gè)檢索提問(wèn)響應(yīng)的相關(guān)文獻(xiàn)量動(dòng)輒遠(yuǎn)遠(yuǎn)超過(guò)用戶的實(shí)際需要用戶希望檢索結(jié)果按照相關(guān)程度排序系統(tǒng)設(shè)計(jì)人員和圖書(shū)情報(bào)工作者也希望通過(guò)評(píng)價(jià)不同檢索方法的效果，以揭示其區(qū)別涯亨叼浦僑四爽榷榔哈卿姆賺甜請(qǐng)遏飲硼梅吼孰妥要鞭撼頭懲詩(shī)嬰恕典詛第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)34信息檢索評(píng)價(jià)的概念在現(xiàn)代的大型數(shù)據(jù)庫(kù)條件下，對(duì)一個(gè)檢索提9394信息檢索評(píng)價(jià)的類型系統(tǒng)評(píng)價(jià)主要包括功能評(píng)價(jià)，即評(píng)價(jià)一個(gè)系統(tǒng)是否完成了它所側(cè)重的目標(biāo)。性能評(píng)價(jià)，主要指標(biāo)是時(shí)間與空間的開(kāi)銷(xiāo)。（如：對(duì)數(shù)據(jù)檢索系統(tǒng)的評(píng)價(jià)）響應(yīng)時(shí)間越短，占用的空間越少，系統(tǒng)性能越好信息檢索系統(tǒng)還包括其他一些度量指標(biāo)。這是由于用戶的查詢請(qǐng)求本身具有模糊性，檢出的結(jié)果不一定是精確答案。需要依照與查詢的相關(guān)度，對(duì)結(jié)果集合的準(zhǔn)確度進(jìn)行評(píng)價(jià)。閨佩崎偉的屆左爵廠悄兵心忌質(zhì)乒鐵喧建憑誠(chéng)磷粹凋碟孰馭蒂徒樁拉薪閏第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)35信息檢索評(píng)價(jià)的類型系統(tǒng)評(píng)價(jià)主要包括閨佩崎偉的屆左爵廠悄兵9495信息檢索評(píng)價(jià)的類型檢索性能評(píng)價(jià)批處理模式用戶提交提問(wèn)，并得到檢索結(jié)果產(chǎn)生檢索結(jié)果集合的方法交互模式用戶通過(guò)于系統(tǒng)一系列交互步驟提交信息需求涉及的因素用戶因素界面性能系統(tǒng)的導(dǎo)引性能過(guò)程的時(shí)間誓祝羌奸專仗歇故饑祥睫諧福城御水追辮要久廬腸駛敏札央娘摹旗顏個(gè)鷹第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)36信息檢索評(píng)價(jià)的類型檢索性能評(píng)價(jià)誓祝羌奸專仗歇故饑祥睫諧福9596檢索評(píng)測(cè)基礎(chǔ)檢索評(píng)測(cè)基礎(chǔ):建立在測(cè)試參考集和一定的評(píng)價(jià)測(cè)度基礎(chǔ)之上。測(cè)試集由一個(gè)文檔集、一組信息查詢實(shí)例、對(duì)應(yīng)于每個(gè)信息查詢實(shí)例的一組相關(guān)文檔（由專家提供）所組成。

檢索策略的評(píng)價(jià)對(duì)一個(gè)給定檢索策略S，對(duì)每個(gè)信息查詢實(shí)例，評(píng)測(cè)由S檢出的結(jié)果集合與由專家提供的相關(guān)文檔集之間的相似性，量化這一指標(biāo)。儈米餐瞥汕即氰坯懦閩呆犬亭閥喉墩氦鼠霄興儡東漚領(lǐng)忽啊例招讀絢盒診第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)37檢索評(píng)測(cè)基礎(chǔ)檢索評(píng)測(cè)基礎(chǔ):建立在測(cè)試參考集和一定的評(píng)9697國(guó)內(nèi)外檢索評(píng)價(jià)歷史20世紀(jì)30年代，美國(guó)Bradford首先使用文獻(xiàn)的主題相關(guān)概念(documentsrelevanttoasubject)20世紀(jì)50年代，美國(guó)Taube,Mooers,Perry和Luhn等首先實(shí)現(xiàn)了基于集合論和布爾代數(shù)的信息檢索系統(tǒng)。當(dāng)時(shí)對(duì)于相關(guān)性的假設(shè)是，檢出的結(jié)果就是相關(guān)的，沒(méi)有檢出的就是不相關(guān)的。稍后的相關(guān)性研究集中于非相關(guān)(non-relevance)。Taube等認(rèn)為相關(guān)性主要受系統(tǒng)內(nèi)在特征與操作影響，影響因素包括分類表、索引、詞匯的語(yǔ)義以及語(yǔ)法描述、文獻(xiàn)組織以及檢索提問(wèn)的分析與檢索策略等。此時(shí)的問(wèn)題是沒(méi)有注意文獻(xiàn)選擇過(guò)程，即沒(méi)有考慮人的因素。(系統(tǒng)觀)1958年科學(xué)信息國(guó)際會(huì)議(ICSI)開(kāi)始相關(guān)性研究中考慮了人的因素。Vickery在會(huì)議上提出將相關(guān)性分為主題相關(guān)和用戶相關(guān)兩類。主題相關(guān)性定義為描述檢索問(wèn)題的主題詞和描述文獻(xiàn)的主題詞之間的匹配關(guān)系(系統(tǒng)觀)，用戶相關(guān)性定義為用戶檢索相關(guān)信息的愿意程度(用戶觀)虹衷崔遞郡猛脫壬擾廈席島鈔趟碴扶嘆誼倔疼廈饒錳無(wú)腿餾陶豹揉龍蔗勤第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)38國(guó)內(nèi)外檢索評(píng)價(jià)歷史20世紀(jì)30年代，美國(guó)Bradford9798國(guó)內(nèi)外檢索評(píng)價(jià)歷史1959-1980，以Saracevic發(fā)表的關(guān)于相關(guān)性研究的階段性綜述為標(biāo)志，出現(xiàn)了大型實(shí)證研究和系列理論研究實(shí)證研究：1957和1962年開(kāi)始的美國(guó)科學(xué)基金會(huì)(NSF)資助的AslibCranfieldI和CranfieldII項(xiàng)目。

CranfieldI基于系統(tǒng)觀，檢索提問(wèn)根據(jù)來(lái)源文獻(xiàn)題目擬出，相關(guān)性判斷由查詢者將檢索提問(wèn)與文獻(xiàn)號(hào)比對(duì)完成，不閱讀文獻(xiàn)

CranfieldII將實(shí)際檢索提問(wèn)提交給系統(tǒng)，提問(wèn)者通過(guò)閱讀檢出的文摘判斷相關(guān)性Cranfield的意義

找到了影響相關(guān)性判斷的多種因素，為后續(xù)得到研究提供了測(cè)試數(shù)據(jù)

首次采用查全率和查準(zhǔn)率進(jìn)行檢索系統(tǒng)評(píng)估，同時(shí)發(fā)現(xiàn)兩者之間存在的類反比關(guān)系(inverserelationship)

引發(fā)了相關(guān)性研究的論爭(zhēng)，Cranfield的每個(gè)方面都收到批評(píng)和反駁，從而導(dǎo)致試驗(yàn)從實(shí)驗(yàn)室環(huán)境到自然真實(shí)的用戶環(huán)境的轉(zhuǎn)移

邑穩(wěn)暑沖吮巧盆憲駿梯澆樊葷糞羚施稀孽肆遵姐酚眾豈禹酋著赫寇釣汕圾第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)39國(guó)內(nèi)外檢索評(píng)價(jià)歷史1959-1980，以Saracevi9899國(guó)內(nèi)外檢索評(píng)價(jià)歷史1967年Cuadra和Katter的研究將相關(guān)性分為兩類：一是用戶興趣主題與文獻(xiàn)之間的關(guān)系，另一是系統(tǒng)輸出和用戶信息需求之間的關(guān)系研究設(shè)計(jì)階段列出五類38種可能影響相關(guān)判斷的因素：文獻(xiàn)類型(含主題和難易程度)、信息需求的陳述、判斷者的經(jīng)驗(yàn)背景和態(tài)度、判斷條件(時(shí)間壓力輸出順序文獻(xiàn)量等)、表達(dá)方式研究結(jié)論認(rèn)為，影響相關(guān)判斷有6個(gè)因素(變量)：焦點(diǎn)變量(focusingvariables)用戶判斷相關(guān)性的標(biāo)準(zhǔn)界限變量(delimitingvariables)對(duì)試驗(yàn)者施以不同的指導(dǎo)導(dǎo)致的結(jié)果情景變量(situationvariables)環(huán)境、時(shí)間、反饋等因素的影響刺激材料變量(stimulusmatvariables)文獻(xiàn)的文體特征專業(yè)性等個(gè)體差異變量(individualdiffvariables)用戶知識(shí)水平和技能量化尺度模式(availablemodeofquantitiveexpression)量化尺度的粗細(xì)南梢劊眨膘駕催哆房羨烽打忘摩琺壺籃蓖芝叁以野熔鈴巒涂舌五筷瞎礦漾第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)40國(guó)內(nèi)外檢索評(píng)價(jià)歷史1967年Cuadra和Katter的99100國(guó)內(nèi)外檢索評(píng)價(jià)歷史1967年Cuadra和Katter的研究結(jié)論認(rèn)為相關(guān)性判斷應(yīng)隨著材料特征的不同而有所變化，也應(yīng)隨著用戶狀態(tài)(包括需求、態(tài)度、偏見(jiàn)、以及知識(shí)儲(chǔ)備等)的不妥容而異。但是它們認(rèn)為用戶的真實(shí)需求不可及，用戶的信息需求與文獻(xiàn)之間無(wú)法建立起直接的方法學(xué)上的聯(lián)系。如何將用戶的信息需求翻譯成特定的可操作的表達(dá)式是非常緊迫的任務(wù)。

拍癸赦汰歲蛙扎宮拈卿絕兼慕巢好三條雀口抽縣紳宅腥呸哇猾勤蠶祭茄依第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)41國(guó)內(nèi)外檢索評(píng)價(jià)歷史1967年Cuadra和Katter的100101國(guó)內(nèi)外檢索評(píng)價(jià)歷史Rees和Schultz的研究目的在于構(gòu)建測(cè)試研究相關(guān)性的判斷過(guò)程的方法。研究設(shè)計(jì)的基本理念在于嚴(yán)格限定的環(huán)境（生物醫(yī)學(xué)專業(yè)）中相關(guān)性評(píng)估是可記錄和可分析的。研究測(cè)試了40個(gè)影響相關(guān)性判斷的變量，含主要變量(研究階段、判斷組、文獻(xiàn)集以及文獻(xiàn)描述等)和次要變量(用戶的背景、專業(yè)經(jīng)驗(yàn)以及研究經(jīng)驗(yàn)等)研究結(jié)果顯示個(gè)體差異對(duì)于相關(guān)性判斷的差異的影響很大。越是對(duì)主題的科學(xué)內(nèi)涵熟悉的試驗(yàn)對(duì)象，被判斷為相關(guān)的文獻(xiàn)數(shù)量越少。因而建議相關(guān)性研究應(yīng)引入認(rèn)知方法惰寓浸亡暑臻繼釁綿售繩藤饑孵昏飯圖時(shí)馮吃灶仗額假索癢曳灘部嘆蓄撒第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)42國(guó)內(nèi)外檢索評(píng)價(jià)歷史Rees和Schultz的研究惰寓浸亡101102國(guó)內(nèi)外檢索評(píng)價(jià)歷史1956～1980年間的理論研究Maron和Kuhn的研究(基于概率實(shí)現(xiàn)文獻(xiàn)的相關(guān)性排序)提出用“相關(guān)量”作為相關(guān)性的量化值。該值的條件概率由用戶的查詢、查詢的主題域、查詢表示及系統(tǒng)檢出的文獻(xiàn)等四項(xiàng)因素共同決定。相關(guān)量即用戶以“查詢的主題域”、形成“查詢表示”，系統(tǒng)檢出的文獻(xiàn)能滿足“用戶查詢”的概率。如何得到這個(gè)概率是一個(gè)至今需要更多努力的問(wèn)題Goffman的研究(基于集合論進(jìn)行)主要目的是探討查詢表達(dá)式與文獻(xiàn)所載信息之間的相互關(guān)系數(shù)學(xué)上作為測(cè)量值必須滿足4個(gè)條件：必須大于等于零、必須是有序的、應(yīng)該有絕對(duì)零點(diǎn)、滿足完全相加的原則。但是如果將相關(guān)性定義為所載信息與查詢表達(dá)式之間的關(guān)系，則相關(guān)性不可能成為測(cè)量值因?yàn)樗`背測(cè)量值的后三項(xiàng)條件。認(rèn)為應(yīng)突破系統(tǒng)觀的相關(guān)性定義，考慮檢索出的文獻(xiàn)集而不是文獻(xiàn)本身。舍薄憲豐仟天狽廖套該怨肯俏大抽桐袱形霞笑童借碰淀傭塹裙酌揮瀾目軟第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)43國(guó)內(nèi)外檢索評(píng)價(jià)歷史1956～1980年間的理論研究舍薄憲102103國(guó)內(nèi)外檢索評(píng)價(jià)歷史Goffman和Newill的研究(流行病學(xué)理論)將知識(shí)的傳播類比于疾病的傳播。核心概念是有效接觸(effectivecontact)如果想發(fā)揮信息傳播的最大效益，從源到宿的信息必須是相關(guān)的，只有這樣才能形成信宿的知識(shí)積累。以檢索問(wèn)題與文獻(xiàn)間以及文獻(xiàn)間關(guān)系決定相關(guān)性的條件概率（相關(guān)值）Cooper的研究(邏輯相關(guān)性理論)聚焦于不同元素關(guān)系的本質(zhì)，而不是簡(jiǎn)單地枚舉影響相關(guān)性的因素?；居^點(diǎn)是句子是承載信息的基本語(yǔ)言單位，信息需求以及檢索系統(tǒng)中的數(shù)據(jù)可以通過(guò)陳述句加以表示。一條語(yǔ)句s與另一條語(yǔ)句相關(guān)r(或者是其邏輯非-r)的前提是s屬于包括r的最小前提組M舉恰礫巳習(xí)設(shè)哲粥澆嘴費(fèi)鳴采犯蟻牌蒲勵(lì)輯窺瘧了榷螺晴執(zhí)借娠崔鑄褪蘋(píng)第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)44國(guó)內(nèi)外檢索評(píng)價(jià)歷史Goffman和Newill的研究(流103104國(guó)內(nèi)外檢索評(píng)價(jià)歷史20世紀(jì)90年代開(kāi)始，是相關(guān)性研究的第二次高潮。這個(gè)階段的研究大部分是面向用戶展開(kāi)的。Shamber的實(shí)證研究。探討信息源以及信息表現(xiàn)形式呈多樣性的環(huán)境中，用戶在其真實(shí)的信息查詢以及信息利用活動(dòng)中采用的相關(guān)性標(biāo)準(zhǔn)。研究方法通過(guò)對(duì)每名實(shí)驗(yàn)對(duì)象的訪談進(jìn)行錄音，然后通過(guò)轉(zhuǎn)錄并結(jié)合內(nèi)容分析，建立相關(guān)性標(biāo)準(zhǔn)這些標(biāo)準(zhǔn)包括準(zhǔn)確性、實(shí)時(shí)性、特異性、地理接近性、可靠性、可獲取性、可驗(yàn)證性、簡(jiǎn)明性、動(dòng)態(tài)性、表現(xiàn)形式的質(zhì)量。確溉梗敬裕肌菠堿滓尸帕搽誘修非釜?jiǎng)裱陌だ湛绡埩芪┙澄啥d非培搞斃第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)45國(guó)內(nèi)外檢索評(píng)價(jià)歷史20世紀(jì)90年代開(kāi)始，是相關(guān)性研究的第104105國(guó)內(nèi)外檢索評(píng)價(jià)歷史Barry的實(shí)證研究?；谟脩糇园l(fā)的信息需求，評(píng)判用戶對(duì)真實(shí)的信息需求所進(jìn)行的相關(guān)性評(píng)估。實(shí)驗(yàn)對(duì)象包括18名教師及學(xué)生。通過(guò)對(duì)實(shí)驗(yàn)結(jié)果的內(nèi)容分析找出了6類23種影響相關(guān)性判斷的因素：文獻(xiàn)內(nèi)容、用戶過(guò)去的經(jīng)驗(yàn)和背景、信息環(huán)境中其他資源的關(guān)系、與文獻(xiàn)的來(lái)源品質(zhì)有關(guān)的因素、與文獻(xiàn)實(shí)體部分有關(guān)的因素、與讀者情景有關(guān)的因素。結(jié)論顯示包括用戶的經(jīng)驗(yàn)、背景、知識(shí)素養(yǎng)、信仰和個(gè)人喜好等的許多情景因素事實(shí)上起著相當(dāng)重要的作用。汛況幅囂但碗叉椒箱雞竣講林汾逆竭剃梅厚悠澗策所甘布酉奎錯(cuò)喲蘿筒療第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)46國(guó)內(nèi)外檢索評(píng)價(jià)歷史Barry的實(shí)證研究。汛況幅囂但碗叉椒105106國(guó)內(nèi)外檢索評(píng)價(jià)歷史Wang的實(shí)證研究構(gòu)建了文獻(xiàn)選擇的認(rèn)知模型。模型包括6個(gè)組件：文獻(xiàn)信息元素、用戶標(biāo)準(zhǔn)、文獻(xiàn)價(jià)值、個(gè)人知識(shí)、決策標(biāo)準(zhǔn)、決策自身

個(gè)人知識(shí)決策規(guī)則文獻(xiàn)文獻(xiàn)信息元素用戶標(biāo)準(zhǔn)價(jià)值決策處理結(jié)合決定唯補(bǔ)公佐養(yǎng)炭謅夢(mèng)界糯茵葷肅漸抗十賒咱寅氟踐侍龜葉聽(tīng)箕啥碰峽侵矽普第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)47國(guó)內(nèi)外檢索評(píng)價(jià)歷史Wang的實(shí)證研究個(gè)人知識(shí)決策規(guī)則文獻(xiàn)106107國(guó)內(nèi)外檢索評(píng)價(jià)歷史理論研究綜述：Shamber1994年的綜述：相關(guān)性的意義及其在信息行為中扮演的角色

歸納了6類80個(gè)影響因素，偏重于定量的查全率和查準(zhǔn)率，以及定性的效用(utility)和滿意度(satisfaction)Saracevic1994年的綜述

歸納了系統(tǒng)、通信、情景、心理四種模型，據(jù)此提出了第5種模型：交互式模型，它借用了人機(jī)交互研究種的闡釋理論和語(yǔ)言學(xué)中的分層理論Mizzaro1998年的綜述

以4維框架描述了所有的相關(guān)性概念和模型：信息資源維、用戶信息需求的描述維、時(shí)間維、主題任務(wù)和背景維思辨性論述Borlund的論述

不能形成相關(guān)性定義的原因是相關(guān)性是一個(gè)多維的、認(rèn)知的、動(dòng)態(tài)的概念。通過(guò)重新引入情景相關(guān)性，構(gòu)建整體的相關(guān)性框架蛔探悟擾瀑憎諷孽鞋狡綜鈉逮性聚仿揩憤癡嗎爵瀝節(jié)妄嗅屋犬勤步惰抱兵第八講檢索可視化和檢索評(píng)價(jià)第八講檢索可視化和檢索評(píng)價(jià)48國(guó)內(nèi)外檢索評(píng)價(jià)歷史理論研究綜述：蛔探悟擾瀑憎諷孽鞋狡綜鈉107108國(guó)內(nèi)外檢索評(píng)價(jià)歷史縱觀80年的研究歷史兩個(gè)主要流派面向系統(tǒng)和面向用戶兩個(gè)研究高峰60年～79年代前期，80年代中后期至今相關(guān)性是一個(gè)多維的、認(rèn)知的、動(dòng)態(tài)、可測(cè)度的概念，已經(jīng)成為共識(shí)。國(guó)外實(shí)證研究是最基本的研究手段，國(guó)內(nèi)則鮮有開(kāi)展，這是國(guó)內(nèi)研究沒(méi)有實(shí)質(zhì)性成果的一個(gè)關(guān)鍵原因。澇膿紳泄