普適計算與人機交互

普適計算-實現和諧人機交互白勺內容什么是普運計算-信，崑空間集成和融入到物理空間-“物理-信息”對供空間?什么是和諧人機交至-普適計算建立和諧人機交互的環(huán)境-對偶空間是普適計算的人機交互的基礎普適計算是21世紀的計算模式1980’sCurrentMainframeComputingDesktopComputingUbiComputing普適計算一計算模式的第三個浪潮單機計葬分布式計其移動計葬九技通信J<送明的人機交五，不可見的計算3G通信（廉合北務）普適計算是什么?是把計算，通信，數字媒體相集成和融合成為信息空間-手機：攝像機，電話，通信?是把信息空間集成木1融合到物理空間中去-把計箅與通信結點嵌入到日常用品中去-是增強現實，使日常用品和工具能提供信息服務-人們生活和工作的三維物理空間就是接口?物體表面就是接口?用自然的，直觀的方式交互?主動的計箅服務?人機交五：-單臺計箅機交五—?

與信息空間(cyberspace)的交互?所有的計箅節(jié)點都聯(lián)網?用戶不明確與哪臺計箅機交互?用戶沒有息識到在交互(implicitinteraction)帶攝像機的手機一可用于識別視覺編碼計算，通信，傳感集成的信息設備UPWARDLYMOBILE:WithPhilips*interactivetechnology,mobilephoneswillofferpverythinjfromtranslationservicesfortravelerstoproximitysensorsforkidslookingforplaymatesWELLWORN：Telia*sopenairactivitiescom*municatorletsyoumonitornotonlyyourvitalsignsbutalsoe-mailmessagesoreventheweatherforecastattheflickofawrist手機上可顯示各種信息:?語言翻譯?小孩找玩伴手腕顯示器?電子郵件?天氣預報家具是計算機，桌面是接口*tnomRamoftMitsubishiElectricResearchLabsCambridgeResearchLiveCam_?于增強現實的汽車的導航系統(tǒng)?汽乍的襠風玻璃就是導航計算機的顯示和接口參駕駛員ufld吋看到-現實世界中的道路-計算機產牛.的導航信i從舊M的”到處顯示”到Sony的自校正投影儀Figure2.Iheiver>whereDisplaxTheremotestudentsimageishighlightedastheteacheraimsthelaserpointeratit三維空間中的人機交互?人機交互：-單臺計算機交五->與信息空間(cyberspace)的交互?HumanCyberSpaceInteraction一所有的計算節(jié)點者P聯(lián)網-用戶不明確與哪臺計算機交互-用戶沒有意識到在交互(implicitinteraction)內容什么是普運計算-信，崑空間集成和融入到物理空間-“物理-信息”對供空間?什么是和諧人機交至-普適計算建立和諧人機交互的環(huán)境-對偶空間是普適計算的人機交互的基礎普適計算與和諧的人機交互?普運計算的人機交互-信息空間融入物理空間?在三維空間中的交互-就在用戶生活的空間中?隨時、隨地、應用日常用品的交-物體就是接口-信息直接在物理空間中至現?隱含的人機交互-Invisiblecomputing?和諧的人機交互-以人為中的交互?:冗浸的魯普適化?可視化，直觀的如何建立和諧的人機交互環(huán)境參建立和諧的人機交互環(huán)境-不僅是把接口嵌入到日常用品-不僅是把計箅節(jié)點聯(lián)網，成為一個分布式系統(tǒng)-不僅是自然的人機接口-還需要找到合用的信息?要建立“物理一信息“對1禺空間“物理一信息”對偶空間拳信息空間融入物理空間的影響是什么？-“物理-信息”對偶空間?物理空間->信息空間的對偶是建立對應關系-從現實物理空間中獲取各種數據和信息-“對應”的層次：特征，表面，物體（包括物體之間的關系），動作，事件，場景，描述，上下文等各個層次o*信息空間->物理空間對調關系的建立-向現實物理空間中的任何地方提供數據什么是對偶關系?基本的出發(fā)點-信息空間中的所有數據和信息都來自物理空間?通過傳感器?通過人機交互-信息空間中的對象與物理空間中的對象存在對應關系(corresponding)?基本的對偶關系是對應關系*對應關系的建立-首先是物理空間一》信息空間?對應關系是對偶關系的基礎，信息空間一>物理空間對偶關系的建立?信息直接反饋到物理空間的對應物體上-確定信息反饋點就是建立對偶關系?對偶關系：自動建立，或人工建立-反饋是多通道，多層次的-在桌面檢索情況下，反饋都足在計算機的屏幕上?以物體或物體表面作為信息交互的接口-靜止的：例如，覺察位置的導游顯示-動態(tài)跟蹤的：AR系統(tǒng)?把信息空間中的關系映射到物理空間的對應物上-物理空間中物體之問的超鏈(Hyperlink)?直接控制操作機制-嵆能教室中根裾教師的動作確定轉播的鏡頭-白板獲取系統(tǒng)屮的關鍵幀的建立在物體是建立的對偶?物體的表面就是接口Fig.1桌面是計算機的接口Fig.2移動設備組成服務M絡紙面是交互的窗口Fig.3在紙面上用手勢輸入數字桌面的特征?把電子閣像投影到桌面和紙質的文檔上*能對筆和手直接作出相應___?能閱讀放在桌面上的紙質文檔電子文檔與紙質文檔的比較?虛擬桌面上的電子文檔-快速編輯、復制、轉換、共享、檢索-可用關鍵字搜索、拼寫檢查、快速計數-現實桌面上的紙質文檔□可重疊放置、便宜、易攜帶、廣泛接受、易讀、高分辨率□可觸摸、用手和手指來操作、可用筆來涂寫數字桌面計算機器鵲囂體I?嚴'?__入'（所指的PaperPaint(紙上的編輯功能)?用筆(stylus)在紙面是完成文檔和圖像的編輯-系統(tǒng)用投影的框來指示編輯的區(qū)域-完成“復制”和“粘貼”DoubleDigitalDesk（共享編輯）?本地用戶用紅筆在紙上畫，同時可看到遠端的紙和所_的圖形(0)增強現實(Augmentreality)跟蹤物體表面的細節(jié)Diredlyenhonceaperson'ssenseswithsyntheticinFormaliofi30grophicalobjediandmrstdwilhlh?wo4dOufinthePhyiicdWoHdUmw?arobl?compuln,MHhrMglidiiplayiDiipioymediainawlexiofpiryvcaliponHowdoesARwork?Se?rhr(x*9hdisployHowdoesARwork?利用物體上的視覺標記e利用視覺標記發(fā)現相應的URLii[ZJ7~*TZ5JT—?，Cameraonentation^asanadditionalinputparameterIitemselectionwithrelative[focuspositiondetermination?I-：：：jI-?-*■I*??黲-II平infonTMOontheivrelessIrMi?喊

枷

them自動對視覺標記上的電話撥號OptionsBackOptionsBackEndcall更多的應用OptionsBackTramMapOptionsBack攝像機控制3-D線框圖的旋轉攝像機控制地鐵的地圖攝像機跟蹤移動的筆尖物理空間中的超鏈?桌面上的AR顯示\?基準標記-與計算關，在此計算機上顯#關信息物理空間中的超鏈Threedisplaydevices-Interactivewhiteboard-Laptopdisplay-DesktopARdisplayThreefiducialmarker-TodeterminewhichdevicesThreetypeofinteractions-Pointing-Command-Annotation?Index?Voiceto服務層次上的對偶?用戶在物理空間中的各種活動和事件-具有吋間一空間特性的動態(tài)過程?信息空間中的多模態(tài)吋一空流的檔案-對偶關系可建立在吋一空流各個抽象層次的對應點上-可在物理空間中進行檢索?基于內容和事件的視頻索引和檢索-體育視頻的分析-白板獲取系統(tǒng)白板獲取系統(tǒng)(WhiteboardCaptureSystem)3fOvOSiAOj&n/ecTimc5^p/4na(^sr$&ri/€e?Physicalspace-Meeting?Spatial-temporalsequenceinphysicalspace-Speakerwritesontheboard-Actionsorevents(erasethetitle)?Cyberspace-Meetingarchive?Astructuredmultimediastreams-Recordingthemessageonthewhiteboard-Generatethekeyframeastheinterface系統(tǒng)級的對偶?智能空間-接口層次上的對偶關系?電子內板?與遠端學生交互的桌面會議和虛擬助理交互的墻面?登錄系統(tǒng)交互的身份識別接口-功能層次上的對偶*記錄為有結構的多媒體流-白板上的注釋、-教師講解和動作的視頻錄像-學生的提問等都-系統(tǒng)層次上的對偶關系?蘊含人機交互即以覺察上下文計算kJNaturalUIJTouchBoard系統(tǒng)層的對偶CamerasforfacerecognitionVirtualAssistantSpeakerrecognitionSpeechcommandCameratrackingtheteacherSmartCa——Camera—capturingteacher'svideo,deliveringtoremotestStudent-Board：AsawindowbetweenremotestudentsandlocalclassroomMediaBo