基于openCV的手勢(shì)識(shí)別課件

1、基于openCV的手勢(shì)識(shí)別答辯人: 許譯天outlineopenCV平臺(tái)簡介手勢(shì)識(shí)別系統(tǒng)簡介技術(shù)細(xì)節(jié)&我們的工作結(jié)論1.openCVopenCV是開源的計(jì)算機(jī)視覺庫, 由Intel開發(fā)維護(hù)的, 包含常用的機(jī)器視覺, 模式識(shí)別算法.(BSD許可證)CV 圖像處理, 視覺MLL統(tǒng)計(jì)分類器GUI圖像視頻I/OcxCORE基本數(shù)據(jù)結(jié)構(gòu),算法2.1手勢(shì)識(shí)別系統(tǒng)它通過攝像頭采集到圖像, 分析圖像的內(nèi)容, 識(shí)別出手的動(dòng)作, 指揮計(jì)算機(jī)做出各種反應(yīng) 2.2技術(shù)現(xiàn)狀輸入圖像: 近紅外成像, 雙目立體視覺, 普通圖像 靜態(tài)識(shí)別動(dòng)態(tài)識(shí)別手勢(shì)分割膚色模型(色彩的聚類特征 )輪廓邊緣 (canny檢測)運(yùn)動(dòng)跟蹤(差值圖

2、像分割, camshaft, 卡爾曼跟蹤預(yù)測, 背景剪除法)手勢(shì)建模圖像屬性(輪廓, 圖像矩,特征, 直方圖)運(yùn)動(dòng)序列(計(jì)算運(yùn)動(dòng)光流, 抽取運(yùn)動(dòng)軌跡 )特征匹配模板匹配法 神經(jīng)網(wǎng)絡(luò)法 隱馬爾科夫模型法 動(dòng)態(tài)時(shí)間規(guī)劃法 3.2處理流程-詳細(xì)原始圖片尺寸調(diào)整均值漂移濾波分離HSV通道HSV塞選疊加降噪(開運(yùn)算)二值化查找輪廓輪廓塞選手高光補(bǔ)償4.分割 1.均值漂移濾波PyrMeanShiftFiltering4.膚色模型非線性, 非凸性4.光照影響 - 開臺(tái)燈4.光照影響 - 關(guān)臺(tái)燈1.7對(duì)比模型比較:YCrCb色彩模型二值化模型HSV色彩模型 拉普拉斯變換模型5.建模查找輪廓外接框 凸包 fre

3、eman鏈(openCV庫)5.建模 輪廓塞選去掉面積過小的區(qū)域去掉與窗口接壤的區(qū)域3. 應(yīng)用手勢(shì)識(shí)別(測試成功)運(yùn)動(dòng)識(shí)別(測試成功)手的運(yùn)動(dòng)語義運(yùn)動(dòng)語義較為復(fù)雜, 準(zhǔn)備慢慢研究.6. 特征匹配模板匹配法Hu矩算法( openCV庫)載入模板圖片提取模板的輪廓模板庫當(dāng)前手勢(shì)輪廓計(jì)算匹配率分析結(jié)果3.1.3 數(shù)據(jù)分析0.33.1.4 模板3.2.2 震動(dòng)消除3.2.3 測試效果4.3 任務(wù)分配鄔東東: 色彩提取,光線適應(yīng)梁漢輝: 手的模板, 及匹配周明旺: 濾波, MFC融合許譯天: 框架設(shè)計(jì), 系統(tǒng)調(diào)整4.4 總結(jié)現(xiàn)在有在手上戴輔助工具幫助加強(qiáng)識(shí)別的系統(tǒng), 但這樣卻限制了這門技術(shù)的推廣應(yīng)用. 我們直接把原始的手作為提取對(duì)象, 旨在研究一種通用的系統(tǒng).經(jīng)過這些研究測試, 我們發(fā)現(xiàn), 對(duì)手的提取遠(yuǎn)比其他部位如臉,眼