智慧地鐵視圖數(shù)據(jù)中心建設(shè)方案

Copyright?2011-2015浙江宇視科技有限公司保留一切權(quán)利.業(yè)務(wù)需求1分鐘內(nèi)，在一條線(xiàn)路2000個(gè)攝像頭1周的錄像中檢索到視頻內(nèi)的1個(gè)可疑人員人臉軌跡抽取業(yè)務(wù)集群調(diào)度智能人臉識(shí)別海量錄像調(diào)用據(jù)時(shí)代下的智慧鐵數(shù)據(jù)數(shù)據(jù)述：構(gòu)化到結(jié)構(gòu)化數(shù)據(jù)處理：從信息孤島到數(shù)據(jù)融最終目標(biāo)：從事后取證到事前預(yù)警數(shù)據(jù)存儲(chǔ)：從業(yè)務(wù)透明到業(yè)務(wù)感知最終目標(biāo)：從事后取證到事前預(yù)警數(shù)據(jù)存儲(chǔ)：從業(yè)務(wù)透明到業(yè)務(wù)感知自頂向下設(shè)計(jì)應(yīng)用設(shè)計(jì)客戶(hù)組織行業(yè)需求實(shí)施策略項(xiàng)目目標(biāo)預(yù)算與驗(yàn)收標(biāo)準(zhǔn)應(yīng)用設(shè)計(jì)客戶(hù)組織行業(yè)需求實(shí)施策略項(xiàng)目目標(biāo)預(yù)算與驗(yàn)收標(biāo)準(zhǔn)行調(diào)出入口控制系統(tǒng)電子巡查系統(tǒng)BIM系統(tǒng)綜合安防平臺(tái)環(huán)調(diào)公安乘客信息系統(tǒng)行調(diào)出入口控制系統(tǒng)電子巡查系統(tǒng)BIM系統(tǒng)綜合安防平臺(tái)環(huán)調(diào)公安乘客信息系統(tǒng)物品探測(cè)系統(tǒng)實(shí)體防護(hù)系統(tǒng)視頻監(jiān)控系統(tǒng)?客戶(hù)組織適配?網(wǎng)絡(luò)自治適配?卷積神經(jīng)網(wǎng)絡(luò)?深度學(xué)習(xí)?MapReduce?SPARK?不可信網(wǎng)絡(luò)?隔離網(wǎng)絡(luò)?可信網(wǎng)絡(luò)入侵報(bào)警系統(tǒng)?集中式?分布式車(chē)站停車(chē)場(chǎng)控制中心基地車(chē)輛段車(chē)站停車(chē)場(chǎng)控制中心基地車(chē)輛段邏輯組件整體設(shè)計(jì)流量模型設(shè)計(jì)流量設(shè)計(jì)原則——本地集中流量設(shè)計(jì)原則——本地集中車(chē)站內(nèi)千兆接入，本地終結(jié)主要流量車(chē)站與OCC間千兆可用帶寬，預(yù)留故障切換與應(yīng)急指揮車(chē)站間不能有竄流管理模型設(shè)計(jì) 市公安局 市公安局 分控中心 分控中心車(chē)站車(chē)站車(chē)輛段車(chē)站車(chē)站車(chē)輛段車(chē)站車(chē)站管理設(shè)計(jì)原則——本地自治管理設(shè)計(jì)原則——本地自治警用、專(zhuān)用在車(chē)站、傳輸或者OCC處分開(kāi)系統(tǒng)間對(duì)接靈活，要求本地系統(tǒng)高度自治網(wǎng)間流量可控，故障可自治，要求本地系統(tǒng)高度自治計(jì)算模型設(shè)計(jì)業(yè)務(wù)集群調(diào)度業(yè)務(wù)集群調(diào)度車(chē)站1車(chē)站2車(chē)站n車(chē)站1車(chē)站2特征提取與分類(lèi)特征提取與分類(lèi)特征提取與分類(lèi)特征提取與分類(lèi)特征提取與分類(lèi)特征提取與分類(lèi)實(shí)時(shí)數(shù)據(jù)與存儲(chǔ)實(shí)時(shí)數(shù)據(jù)與存儲(chǔ)實(shí)時(shí)數(shù)據(jù)與存儲(chǔ)實(shí)時(shí)數(shù)據(jù)與存儲(chǔ)實(shí)時(shí)數(shù)據(jù)與存儲(chǔ)實(shí)時(shí)數(shù)據(jù)與存儲(chǔ)數(shù)據(jù)采集與檢測(cè)數(shù)據(jù)采集與檢測(cè)數(shù)據(jù)采集與檢測(cè)數(shù)據(jù)采集與檢測(cè)數(shù)據(jù)采集與檢測(cè)數(shù)據(jù)采集與檢測(cè)計(jì)算設(shè)計(jì)原則——計(jì)算設(shè)計(jì)原則——IO路徑最短，分布計(jì)算，集群調(diào)度特征提取與結(jié)構(gòu)化描述前置，IO路徑最短多維度時(shí)空分析與軌跡碰撞后置，分布計(jì)算，集群調(diào)度海量數(shù)據(jù)，流式實(shí)時(shí)分析與離線(xiàn)數(shù)據(jù)分析，業(yè)務(wù)模型時(shí)空化存儲(chǔ)模型設(shè)計(jì)OCC其他分控車(chē)站1車(chē)站n車(chē)站1車(chē)站n存儲(chǔ)設(shè)計(jì)原則——本地集中存儲(chǔ)設(shè)計(jì)原則——本地集中，遠(yuǎn)程災(zāi)備，業(yè)務(wù)感知兩級(jí)云存儲(chǔ)架構(gòu)，統(tǒng)一管理和故障切換本地高可用性設(shè)計(jì)，云內(nèi)負(fù)載均衡故障后云間切換，恢復(fù)后數(shù)據(jù)回遷依據(jù)業(yè)務(wù)不同設(shè)計(jì)數(shù)據(jù)保護(hù)IMP安全隔離網(wǎng)絡(luò)可信網(wǎng)絡(luò)安全模型設(shè)計(jì)IMP安全隔離網(wǎng)絡(luò)可信網(wǎng)絡(luò)不可信網(wǎng)絡(luò)安全設(shè)計(jì)原則——業(yè)務(wù)感知安全設(shè)計(jì)原則——業(yè)務(wù)感知，兩層隔離部署于視頻傳輸和業(yè)務(wù)系統(tǒng)之間，保證OCC數(shù)據(jù)安全前端準(zhǔn)入控制，與運(yùn)維管理聯(lián)動(dòng)，防御非法接入后端深層防御，感知業(yè)務(wù)數(shù)據(jù)，防御非法數(shù)據(jù)存儲(chǔ)：存儲(chǔ)：878TB轉(zhuǎn)發(fā)：2Gbps業(yè)務(wù)：權(quán)限/用戶(hù)/視頻/設(shè)備/業(yè)務(wù)/域間管理、智能計(jì)算6Mbps90天存儲(chǔ)、轉(zhuǎn)發(fā)、計(jì)算、權(quán)限/用存儲(chǔ)、轉(zhuǎn)發(fā)、計(jì)算、權(quán)限/用戶(hù)/視頻/設(shè)備/業(yè)務(wù)/域間管理權(quán)限/用戶(hù)/視頻/設(shè)備/業(yè)務(wù)/域間管理存儲(chǔ)計(jì)算轉(zhuǎn)發(fā)業(yè)務(wù)適配性設(shè)計(jì)——業(yè)務(wù)硬件化，流量全交換全交換架構(gòu)流媒體架構(gòu)全交換架構(gòu)流媒體架構(gòu)數(shù)據(jù)抽象業(yè)務(wù)設(shè)計(jì)基于視頻圖像的智能分析視頻偵查緝查布控違章處罰系統(tǒng)維護(hù)視頻濃縮技術(shù)人臉識(shí)別技術(shù)行為分析技術(shù)時(shí)空分析技術(shù)車(chē)牌識(shí)別技術(shù)違章分析技術(shù)視頻診斷技術(shù)視頻偵查緝查布控違章處罰系統(tǒng)維護(hù)智能分析的難點(diǎn)l算法環(huán)境適應(yīng)性差l算法特征可擴(kuò)展性差l施工的質(zhì)量決定智能效果l算法環(huán)境適應(yīng)性差l算法特征可擴(kuò)展性差l施工的質(zhì)量決定智能效果l每個(gè)廠(chǎng)商各有所長(zhǎng)l多廠(chǎng)商算法很難集成l智能分析效率低l服務(wù)器數(shù)量多宇視WISE+智能應(yīng)用解決方案Wisdom智慧算法Wisdom智慧算法Scene場(chǎng)景設(shè)計(jì)Scene場(chǎng)景設(shè)計(jì)WISE++集成各項(xiàng)核心技術(shù)，超過(guò)60家廠(chǎng)商的智能分析產(chǎn)業(yè)鏈，打造專(zhuān)家級(jí)智能解決方案。以視頻圖像為中心的計(jì)算5050CPU計(jì)算性能提升10倍整體性能提升6-8倍硬件利用率提升30%算法效率增加50%業(yè)務(wù)豐富度擴(kuò)展60%硬件利用率提升30%算法效率增加50%業(yè)務(wù)豐富度擴(kuò)展60%車(chē)輛特征車(chē)牌識(shí)別智能監(jiān)所行為分析車(chē)輛特征車(chē)牌識(shí)別智能監(jiān)所行為分析人臉比對(duì)機(jī)器學(xué)習(xí)基礎(chǔ)算子圖像處理基礎(chǔ)算子規(guī)則、策略模塊調(diào)度模塊GPUH264解碼GPUH265解碼去噪GPU高密度機(jī)器學(xué)習(xí)基礎(chǔ)算子圖像處理基礎(chǔ)算子規(guī)則、策略模塊調(diào)度模塊GPUH264解碼GPUH265解碼去噪GPU高密度GPUMJPEG編碼邊緣增強(qiáng)多線(xiàn)程并發(fā)CPUMJPEG編碼服務(wù)器云調(diào)度機(jī)器學(xué)習(xí)基礎(chǔ)算子圖像處理基礎(chǔ)算子基礎(chǔ)數(shù)學(xué)運(yùn)算算子算法云調(diào)度算法云調(diào)度視頻圖像信息數(shù)據(jù)中心計(jì)算架構(gòu)提供基礎(chǔ)硬件調(diào)度平臺(tái)支持插件化算法、全面兼容各種智能提供框架內(nèi)硬件統(tǒng)一管理提供CPU提供基礎(chǔ)硬件調(diào)度平臺(tái)支持插件化算法、全面兼容各種智能提供框架內(nèi)硬件統(tǒng)一管理提供CPU、GPU計(jì)算資源統(tǒng)一管理支持多種智能計(jì)算資源混合調(diào)度支持多種硬件形態(tài)兼容調(diào)度支持負(fù)載均衡和災(zāi)難備份結(jié)果結(jié)果分片分片分片分片分片分片分片分片基于分布式計(jì)算優(yōu)化分片存儲(chǔ)計(jì)算資源分布式任意分配基于分布式計(jì)算優(yōu)化分片存儲(chǔ)超高識(shí)別率遮眉遮眉遮眉遮額頭遮眉遮額頭遮眼周?chē)髅弊映咦R(shí)別率遮臉遮耳遮臉遮耳遮半邊臉遮半邊臉遮嘴超高識(shí)別率側(cè)臉側(cè)臉側(cè)臉低頭側(cè)臉絡(luò)腮胡超高識(shí)別率快跑快跑快跑閉眼遮臉/遮耳/閉眼超高識(shí)別率鬼臉鬼臉鬼臉胖瘦變化胖瘦/年齡變化人臉識(shí)別產(chǎn)品業(yè)務(wù)功能簡(jiǎn)介黑名單布控人臉門(mén)禁比對(duì)特征檢索視頻檢索數(shù)據(jù)計(jì)算業(yè)務(wù)設(shè)計(jì)宇視視圖數(shù)據(jù)中心-UNIDATA大數(shù)據(jù)架構(gòu)UNISTOR融合云直存儲(chǔ)自學(xué)習(xí)智能集成引擎實(shí)時(shí)數(shù)據(jù)計(jì)算框架(SparkStreami物聯(lián)主題數(shù)據(jù) 結(jié)構(gòu)化 結(jié)構(gòu)化數(shù)據(jù)圖片錄像圖片錄像…寫(xiě)4萬(wàn)條/秒SparkSpark/Hadoop起源于互聯(lián)網(wǎng)應(yīng)用，宇視結(jié)合安防需求新增UNIDB時(shí)空數(shù)據(jù)庫(kù)，優(yōu)化安防數(shù)據(jù)的存儲(chǔ)和處理性能，最終性能遠(yuǎn)好于標(biāo)準(zhǔn)版Spark/Hadoop。大數(shù)據(jù)實(shí)際應(yīng)用效果超快檢索速率：精確檢索響應(yīng)時(shí)間模糊檢索響應(yīng)時(shí)間多條件復(fù)雜檢索響應(yīng)時(shí)間超快業(yè)務(wù)研判：0.5秒0.5秒黑名單布控車(chē)輛限行大貨車(chē)闖禁行兩客一危黃標(biāo)車(chē)城市路況跟車(chē)關(guān)聯(lián)分析車(chē)輛頻度分析5秒晝伏夜出分析5秒首次出城、入城分析5秒多次進(jìn)城不出城分析5秒?基于宇視UNIDATA大數(shù)據(jù)平臺(tái)的分析檢索服務(wù)產(chǎn)品與2014年6月份，采用真實(shí)數(shù)據(jù)構(gòu)建100億數(shù)據(jù)應(yīng)用，順利通過(guò)公安三所型式檢測(cè)，2015年底推出千億級(jí)大數(shù)據(jù)平臺(tái)軌跡查詢(xún)、顯示、碰撞MAC/RFID記錄查詢(xún)軌跡顯示移動(dòng)WIFI采集點(diǎn)位歸一化處理MAC/RFID記錄按采集基站查詢(xún)記錄軌跡碰撞采集采集信息信息空間空間信息軌跡碰撞車(chē)牌1車(chē)牌2車(chē)牌3車(chē)牌4車(chē)牌5車(chē)牌6車(chē)牌7反恐區(qū)域夜間活動(dòng)外地車(chē)輛首次出入城套牌分析車(chē)輛違規(guī)事后分析事前預(yù)防主動(dòng)預(yù)警數(shù)據(jù)應(yīng)用——視頻軌跡與手機(jī)軌跡碰撞?視頻中發(fā)現(xiàn)人，確定大致的軌跡A。?根據(jù)視頻確定的軌跡A，基于WIFIMAC地址采集等方式，尋找匹配的手機(jī)軌跡。根據(jù)碰撞列表可進(jìn)一步查看碰撞明細(xì)。763?擴(kuò)展應(yīng)用：多個(gè)案件的作案軌跡結(jié)合手機(jī)碰撞軌跡，可以找到可疑度較大的手機(jī)，縮小搜尋范圍。數(shù)據(jù)應(yīng)用——時(shí)空分析案->人人->案案->人人->案案人物->案實(shí)戰(zhàn)指揮-重大案件快速集中存儲(chǔ)大批量集中存儲(chǔ)功能重特大案件的快速集中存儲(chǔ)：以往發(fā)生重特大案件需抽調(diào)大量視頻員、配備大量存儲(chǔ)媒介、占用大量電腦，視頻備份存儲(chǔ)工作量大。本系統(tǒng)實(shí)現(xiàn)以發(fā)案地為基點(diǎn)的大區(qū)域框選，然后進(jìn)行后臺(tái)自動(dòng)的下載保存。強(qiáng)化運(yùn)維管理，全程可用可控全局運(yùn)維綜合態(tài)勢(shì)管理基于日志大數(shù)據(jù)的行為審計(jì)全網(wǎng)設(shè)備拓?fù)涔芾砜梢暬瘓?bào)表管理分析新一代3D地圖應(yīng)用引擎-科學(xué)布點(diǎn)數(shù)據(jù)存儲(chǔ)業(yè)務(wù)設(shè)計(jì)維護(hù)難常見(jiàn)設(shè)備與業(yè)務(wù)分析——通用安防存儲(chǔ)NVR/IPSAN維護(hù)難檢索慢檢索慢丟數(shù)據(jù)易崩潰丟數(shù)據(jù)易崩潰應(yīng)用缺陷技術(shù)分析常見(jiàn)設(shè)備與業(yè)務(wù)分析——通用數(shù)據(jù)存儲(chǔ)IPSAN/云存儲(chǔ)應(yīng)用缺陷技術(shù)分析結(jié)構(gòu)化數(shù)據(jù)來(lái)源前端智能前端智能歸檔信息 依據(jù)業(yè)務(wù)需求定制存儲(chǔ)設(shè)備視頻存儲(chǔ)數(shù)據(jù)存儲(chǔ)視頻存儲(chǔ)數(shù)據(jù)存儲(chǔ)重要點(diǎn)位備份視頻以上）數(shù)據(jù)內(nèi)容寫(xiě)業(yè)務(wù)讀業(yè)務(wù)讀寫(xiě)塊大小讀寫(xiě)塊大小擴(kuò)容需求Cache調(diào)度+RAID++結(jié)構(gòu)性能要求擴(kuò)容需求Cache調(diào)度+RAID++結(jié)構(gòu)性能要求數(shù)據(jù)保護(hù)設(shè)備選型讀寫(xiě)比例UNISTOR融合云直存單機(jī)可靠性云存儲(chǔ)安防業(yè)務(wù)適配CloudDirectStorageCloudDirectStorage安防云直存縮短故障切換時(shí)間提高無(wú)故障運(yùn)行時(shí)間系統(tǒng)可用性(Avaibility)=1?縮短故障切換時(shí)間提高無(wú)故障運(yùn)行時(shí)間單機(jī)可靠性——硬盤(pán)?磁盤(pán)再檢測(cè)??磁盤(pán)再檢測(cè)?磁盤(pán)再修復(fù)?磁盤(pán)修復(fù)?磁盤(pán)檢測(cè)?讀寫(xiě)檢測(cè)減少誤判快速修復(fù)主動(dòng)預(yù)防減少誤判快速修復(fù)主動(dòng)預(yù)防防腐蝕防腐蝕震震單機(jī)可靠性——陣列RAID塊虛擬化基于快照的重建重建重建化解單塊硬盤(pán)讀寫(xiě)瓶頸，快速重構(gòu)化解單塊硬盤(pán)讀寫(xiě)瓶頸，快速重構(gòu)降低數(shù)據(jù)失效風(fēng)險(xiǎn)負(fù)載均衡，提高性能磁盤(pán)暫時(shí)性故障，或被拔出后10分鐘內(nèi)插回，10秒完成重建2TB數(shù)據(jù)恢復(fù)小于1小時(shí)單機(jī)可靠性——設(shè)備性能提升性能提升雙風(fēng)扇雙電池雙電源雙BIO云存儲(chǔ)系統(tǒng)——數(shù)據(jù)訪(fǎng)問(wèn)統(tǒng)一的存儲(chǔ)共享池和訪(fǎng)問(wèn)入口靈活的空間配額管理統(tǒng)一的存儲(chǔ)共享池和訪(fǎng)問(wèn)入口靈活的空間配額管理無(wú)縫動(dòng)態(tài)擴(kuò)容負(fù)載均衡提供分布式文件系統(tǒng)提供超大文件、海量文件存儲(chǔ)服務(wù)標(biāo)準(zhǔn)服務(wù)和系統(tǒng)接口云存儲(chǔ)系統(tǒng)——數(shù)據(jù)保護(hù)糾刪碼復(fù)制卷提供N/(N+1)的冗余可靠性數(shù)據(jù)切片，并發(fā)下載速度快數(shù)據(jù)重構(gòu)速度快，