海康威視AI開(kāi)放平臺(tái)介紹

1、?？低??？荡笾v堂 2020?？低旳I開(kāi)放平臺(tái)介紹第十六期1、AI開(kāi)放平臺(tái)簡(jiǎn)介2、AI開(kāi)放平臺(tái)案例3、AI開(kāi)放平臺(tái)使用指南01AI開(kāi)放平臺(tái)簡(jiǎn)介Part One通用化的人工智能技術(shù)（如人臉識(shí)別等）無(wú)法滿足面向不同行業(yè)業(yè)務(wù)中的個(gè)性化應(yīng)用需求缺乏AI相關(guān)的模型開(kāi)發(fā)、集成與部署經(jīng)驗(yàn)與能力，希望通過(guò)簡(jiǎn)單易用的開(kāi)放平臺(tái)獲取AI能力加快AI技術(shù)在實(shí)際場(chǎng)景中的落地，快速驗(yàn)證應(yīng)用效果，持續(xù)進(jìn)行模型迭代優(yōu)化傳統(tǒng)產(chǎn)業(yè)智能升級(jí)核心訴求個(gè)性化的場(chǎng)景一站式的服務(wù)快速落地與持續(xù)優(yōu)化專業(yè)AI物料盤(pán)點(diǎn)安全生產(chǎn)人體識(shí)別車輛識(shí)別車流統(tǒng)計(jì) 原料識(shí)別 視覺(jué)導(dǎo)航 人臉識(shí)別 入侵探測(cè) 人形檢測(cè)會(huì)員識(shí)別貨架陳列 周界防范 人員徘徊 人員

2、聚集從專業(yè)AI到普惠AI 缺陷識(shí)別 流程合規(guī)自主避障編號(hào)識(shí)別熱度分析無(wú)人貨柜作業(yè)安全設(shè)備巡檢外力破壞檢測(cè)農(nóng)產(chǎn)品溯源保安離崗?fù)ǖ勒加美鴿M溢電瓶車違停更多普惠AIAI開(kāi)放平臺(tái)成為關(guān)鍵生產(chǎn)力數(shù)據(jù)服務(wù)訓(xùn)練服務(wù)應(yīng)用服務(wù)數(shù)據(jù)采集過(guò)程設(shè)計(jì)線上標(biāo)注平臺(tái)批量數(shù)據(jù)標(biāo)注服務(wù)零門(mén)檻定制算法模型線上GPU訓(xùn)練集群模型多平臺(tái)支持一站式算法定制服務(wù)零基礎(chǔ)入門(mén)面向場(chǎng)景化智能應(yīng)用AI場(chǎng)景化應(yīng)用設(shè)計(jì)云邊部署，快速交付算法持續(xù)迭代優(yōu)化開(kāi)放三大能力AI開(kāi)放平臺(tái)與傳統(tǒng)AI開(kāi)發(fā)模式對(duì)比傳統(tǒng)AI應(yīng)用開(kāi)發(fā)流程AI開(kāi)放平臺(tái)開(kāi)發(fā)流程開(kāi)發(fā)與迭代優(yōu)化周期長(zhǎng)：3-6個(gè)月?？祵I(yè)團(tuán)隊(duì)全程把控，技術(shù)門(mén)檻高經(jīng)過(guò)簡(jiǎn)單培訓(xùn)的人員，技術(shù)門(mén)檻低應(yīng)用上線時(shí)間短：0

3、.5-1個(gè)月代碼級(jí)開(kāi)發(fā)圖形化操作界面數(shù)據(jù)采集數(shù)據(jù)清洗數(shù)據(jù)標(biāo)定方法定義算法設(shè)計(jì)模型訓(xùn)練模型生成設(shè)備適配設(shè)備調(diào)優(yōu)效果檢驗(yàn)需求應(yīng)用上線專業(yè)技術(shù)服務(wù)團(tuán)隊(duì)專業(yè)算法和編譯團(tuán)隊(duì)專業(yè)產(chǎn)品開(kāi)發(fā)團(tuán)隊(duì)數(shù)據(jù)標(biāo)注線上自動(dòng)化模型訓(xùn)練模型部署舉個(gè)例子ABcd需求：檢測(cè)猴子及數(shù)量上傳原始圖片素材通過(guò)線上標(biāo)注工具對(duì)圖片進(jìn)行標(biāo)注AI開(kāi)放平臺(tái)自動(dòng)化模型訓(xùn)練，輸出模型將模型部署到設(shè)備中，在真實(shí)場(chǎng)景中應(yīng)用檢測(cè)結(jié)果：圖中有2只猴子算法方向物體檢測(cè)圖像分類檢測(cè)+分類組合定制識(shí)別出圖片中每個(gè)物體的位置和標(biāo)記點(diǎn)名稱。適用于識(shí)別圖片有多個(gè)物體的場(chǎng)景?？焖僮R(shí)別一張圖片中是否含有指定物體、狀態(tài)或者場(chǎng)景。定制識(shí)別出圖片中每個(gè)物體的位置、物體類別和屬性

4、。適用于識(shí)別圖片中多個(gè)物體類別。和屬性的復(fù)雜場(chǎng)景。OCR識(shí)別定制識(shí)別出圖片中的字符、數(shù)字并轉(zhuǎn)換為文本格式支持矩形/四邊形檢測(cè)支持矩形/四邊形檢測(cè)支持矩形/四邊形檢測(cè) AI模型部署和應(yīng)用方案云端推理邊緣推理（主推）云眸云眸（AI模型管理組件）IVS行業(yè)應(yīng)用平臺(tái)（AI模型管理組件）AI開(kāi)放平臺(tái)模型模型下發(fā)模型下發(fā)模型API局域網(wǎng)場(chǎng)景互聯(lián)網(wǎng)場(chǎng)景第三方業(yè)務(wù)系統(tǒng)調(diào)用云端部署邊緣部署采集端AI智能分析+視頻存儲(chǔ)端應(yīng)用端常規(guī)IPCAI開(kāi)放平臺(tái)超腦采集視頻畫(huà)面上傳分析結(jié)果行業(yè)應(yīng)用平臺(tái)（局域網(wǎng)場(chǎng)景）上傳分析結(jié)果云眸（互聯(lián)網(wǎng)場(chǎng)景）采集+AI智能分析端應(yīng)用端AI開(kāi)放平臺(tái)IPC常規(guī)NVR（可選）上傳分析結(jié)果行業(yè)應(yīng)用平

5、臺(tái)（局域網(wǎng)場(chǎng)景）上傳分析結(jié)果云眸（互聯(lián)網(wǎng)場(chǎng)景）視頻存儲(chǔ)端采集視頻畫(huà)面方案一：常規(guī)IPC+AI開(kāi)放平臺(tái)超腦，適用于前端利舊場(chǎng)景方案二：AI開(kāi)放平臺(tái)IPC+常規(guī)NVR（可選），適用于前端新建場(chǎng)景適用于第三方業(yè)務(wù)系統(tǒng)通過(guò)公網(wǎng)直接調(diào)用AI算法的場(chǎng)景；用戶完成AI算法訓(xùn)練后，聯(lián)系云眸負(fù)責(zé)人進(jìn)行API部署。舉個(gè)例子：安全生產(chǎn)作業(yè)管控業(yè)務(wù)行業(yè)應(yīng)用平臺(tái)正確識(shí)別圖片漏檢識(shí)別圖片錯(cuò)誤識(shí)別圖片安全帽檢測(cè)工作服識(shí)別操作記錄危險(xiǎn)場(chǎng)所雙人作業(yè)識(shí)別動(dòng)火作業(yè)滅火器識(shí)別視頻管理權(quán)限管理人工核驗(yàn)圖片有監(jiān)督學(xué)習(xí)AI開(kāi)放平臺(tái)訓(xùn)練校驗(yàn)邊緣設(shè)備圖片抓拍初步模型發(fā)布優(yōu)化模型發(fā)布！正確識(shí)別圖片少量圖片學(xué)習(xí)圖片持續(xù)輸入業(yè)務(wù)管理 模型部署10開(kāi)

6、放平臺(tái)具有普通適用性產(chǎn)品定位：面向開(kāi)發(fā)者，代碼級(jí)開(kāi)發(fā)產(chǎn)品特性：專業(yè)、高效降低AI算法程序開(kāi)發(fā)難度，方便快速實(shí)現(xiàn)算法模型，降低AI研究門(mén)檻，避免重復(fù)造輪子；專注于算法研究，避免陷入底層架構(gòu)及效率的繁瑣工作中；支持三大主流訓(xùn)練框架并深度優(yōu)化，算法訓(xùn)練效率更高，訓(xùn)練速度更快；應(yīng)用場(chǎng)景：隱私性、專業(yè)性、場(chǎng)景化某研發(fā)中心比如：某電網(wǎng)研發(fā)中心有大量的輸電線圖片素材，具備研發(fā)能力希望研發(fā)檢測(cè)線路的算法，同時(shí)不想公布數(shù)據(jù)，深度學(xué)習(xí)訓(xùn)練平臺(tái)可幫助其進(jìn)行算法訓(xùn)練高校實(shí)驗(yàn)室比如：某高?；I建基于GPU集群的高性能計(jì)算平臺(tái)，用于支撐CPU無(wú)法實(shí)現(xiàn)的高密度模擬計(jì)算和深度學(xué)習(xí)模型訓(xùn)練，建立高水平創(chuàng)新研究設(shè)備體系，全面改善教

7、學(xué)科研和實(shí)驗(yàn)條件專業(yè)版（私有部署）通用版產(chǎn)品定位：面向普通用戶產(chǎn)品特性：一站式、易用提供一站式的算法訓(xùn)練平臺(tái)，面向普通用戶，圖片進(jìn)，算法出；訓(xùn)練和推理形成閉環(huán)，訓(xùn)練得到的模型可以放到IPC、NVR、深思中進(jìn)行推理應(yīng)用；應(yīng)用場(chǎng)景：隱私性、碎片化、場(chǎng)景化銀行礦業(yè)智能制造軍警醫(yī)療AI市場(chǎng)：市場(chǎng)定位AI市場(chǎng)是連接AI服務(wù)商（?？岛献骰锇椋┖虯I需求方的AI模型推薦平臺(tái)；共享?？典N售渠道，助力合作伙伴實(shí)現(xiàn)AI技術(shù)-產(chǎn)品方案-商業(yè)變現(xiàn)的完整閉環(huán)。AI市場(chǎng)AI需求方AI服務(wù)商需求對(duì)接模型發(fā)布需求提交注：AI市場(chǎng)待發(fā)布AI市場(chǎng)：業(yè)務(wù)模式AI服務(wù)商AI算法訓(xùn)練平臺(tái)AI市場(chǎng)個(gè)性化AI模型場(chǎng)景化解決方案行業(yè)用戶生態(tài)

8、合作伙伴3. 發(fā)布AI需求方傳統(tǒng)渠道?？颠吘壴O(shè)備ISC平臺(tái)云眸+?？?. 線下交易入駐2. 入駐4. 線下對(duì)接，AI模型交易2. 入駐1. 訓(xùn)練AI服務(wù)商：生態(tài)合作伙伴（ISV/SI）、AI開(kāi)發(fā)者（個(gè)人/組織）、希望商業(yè)變現(xiàn)的商業(yè)用戶等；AI需求方：商業(yè)用戶、渠道客戶等。02AI開(kāi)放平臺(tái)案例Part TwoGMP行為規(guī)范檢測(cè)生產(chǎn)安全通過(guò)?？抵悄軘z像機(jī)規(guī)范產(chǎn)線人員行為，從而保障藥品的生產(chǎn)安全降本增效由智能監(jiān)控代替人為監(jiān)控，減少企業(yè)在人力成本上的支出生產(chǎn)可追溯產(chǎn)品生產(chǎn)過(guò)程（視頻）透明可追溯，客戶更加安心、省心、放心彎腰撿拾動(dòng)作檢測(cè)未抬手動(dòng)作檢測(cè)跨區(qū)送料行為檢測(cè)處理記錄+內(nèi)部歸檔為確保行為標(biāo)準(zhǔn)化，降

9、低生產(chǎn)安全隱患，采用視頻+AI的技術(shù)手段代替人工現(xiàn)場(chǎng)監(jiān)督的方式，對(duì)產(chǎn)線關(guān)鍵區(qū)域及物料跨界運(yùn)輸中的人員行為規(guī)范進(jìn)行實(shí)時(shí)監(jiān)控及智能識(shí)別告警；通過(guò)?？礎(chǔ)I開(kāi)放平臺(tái)進(jìn)行定制化訓(xùn)練，在15天內(nèi)完成了第一版檢測(cè)算法模型的部署上線。無(wú)人貨柜商品檢測(cè)消費(fèi)者商品注冊(cè)無(wú)人貨柜系統(tǒng)商品識(shí)別服務(wù)關(guān)門(mén)拍攝柜內(nèi)圖片檢測(cè)結(jié)果：農(nóng)夫山泉4瓶 康師傅礦泉水7瓶綠茶3瓶 藍(lán)可樂(lè)3瓶 立頓果茶4瓶開(kāi)門(mén)拍攝柜內(nèi)圖片檢測(cè)結(jié)果：農(nóng)夫山泉4瓶康師傅礦泉水7瓶綠茶4瓶藍(lán)可樂(lè)3瓶立頓果茶5瓶商品識(shí)別刷臉開(kāi)門(mén)遠(yuǎn)程監(jiān)控更多案例防止農(nóng)戶謊報(bào)豬只數(shù)量，私自販賣減少人力成本防止豬瘟感染全天候可視化監(jiān)管提升物業(yè)管理水平思考哪些行業(yè)？用途目的？特定場(chǎng)景？0

10、3AI開(kāi)放平臺(tái)使用指南Part ThreeAI開(kāi)放平臺(tái)業(yè)務(wù)流程數(shù)據(jù)分類和標(biāo)注訓(xùn)練數(shù)據(jù)訓(xùn)練樣本推理服務(wù)（螢石云/邊緣設(shè)備）模型模型評(píng)估訓(xùn)練實(shí)際場(chǎng)景數(shù)據(jù)推理結(jié)果12345678910AI開(kāi)放平臺(tái)用戶選擇適用于訓(xùn)練的圖像素材上傳至AI開(kāi)放平臺(tái)；用戶/?？捣?wù)團(tuán)隊(duì)對(duì)圖像進(jìn)行分類與標(biāo)注，形成訓(xùn)練樣本；AI開(kāi)放平臺(tái)進(jìn)行算法模型訓(xùn)練；AI開(kāi)放平臺(tái)輸出算法模型；通過(guò)素材對(duì)算法模型進(jìn)行評(píng)估；用戶選擇模型部署方式：螢石云/邊緣設(shè)備；用戶通過(guò)螢石云或邊緣設(shè)備使用AI開(kāi)放平臺(tái)提供的算法服務(wù)。12345678910流程說(shuō)明如何申請(qǐng)目前AI開(kāi)放平臺(tái)賬號(hào)已開(kāi)放在線注冊(cè)功能，登錄即可在線注冊(cè)。完成線上注冊(cè)之后，將注冊(cè)信息（姓

11、名、手機(jī)賬號(hào)、公司名稱、AppKey、行業(yè)性質(zhì)、項(xiàng)目簡(jiǎn)單情況、訓(xùn)練應(yīng)用點(diǎn)及相關(guān)信息）反饋至?？低晫?duì)應(yīng)的工作人員處，進(jìn)行內(nèi)部的流程處理。否則賬號(hào)無(wú)法申請(qǐng)成功！賬號(hào)注冊(cè)完善個(gè)人信息創(chuàng)建應(yīng)用在線申請(qǐng)獲取APPKEY模型訓(xùn)練和設(shè)備加載的詳細(xì)操作步驟可參考AI開(kāi)放平臺(tái)技術(shù)指南手冊(cè)開(kāi)始使用登錄并開(kāi)始使用AI開(kāi)放平臺(tái)登陸螢石開(kāi)放平臺(tái)輸入賬號(hào)、密碼1選擇“開(kāi)發(fā)者服務(wù)”-“算法訓(xùn)練平臺(tái)”23選擇“圖像分類模型”或“物體檢測(cè)模型”并開(kāi)始模型訓(xùn)練流程數(shù)據(jù)服務(wù)創(chuàng)建訓(xùn)練樣本通過(guò)AI開(kāi)放平臺(tái)創(chuàng)建可供模型訓(xùn)練的訓(xùn)練樣本創(chuàng)建一個(gè)數(shù)據(jù)集1為該數(shù)據(jù)集上傳保存在電腦本地的圖片，供該分類模型進(jìn)行訓(xùn)練2通過(guò)可視化的標(biāo)注工具對(duì)每張圖片進(jìn)行標(biāo)注，形成最終的訓(xùn)練樣本3訓(xùn)練服務(wù)模型訓(xùn)練與驗(yàn)證通過(guò)AI開(kāi)放平臺(tái)創(chuàng)建可供模型訓(xùn)練的訓(xùn)練樣本創(chuàng)建一個(gè)訓(xùn)練模型，指定其部署模式為螢石云或邊緣設(shè)備，并選擇預(yù)先創(chuàng)建的訓(xùn)練數(shù)據(jù)集1開(kāi)始訓(xùn)練，訓(xùn)練時(shí)間與訓(xùn)練樣本數(shù)量有關(guān)；等待過(guò)程中可以關(guān)閉瀏覽器，一段時(shí)間后再進(jìn)行查看2模型訓(xùn)練完成后，可對(duì)模型進(jìn)行驗(yàn)證，并查看驗(yàn)證結(jié)果3如部署模式為邊緣設(shè)備，則可下載該模型至電腦本地4模型部署模型管理通過(guò)行業(yè)應(yīng)用平臺(tái)進(jìn)行模型管理2將從AI開(kāi)放平臺(tái)下載的算法模型文件導(dǎo)入到行業(yè)應(yīng)用平臺(tái)為算法模型編輯相關(guān)屬性，包括模型名稱