大數據的融合與應用49

1、大數據融合及應用 演講人：李月月第四組人員： 潘正兵、馮衛(wèi)嬌、閔青焱、劉雙龍 李月月、白雪、劉超目錄 大數據應用案例1 大數據關鍵技術42 大數據帶來的時代變革56 大數據風險 大數據在“工業(yè)4.0”中的應用 認識大數據37 結語目錄 大數據應用案例1 大數據關鍵技術42 大數據帶來的時代變革56 大數據風險 大數據在“工業(yè)4.0”中的應用 認識大數據37 結語一個父親親有一個個高中的的女兒，接到了了一個促促銷的廣廣告，是是關于嬰嬰兒的廣廣告，這這個父親親勃然大大怒，說說商家無無良，為為了促銷銷向我的的高中生生女兒促促銷嬰兒兒產品。但是過過了一兩兩個星期期，他感感到非常常內疚，因為他他對于商商

2、家的這這種態(tài)度度是錯誤誤的，原原因是他他的高中中女兒確確實懷孕孕了。為為什么商商家會發(fā)發(fā)現這個個問題呢呢？商家家實際上上就是通通過在商商場的一一些數據據挖掘和和對比，發(fā)現這這個女孩孩子經常常在商場場里購買買過類似似的一些些商品，在有一一些類似似的貨架架面前駐駐足觀看看，而且且這個頻頻度很高高，商家家對于后后臺大數數據的分分析，篩篩選出潛潛在的客客戶，發(fā)發(fā)出商業(yè)業(yè)廣告。案例1“無良”商家案例2農夫山泉泉利用大大數據賣賣礦泉水水案例3阿迪達斯斯的“黃金羅盤盤”案例4淘寶網掘掘金大數數據金融融市場淘寶推出出信用貸貸款服務務，不依依賴擔保保、抵押押，僅基基于海量量的企業(yè)業(yè)經營數數據，通通過大數數據分析

3、析，分析析出企業(yè)業(yè)經營狀狀況和信信譽度，作出決決策，這這種金融融模式獲獲得了巨巨大的成成功！大數據幫幫助提高高制造績績效的3個主要方方面分別是：更好的的預測產產品需求求并調整整產能（46%），跨多多重指標標理解工工廠績效效（45%）以及更更快地為為消費者者提供服服務與支支持（39%）。上述述數據是是根據“LNS研究與MESA國際”的的近期調調查得出出的。案例5麥肯錫：如何利利用大數數據改進進制造業(yè)業(yè)案例5喬布斯的的癌癥治治療蘋果公司司的傳奇奇總裁史史蒂夫-喬布斯在在與癌癥癥斗爭的的過程中中采用了了不同的的方式，成為世世界上第第一個對對自身所所有DNA和腫瘤DNA進行排序序的人。喬布斯斯生病后后

4、，治療療團隊也也調用了了大數據據，對喬喬布斯的的個人情情況匹配配海量的的診療數數據，得得到一個個更好的的治療方方案，因因此他的的生命得得以延長長了好幾幾年。喬布斯開開玩笑說說：“我我要么是是第一個個通過這這種方式式戰(zhàn)勝癌癌癥的人人，要么么就是最最后一個個因為這這種方式式死于癌癌癥的人人。趣多多在愚愚人節(jié)的的這次營營銷活動動，創(chuàng)造造了6億多次頁頁面瀏覽覽并影響響到近1,500萬獨立用用戶，品品牌被提提及的次次數增長長了270%?？梢哉f說這是一一次成功功的品牌牌營銷活活動，廣廣泛的發(fā)發(fā)聲，讓讓趣多多多的用戶戶關注度度得到了了一次巨巨大的提提升，詼詼諧幽默默的品牌牌基因更更加深入入的進入入到用戶戶的

5、意識識層面。案例6依靠大數數據玩轉轉愚人節(jié)節(jié)營銷目錄 大數據應用案例1 大數據關鍵技術42 大數據帶來的時代變革56 大數據風險 大數據在“工業(yè)4.0”中的應用 認識大數據37 結語大數據帶帶來的時時代變革革 一場生活活、工作作與思維維的大變變革！大數據開開啟了一一次重大大的時代代轉型。就想望望遠鏡讓讓我們能能夠感受受宇宙，顯微鏡鏡讓我們們能夠觀觀測微生生物一樣樣，大數數據正在在改變我我們的生生活以及及理解世世界的方方式，成成為新發(fā)發(fā)明和新新服務的的源泉，而更多多的改變變正蓄勢勢待發(fā)大數據，變革公共衛(wèi)生生大數據，變革商業(yè)大數據，變革思維大數據，開啟重重大的時代轉型型預測，大大數據的的核心大數據

6、，大挑戰(zhàn)一、大數數據時代代的思維維變革“更多”不是隨機機樣本，而是全全體數據據！當數據處處理技術術已經發(fā)發(fā)生翻天天覆地的的變化時時，在大大數據時時代進行行抽樣分分析就像像在汽車車時代騎騎馬一樣樣。一切切都改變變了，我我們需要要的是所所有的數數據，“樣本總體”。讓數據“發(fā)聲”小數據時時代的隨隨機采樣樣，最少少的數據據獲得最最多的信信息全數據模模式，樣本總體執(zhí)迷于精精確性是是信息缺缺乏時代代和模擬擬時代的的產物。只有5%的數據是是有框架架且能適適用于傳傳統(tǒng)數據據庫的。如果不不能接受受混亂，剩下95%的非框架架數據都都無法被被利用，只有接接受不精精確性，我們才才能打開開一扇從從未涉足足的世界界的窗戶

7、戶。允許不精精確大數據的的簡單算算法比小小數據的的復雜算算法更有有效紛繁的數數據越多多越好混雜性，不是竭竭力避免免，而是是標準途途徑新的數據據庫設計計的誕生生“更雜”不是精確確性，而而是混雜雜性！知道“是是什么”就夠了了，沒必必要知道道“為什什么”。在大數數據時代代，我們們不必非非得知道道現象背背后的原原因，而而是要讓讓數據自自己“發(fā)發(fā)聲”。關聯(lián)物，預測的的關鍵“是什么么”，而而不是“為什么么”改變，從從操作方方式開始始大數據，改變人人類探索索世界的的方法“更好”不是因果果關系，而是相相關關系系二、大數數據時代代的商業(yè)業(yè)變革大數據發(fā)發(fā)展的核核心動力力來源于于人類測測量、記記錄和分分析世界界的渴

8、望望。信息息技術變變革隨處處可見，但是如如今信息息技術變變革的重重點在“T”（技術術）上，而不是是在“I”(信息）上上?，F在在，我們們是時候候把聚光光燈打向向“I”，開始始關注信信息本身身了。數據，從從最不可可能的地地方提取取出來數據化，不是數數字化量化一切切，數據據化的核核心當文字變變成數據據當方位變變成數據據當溝通成成為數據據一切事物物的數據據化“數據化化”一切皆可可“量化化”數據就像像一個神神奇的鉆鉆石礦，當它的的首要價價值被發(fā)發(fā)掘后仍仍能不斷斷給予。它的真真實價值值就像漂漂浮在海海洋中的的冰山，第一眼眼只能看看到冰山山的一角角，而絕絕大部分分都隱藏藏在表面面之下。數據創(chuàng)新新1：數據的的

9、再利用用數據創(chuàng)新新2：重組數數據數據創(chuàng)新新3：可擴展展數據數據創(chuàng)新新4：數據的的折舊值值數據創(chuàng)新新5：數據廢廢氣數據創(chuàng)新新6：開放數數據給數據估估值“價值”“取之不不盡，用用之不竭竭”的數數據創(chuàng)新新微軟以1.1億美元的的價格購購買了大大數據公公司Farecast，而兩年年后谷歌歌則以7億美元的的價格購購買了給給Farecast提供數據據的ITASoftware公司。如如今，我我們正處處在大數數據時代代的早期期，思維維和技術術是最有有價值的的，但是是最終大大部分價價值還是是必須從從數據本本身來挖挖掘?！敖巧ǘㄎ弧睌祿⒓技夹g與思思維的三三足鼎立立三、大數數據時代代的管理理變革我們時刻刻都暴露露

10、在“第第三只眼眼”之下下：亞馬馬遜監(jiān)視視著我們們的購物物習慣，谷歌監(jiān)監(jiān)視著我我們的網網頁瀏覽覽習慣，而微博博似乎什什么都知知道，不不僅竊聽聽到了我我們心中中的“TA”，還有有我們的的社交關關系網。無處不在在的“第第三只眼眼”我們的隱隱私被二二次利用用了預測與懲懲罰，不不是因為為“所做做”，而而是因為為“將做做”數據獨裁裁掙脫大數數據的困困境“風險”讓數據主主宰一切切的隱憂憂當世界開開始邁向向大數據據時代時時，社會會也將經經歷類似似的地殼殼運動。在改變變人類基基本的生生活與思思考方式式的同時時，大數數據早已已在推動動人類信信息管理理準則上上重新定定位。然然而，不不同于印印刷革命命，我們們沒有幾幾

11、個世紀紀的時間間去適應應，我們們也許只只有幾年年時間。管理變革革1：個人隱隱私保護護，從個個人許可可到讓數數據使用用者承擔擔責任管理變革革2：個人動動因VS預測分析析管理變革革3：擊碎黑黑盒子，大數據據程序員員的崛起起管理變革革4：反數據據壟斷大大亨“掌控”責任與自自由并舉舉的信息息管理正在發(fā)生生的未來來大數據并并不是一一個充斥斥著算法法和機器器的冰冷冷世界，人類的的作用依依然無法法被完全全替代。大數據據為我們們提供的的不是最最終答案案，只是是參考答答案，幫幫助是暫暫時的，而更好好的方法法和答案案還在不不久的未未來！目錄 大數據應用案例1 大數據關鍵技術42 大數據帶來的時代變革56 大數據風

12、險 大數據在“工業(yè)4.0”中的應用 認識大數據37 結語最早提出出“大數數據”時時代到來來的是全全球知名名咨詢公公司麥肯肯錫。麥麥肯錫稱稱：數據據，已經經滲透到到當今每每領域一一個行業(yè)業(yè)和業(yè)務務職能領領域，成成為重要要的生產產因素！“大量化化(Volume)、多樣化化(Variety)、快速化化(Velocity)、價值密密度低（Value）”就是是“大數數據”的的顯著特特征，或或者說，只有具具備這些些特點的的數據，才是大大數據。VolumeVelocityValueVariety大數據的的4V特征數據體量巨大百度資料表明，其新首頁導航每天需要提供的數據超過1.5PB（1PB=1024TB），

13、這些數據如果打印出來將超過5千億張A4紙。有資料證實，到目前為止，人類生產的所有印刷材料的數據量僅為200PB。數據類型多樣現在的數據類型不僅是文本形式，更多的是圖片、視頻、音頻、地理、位置信息等多類型的數據，個性化數據占絕對多數。處理速度快數據處理遵循“1秒定律”，可從各種類型的數據中快速獲得高價值的信息。價值密度低以視頻為例，一小時的視頻，在不間斷的監(jiān)控過程中，可能有用的數據僅僅只有一兩秒。目錄 大數據應用案例1 大數據相關技術42 大數據帶來的時代變革56 大數據風險 大數據在“工業(yè)4.0”中的應用 認識大數據37 結語Structure based: key value integra

14、tion Your text in here Content based: spatial-temporal linkageKnowledge: ontology guided data fusion, Common sense integration, Domain knowledgeObserve relationships between every data items Reveal the trends Create new conceptsShow the categories and hierarchies Data mining: association, clustering

15、, time-series and classification analytics Graph mining Ranking everything數據融合大數據分析可視化 大 數 據 處 理 理 論 依 據大數據系統(tǒng)構件數據管理知識開發(fā)用戶互動基于SQL語言:面對OLAP的傳統(tǒng)行行和列不基于SQL或map-reduce的:由谷歌率率先發(fā)起起數據流:基于運行行商數據據直接生生成任意意圖形新平臺技術數據入口口/匯聚數據平臺臺分析不同范圍的服務傳統(tǒng)交付付模式-單片或基基于設備備的解決決方案云:能夠充分分利用物物理設施施的彈性性，以實實現處理理快速增增長數據據的能力力“數據庫將演變成一個虛擬的，基于

16、云計算，超級可擴展的分布式平臺?！? Forrester analyst Jim Kobielus新的傳輸方案大數據新新模式和和新技術術Gartner 2011年技術成成熟度曲曲線,大數據處處于高速速發(fā)展期期 大數據應用案例1 大數據關鍵技術42 大數據帶來的時代變革56 大數據風險 大數據在“工業(yè)4.0”中的應用 認識大數據37 結語一、制造造業(yè)正處處于一個個數據爆爆炸的時時代【制造業(yè)企企業(yè)的運運營越來來越依賴賴信息技技術】【制造業(yè)整個價值值鏈、制制造業(yè)產產品的整整個生命周期期都涉及到諸諸多的數據】【數據量的暴漲漲成了許許多行業(yè)業(yè)共同面面對的嚴嚴峻挑戰(zhàn)戰(zhàn)和寶貴貴機遇】制造業(yè)大大數據分分布圖產

17、品數據據：設計、建建模、工工藝、加加工、測測試、維維護數據據、產品品結構、零部件件配置關關系、變變更記錄錄等。運營數據據：組織結構構、業(yè)務務管理、生產設設備、市市場營銷銷、質量量控制、生產、采購、庫存、目標計計劃、電電子商務務等。價值鏈數數據：客戶、供供應商、合作伙伙伴等。外部數據據：經濟運行行數據、行業(yè)數數據、市市場數據據、競爭爭對手數數據等。個性化定定制數據據：大規(guī)模定定制和網網絡協(xié)同同的發(fā)展展，使得得個性化化定制數數據一躍躍成為消消費者張張揚個性性的載體體。二、大數數據是工工業(yè)互聯(lián)聯(lián)網的命命脈大數據可能能帶來的的巨大價價值正在在被傳統(tǒng)統(tǒng)產業(yè)認可！通過技術創(chuàng)新新與發(fā)展展，以及及數據的的全面

18、感感知、收收集、分分析、共共享，為為企業(yè)管管理者和和參與者者呈現出出看待制制造業(yè)價價值鏈的的全新視視角。二、大數數據是工工業(yè)互聯(lián)聯(lián)網的命命脈1）實現智智能生產產2）實現大大規(guī)模定定制“兩個海量” 消費需求產生海量數據 生產過程產生海量數據 這兩方面大數據信息流最終通過互聯(lián)網在智能設備之間傳遞，由智能設備進行分析、判斷、決策、調整、控制并繼續(xù)開展智能生產，生產出高品質的個性化產品 實現工業(yè)4.0的兩大特征：智能與互聯(lián)大數據應用將帶來制造業(yè)企業(yè)創(chuàng)新和變革的新時代。三、大數數據構成成新一代代智能工工廠工業(yè)4.0時代的到來，意味著著工業(yè)大數數據時代代的到來來。工業(yè)業(yè)大數據據的應用用，也必將將成為未來來提升制制造業(yè)生生產力、競爭力力、創(chuàng)新新能力的的關鍵要素抓住二者者，便能能占據全全球工業(yè)轉型的制制高點！ 大數據應用案例1 大數據關鍵技術42 大數據帶來的時代變革56 大數據風險 大數據在“工業(yè)4.0”中的應用 認識大數據37 結語卓越的才才華并不不依賴大大數據，大數據扼扼殺創(chuàng)新新。如果對不不可量化化的事物物進行量量化，我們將失失去全面面了解該該事物的的機會！大數據屬屬于誰？目錄 大數據應用案例1 大數