大數(shù)據(jù)那些事

1、大數(shù)據(jù)那些事目錄 大數(shù)據(jù)時(shí)代1.背景歷史、時(shí)代2.認(rèn)知定義 特點(diǎn) 思維3.應(yīng)用全方位大變革4.未來(lái)機(jī)遇 挑戰(zhàn) 5.思考正在發(fā)生的未來(lái)6.學(xué)習(xí)菜鳥(niǎo)進(jìn)階2001年Gartner研究指出，現(xiàn)代信息社會(huì)的信息爆炸已經(jīng)演變成了數(shù)據(jù)爆炸。2008年Nature雜志出版?？癇ig Data”，分析了大量快速涌現(xiàn)數(shù)據(jù)給數(shù)據(jù)分析處理帶來(lái)的巨大挑戰(zhàn)。2011年Science推出關(guān)于數(shù)據(jù)處理的專刊“Dealing with data”，討論了數(shù)據(jù)洪流（Data Deluge）所帶來(lái)的挑戰(zhàn)。5月麥肯錫全球研究院發(fā)布了大數(shù)據(jù)：創(chuàng)新、競(jìng)爭(zhēng)和生產(chǎn)力的下一個(gè)領(lǐng)域研究報(bào)告。2012年3月奧巴馬總統(tǒng)宣布美國(guó)政府投資逾2億美元啟

2、動(dòng)“大數(shù)據(jù)研究和發(fā)展計(jì)劃（BDRDI）”。12月，維克托邁爾-舍恩伯格著作的大數(shù)據(jù)時(shí)代：生活、工作與思維的大變革。NO.1 背景歷史、時(shí)代4 硬件成本的降低網(wǎng)絡(luò)帶寬的提升云計(jì)算的興起網(wǎng)絡(luò)技術(shù)的發(fā)展智能終端的普及電子商務(wù)、社交網(wǎng)絡(luò)、 電子地圖等的全面應(yīng)用物聯(lián)網(wǎng)NO.1 背景歷史、時(shí)代大數(shù)據(jù)時(shí)代到來(lái)的必然性：NO.1 背景歷史、時(shí)代大數(shù)據(jù)時(shí)代真的來(lái)臨了么？ 隨著一系列標(biāo)志性事件的發(fā)生和建立，人們?cè)桨l(fā)感覺(jué)到大數(shù)據(jù)時(shí)代的力量。因此2013年被許多國(guó)外媒體和專家稱為“大數(shù)據(jù)元年”。當(dāng)今“大社會(huì)”，三分技術(shù)，七分?jǐn)?shù)據(jù)，得數(shù)據(jù)者得天下。麥肯錫全球研究院（2011）對(duì)大數(shù)據(jù)的定義是從數(shù)據(jù)集的大體量入手的：大數(shù)

3、據(jù)是指那些規(guī)模大到傳統(tǒng)的數(shù)據(jù)庫(kù)軟件工具已經(jīng)無(wú)法采集、存儲(chǔ)、管理和分析的數(shù)據(jù)集。百度百科對(duì)大數(shù)據(jù)的定義是: 大數(shù)據(jù)( Big Data) ，或稱巨量資料，指的是所涉及的資料量規(guī)模巨大到無(wú)法透過(guò)目前主流軟件工具，在合理時(shí)間內(nèi)達(dá)到擷取、管理、處理并整理成為幫助企業(yè)經(jīng)營(yíng)決策更積極目的的資訊。維克托邁爾-舍恩伯格（2012）在大數(shù)據(jù)時(shí)代一書(shū)中主要從價(jià)值大的角度來(lái)定義大數(shù)據(jù)，他認(rèn)為大數(shù)據(jù)是當(dāng)今社會(huì)所獨(dú)有的一種新型的能力：以一種前所未有的方式，通過(guò)對(duì)海量數(shù)據(jù)進(jìn)行分析，獲得有巨大價(jià)值的產(chǎn)品和服務(wù)，或深刻的洞見(jiàn)。NO.2 認(rèn)知定義、特點(diǎn)、思維大數(shù)據(jù)( Big Data) 的定義 數(shù)據(jù)體量巨大。從TB級(jí)別躍升到P

4、B級(jí)別。Volume 大量存儲(chǔ)量 麥肯錫估計(jì)，全球企業(yè)2010年硬盤上存儲(chǔ)了超過(guò)7EB的新數(shù)據(jù)，消費(fèi)者在個(gè)人電腦等設(shè)備上存儲(chǔ)了超過(guò)6EB的新數(shù)據(jù)。（相當(dāng)于美國(guó)國(guó)會(huì)圖書(shū)館中存儲(chǔ)數(shù)據(jù)的4000多倍）太字節(jié)，記作TB，1TB=1024GB；拍字節(jié)，記作PB，1PB=1024TB；艾字節(jié)，記作EB，1EB=1024PB；澤字節(jié)，記作ZB，1ZB=1024EB。NO.2 認(rèn)知定義、特點(diǎn)、思維大數(shù)據(jù)的4V特點(diǎn)：Volume、Velocity、Variety、Value 數(shù)據(jù)體量巨大。從TB級(jí)別躍升到PB級(jí)別。Volume 大量存儲(chǔ)量+計(jì)算量廣州超算中心16000個(gè)運(yùn)算節(jié)點(diǎn)312萬(wàn)個(gè)計(jì)算核心整體總計(jì)內(nèi)存1.

5、408PB12.4PB的硬盤陣列NO.2 認(rèn)知定義、特點(diǎn)、思維大數(shù)據(jù)的4V特點(diǎn)：Volume、Velocity、Variety、Value 數(shù)據(jù)體量巨大。從TB級(jí)別躍升到PB級(jí)別。Volume 大量Velocity 高速 處理速度快。1秒定律。 這一點(diǎn)也是和傳統(tǒng)的數(shù)據(jù)挖掘技術(shù)有著本質(zhì)的不同。數(shù)據(jù)更新、增長(zhǎng)速度快 Facebook上每秒有4.1萬(wàn)張照片上傳，2011年以發(fā)圖1400億張成為世界最大照片庫(kù)。NO.2 認(rèn)知定義、特點(diǎn)、思維大數(shù)據(jù)的4V特點(diǎn)：Volume、Velocity、Variety、Value 數(shù)據(jù)體量巨大。從TB級(jí)別躍升到PB級(jí)別。Volume 大量Velocity 高速 處理

6、速度快。1秒定律。 這一點(diǎn)也是和傳統(tǒng)的數(shù)據(jù)挖掘技術(shù)有著本質(zhì)的不同。Variety 多樣 數(shù)據(jù)類型繁多。不僅包括傳統(tǒng)的關(guān)系數(shù)據(jù)類型，也包括以網(wǎng)頁(yè)、音視頻、文檔等形式存在的未加工的、半結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)。NO.2 認(rèn)知定義、特點(diǎn)、思維大數(shù)據(jù)的4V特點(diǎn)：Volume、Velocity、Variety、Value 數(shù)據(jù)體量巨大。從TB級(jí)別躍升到PB級(jí)別。Volume 大量Velocity 高速 處理速度快。1秒定律。 這一點(diǎn)也是和傳統(tǒng)的數(shù)據(jù)挖掘技術(shù)有著本質(zhì)的不同。Variety 多樣 數(shù)據(jù)類型繁多。不僅包括傳統(tǒng)的關(guān)系數(shù)據(jù)類型，也包括以網(wǎng)頁(yè)、音視頻、文檔等形式存在的未加工的、半結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)

7、。Value 價(jià)值 價(jià)值密度低。以視頻為例，連續(xù)不間斷監(jiān)控過(guò)程中，可能有用的數(shù)據(jù)僅僅有一兩秒。NO.2 認(rèn)知定義、特點(diǎn)、思維大數(shù)據(jù)的4V特點(diǎn)：Volume、Velocity、Variety、ValueNO.2 認(rèn)知定義、特點(diǎn)、思維大數(shù)據(jù)的3個(gè)思維變革“更多”不是隨機(jī)樣本，而是全體數(shù)據(jù) 當(dāng)數(shù)據(jù)處理技術(shù)已經(jīng)發(fā)生翻天覆地的變化時(shí)，在大數(shù)據(jù)時(shí)代進(jìn)行抽樣分析就像在汽車時(shí)代騎馬一樣。一切都改變了，我們需要的是所有的數(shù)據(jù)，“樣本總體”?！案谩辈皇且蚬P(guān)系，而是相關(guān)關(guān)系 知道“是什么”就夠了，沒(méi)必要知道“為什么”。在大數(shù)據(jù)時(shí)代，我們不必非得知道現(xiàn)象背后的原因，而是要讓數(shù)據(jù)自己“發(fā)聲”?！案s”不是精確性，而

8、是混雜性 執(zhí)迷于精確性是信息缺乏時(shí)代和模擬時(shí)代的產(chǎn)物。只有5%的數(shù)據(jù)是有框架且能適用于傳統(tǒng)數(shù)據(jù)庫(kù)的。如果不能接受混亂，剩下95%的非框架數(shù)據(jù)都無(wú)法被利用，只有接受不精確性，我們才能打開(kāi)一扇從未涉足的世界的窗戶。商業(yè)領(lǐng)域社會(huì)管理領(lǐng)域醫(yī)療保健領(lǐng)域教育領(lǐng)域大數(shù)據(jù)公共服務(wù)電子政務(wù)企業(yè)管理商業(yè)智能生活?yuàn)蕵?lè)NO.3 應(yīng)用全方位 大變革情報(bào)收集氣候天氣總統(tǒng)選舉天文宇宙生物醫(yī)學(xué)&零售商電子商務(wù)NO.3 應(yīng)用全方位 大變革NO.3 應(yīng)用全方位 大變革預(yù)計(jì)2016年“百度大數(shù)據(jù)”上線對(duì)外付費(fèi)試用里昂市用大數(shù)據(jù)治堵里昂市開(kāi)發(fā)了一套決策支持優(yōu)化器，實(shí)時(shí)地報(bào)告交通的情況，并且來(lái)偵測(cè)擁堵的時(shí)間。NO.3 應(yīng)用全方位 大變

9、革利用短信、微博、微信和搜索引擎，可以收集熱點(diǎn)事件，挖掘輿情，還可以追蹤造謠信息的源頭。Farecast通過(guò)對(duì)于機(jī)票數(shù)據(jù)的趨勢(shì)變化情況，提供票價(jià)預(yù)測(cè)的服務(wù)，準(zhǔn)確度高達(dá)75% ，到2012年為止，F(xiàn)arecast系統(tǒng)用了將近十萬(wàn)億條價(jià)格記錄來(lái)幫助預(yù)測(cè)美國(guó)國(guó)內(nèi)航班的票價(jià)。NO.3 應(yīng)用全方位 大變革NO.3 應(yīng)用全方位 大變革通過(guò)對(duì)全市的歷史罪案以及出警紀(jì)錄得出城市各種罪案高發(fā)區(qū)域，例如剁手區(qū)/掏包區(qū)/性侵區(qū)等等，每天發(fā)布提醒，推送到市民的手機(jī)/平板等所有終端。我相信性侵區(qū)的流氓早晚會(huì)不堪重負(fù)而投案自首的。大數(shù)據(jù)在罪案預(yù)警的應(yīng)用 40天，36億人次。這是2014年春運(yùn)的總時(shí)間和總出行人數(shù)。在這場(chǎng)堪

10、稱人類歷史上最大規(guī)模的短期遷徙中，人群從哪兒去了哪兒？哪些線路最熱門？在以往，這些問(wèn)題可能難以精確回答。但隨著技術(shù)進(jìn)步，通過(guò)應(yīng)用“大數(shù)據(jù)”這一技術(shù)利器，人們已經(jīng)接近“在迷宮中感受全局”地看見(jiàn)春運(yùn)的全景。NO.3 應(yīng)用全方位 大變革大數(shù)據(jù)首次播報(bào)春運(yùn)遷徙實(shí)況 谷歌發(fā)現(xiàn)，某些搜索字詞可以很好地標(biāo)示流感疫情的現(xiàn)狀。Google 流感趨勢(shì)使用了經(jīng)過(guò)匯總的 Google 搜索數(shù)據(jù)庫(kù)來(lái)測(cè)流感疫情。谷歌流感趨勢(shì)項(xiàng)目NO.3 應(yīng)用全方位 大變革 奧巴馬的數(shù)據(jù)團(tuán)隊(duì)對(duì)數(shù)以千萬(wàn)計(jì)的選民郵件進(jìn)行了大數(shù)據(jù)挖掘，精確預(yù)測(cè)出了更可能擁護(hù)奧巴馬的選民類型，并進(jìn)行了有針對(duì)性的宣傳，從而幫助奧巴馬成為了美國(guó)歷史上唯一一位在競(jìng)選經(jīng)

11、費(fèi)處于劣勢(shì)下實(shí)現(xiàn)連任的總統(tǒng)。大數(shù)據(jù)幫助奧巴馬成功實(shí)現(xiàn)連任NO.3 應(yīng)用全方位 大變革通過(guò)大數(shù)據(jù)你可以知道：一個(gè)學(xué)生成績(jī)不好是由于他因?yàn)橹車h(huán)境而分心了嗎？期末考試不及格是否說(shuō)明學(xué)生未掌握學(xué)習(xí)內(nèi)容，還是因?yàn)樗?qǐng)了很多病假的緣故？ 在加拿大，教育科技公司“渴望學(xué)習(xí)”（Desire 2 Learn）已經(jīng)面向高等教育領(lǐng)域的學(xué)生，推出了基于過(guò)去的學(xué)習(xí)成績(jī)數(shù)據(jù)預(yù)測(cè)并改善未來(lái)學(xué)習(xí)成績(jī)的大數(shù)據(jù)服務(wù)項(xiàng)目。通過(guò)監(jiān)控學(xué)生閱讀電子化的課程材料、提交電子版的作業(yè)、通過(guò)在線與同學(xué)交流、完成考試與測(cè)驗(yàn)，就能讓計(jì)算程序持續(xù)、系統(tǒng)地分析每個(gè)學(xué)生的教育數(shù)據(jù)。老師得到的不再是過(guò)去那種只展示學(xué)生分?jǐn)?shù)與作業(yè)的結(jié)果，而是像閱讀材料的時(shí)間

12、長(zhǎng)短等這樣更為詳細(xì)的重要信息。這樣老師就能及時(shí)診斷問(wèn)題的所在，提出改進(jìn)的建議，并預(yù)測(cè)學(xué)生的期末考試成績(jī)。NO.3 應(yīng)用全方位 大變革 新華社新媒體中心聯(lián)合數(shù)托邦創(chuàng)意分析工作室抓取了新浪微 博上提及“爸爸去哪兒”45.5萬(wàn)條原創(chuàng)微博，并對(duì)36.7萬(wàn)獨(dú)立原發(fā)作者用戶（去除疑似水軍賬戶）、1300余萬(wàn)條用戶微博及近1億的關(guān)系進(jìn)行數(shù)據(jù)分析。結(jié)果發(fā)現(xiàn)：爸爸去哪兒不僅成為名副其實(shí)的“口碑王”，還使娛樂(lè)節(jié)目發(fā)生了很多微妙變化。 大愛(ài)在那兒！爸爸去哪兒大數(shù)據(jù)解讀NO.3 應(yīng)用全方位 大變革粉絲性別比例：“爸爸粉”女性占到八成。難道是因?yàn)樾前痔珟洠慨?dāng)然，這與微博中女性用戶占比較高和她們更愛(ài)分享轉(zhuǎn)評(píng)的習(xí)慣也有關(guān)。

13、 用戶年齡分布：覆蓋適齡婚育群體，觀眾氣質(zhì)更顯成熟。不少適齡青年發(fā)微博稱，“看到某某，我也好想結(jié)婚，想有個(gè)這樣的兒子女兒?！?地區(qū)偏好排行：爸爸去哪兒的觀眾明顯向GDP高地聚集。對(duì)湘派娛樂(lè)節(jié)目免疫力極強(qiáng)的京、滬、蘇、蜀等地罕見(jiàn)上榜。爸爸去哪兒偏好度前十省份中，有個(gè)GDP十強(qiáng)省份，涵蓋3個(gè)直轄市。這是否能說(shuō)明，一部分“先富起來(lái)”的人，對(duì)親子關(guān)系有更深的焦慮和更多的期待？ NO.3 應(yīng)用全方位 大變革贊助商潛在贊助商明星同類節(jié)目競(jìng)爭(zhēng)者節(jié)目組觀眾大數(shù)據(jù)解讀可能的受益者滿足了自己“八卦”的需求。對(duì)這個(gè)節(jié)目有了深入的了解。從爸爸去哪兒的成功中可以學(xué)到什么？本次贊助是否成功？成功在哪里？為以后廣告的投放提

14、供了經(jīng)驗(yàn)。了解了自己及孩子在觀眾心中的“熱度”，為下一步轉(zhuǎn)型及孩子未來(lái)的規(guī)劃提供參考。根據(jù)之前的數(shù)據(jù)分析，大膽推出了低成本同名電影并大獲成功！第二季的拍攝緊鑼密鼓地進(jìn)行著為決策提供支持。若自己的目標(biāo)客戶與該節(jié)目的觀眾一致，可以考慮下一季的贊助。NO.3 應(yīng)用全方位 大變革贊助商熱度：主冠名贊助商強(qiáng)勢(shì)冒出，在幾乎沒(méi)有社交媒體營(yíng)銷配合下，微博熱度強(qiáng)勁增長(zhǎng)。英菲尼迪從第三期開(kāi)始廣告植入，話題增量立竿見(jiàn)影。思念水餃配合“爸爸吃神馬”等互動(dòng)促銷，參與度有所增加。只是不知，三大贊助商的投入是否與這一結(jié)果完全契合？ 明星關(guān)注度：數(shù)據(jù)來(lái)自于每期節(jié)目播出后一周內(nèi)5對(duì)父子的原發(fā)微博提及量（含昵稱）。張亮父子低調(diào)亮

15、相，關(guān)注度逐期上升，成功實(shí)現(xiàn)實(shí)現(xiàn)“逆襲”。 NO.3 應(yīng)用全方位 大變革機(jī)遇大數(shù)據(jù)技術(shù)促進(jìn)國(guó)家和社會(huì)發(fā)展大數(shù)據(jù)藍(lán)海成為企業(yè)競(jìng)爭(zhēng)的新焦點(diǎn)大數(shù)據(jù)時(shí)代呼喚創(chuàng)新型人才挑戰(zhàn)大數(shù)據(jù)技術(shù)的運(yùn)用仍有困難大數(shù)據(jù)給信息安全帶來(lái)新挑戰(zhàn)NO.4 未來(lái)機(jī)遇與挑戰(zhàn) 大數(shù)據(jù)技術(shù)的運(yùn)用前景是十分光明的。當(dāng)前，我國(guó)正處在全面建成小康社會(huì)征程中，工業(yè)化、信息化、城鎮(zhèn)化、農(nóng)業(yè)現(xiàn)代化任務(wù)很重，建設(shè)下一代信息基礎(chǔ)設(shè)施，發(fā)展現(xiàn)代信息技術(shù)產(chǎn)業(yè)體系，健全信息安全保障體系，推進(jìn)信息網(wǎng)絡(luò)技術(shù)廣泛運(yùn)用，是實(shí)現(xiàn)四化同步發(fā)展的保證。大數(shù)據(jù)分析對(duì)我們深刻領(lǐng)會(huì)世情和國(guó)情，把握規(guī)律，實(shí)現(xiàn)科學(xué)發(fā)展，做出科學(xué)決策具有重要意義，我們必須重新認(rèn)識(shí)數(shù)據(jù)的重要價(jià)值。N

16、O.4 未來(lái)機(jī)遇與挑戰(zhàn)機(jī)遇大數(shù)據(jù)技術(shù)促進(jìn)國(guó)家和社會(huì)發(fā)展 大數(shù)據(jù)所能帶來(lái)的巨大商業(yè)價(jià)值，被認(rèn)為將引領(lǐng)一場(chǎng)足以與20世紀(jì)計(jì)算機(jī)革命匹敵的巨大變革。大數(shù)據(jù)正在對(duì)每個(gè)領(lǐng)域都造成影響，包括商業(yè)、經(jīng)濟(jì)等領(lǐng)域。大數(shù)據(jù)正在促生新的藍(lán)海，催生新的經(jīng)濟(jì)增長(zhǎng)點(diǎn)，正在成為企業(yè)競(jìng)爭(zhēng)的新焦點(diǎn)。 在今天的大數(shù)據(jù)時(shí)代，商業(yè)的生態(tài)環(huán)境在不經(jīng)意間發(fā)生了巨大的變化：網(wǎng)民和消費(fèi)者的界限正在變得模糊，無(wú)處不在的智能終端，隨時(shí)在線的網(wǎng)絡(luò)傳輸，互動(dòng)頻繁的社交網(wǎng)絡(luò)讓以往只是網(wǎng)頁(yè)瀏覽者的網(wǎng)民的面孔從模糊變得清晰，對(duì)于企業(yè)來(lái)說(shuō)，他們第一次有機(jī)會(huì)進(jìn)行大規(guī)模的精準(zhǔn)化的消費(fèi)者行為研究：作為保持著持續(xù)變革欲望的企業(yè)，主動(dòng)地?fù)肀н@種變化，從戰(zhàn)略到戰(zhàn)術(shù)層而

17、開(kāi)始自我的蛻變和進(jìn)化將會(huì)讓他們更加適應(yīng)這個(gè)新的時(shí)代，大數(shù)據(jù)藍(lán)海成為未來(lái)競(jìng)爭(zhēng)的制高點(diǎn)。NO.4 未來(lái)機(jī)遇與挑戰(zhàn)機(jī)遇大數(shù)據(jù)藍(lán)海成為企業(yè)競(jìng)爭(zhēng)的新焦點(diǎn) 蓋特納咨詢公司預(yù)測(cè)大數(shù)據(jù)將為全球帶440萬(wàn)個(gè)IT新崗位和上千萬(wàn)個(gè)非IT崗位。麥肯錫公司預(yù)測(cè)美國(guó)到2018年需要深度數(shù)據(jù)分析人才44萬(wàn)49萬(wàn)，缺口14萬(wàn)19萬(wàn)人；需要既熟悉本單位需求又了解大數(shù)據(jù)技術(shù)與應(yīng)用的管理者150萬(wàn)，這方面的人才缺口更大。中國(guó) 是人才大國(guó)，但能理解與應(yīng)用大數(shù)據(jù)的創(chuàng)新人才更是稀缺資源。NO.4 未來(lái)機(jī)遇與挑戰(zhàn)機(jī)遇大數(shù)據(jù)時(shí)代呼喚創(chuàng)新型人才數(shù)據(jù)收集 要對(duì)來(lái)自網(wǎng)絡(luò)包括物聯(lián)網(wǎng)和機(jī)構(gòu)信息系統(tǒng)的數(shù)據(jù)附上時(shí)空標(biāo)志，去偽存真，盡可能收集異源甚至是異構(gòu)

18、的數(shù)據(jù)，還可與歷史數(shù)據(jù)對(duì)照，多角度驗(yàn)證數(shù)據(jù)的全面性和可信性。數(shù)據(jù)存儲(chǔ) 要達(dá)到低成本、低能耗、高可靠性目標(biāo)，要用到冗余配置、分布化和云計(jì)算技術(shù)，存儲(chǔ)時(shí)對(duì)數(shù)據(jù)進(jìn)行分類，通過(guò)過(guò)濾和去重，減少存儲(chǔ)量，并加入便于檢索的標(biāo)簽。數(shù)據(jù)處理 大數(shù)據(jù)的復(fù)雜性使得難以用傳統(tǒng)的方法描述與度量，需要將高維圖像等多媒體數(shù)據(jù)降維后度量與處理，利用上下文關(guān)聯(lián)進(jìn)行語(yǔ)義分析，從大量動(dòng)態(tài)及可能模棱兩可的數(shù)據(jù)中綜合信息，并導(dǎo)出可理解的內(nèi)容。結(jié)果的可視化呈現(xiàn) 使結(jié)果更直觀以便于洞察。目前，盡管計(jì)算機(jī)智能化有了很大進(jìn)步，但還只能針對(duì)小規(guī)模、有結(jié)構(gòu)或類結(jié)構(gòu)的數(shù)據(jù)進(jìn)行分析，談不上深層次的數(shù)據(jù)挖掘，現(xiàn)有的數(shù)據(jù)挖掘算法在不同行業(yè)中難以通用。 目

19、前，大數(shù)據(jù)技術(shù)的運(yùn)用仍存在一些困難與挑戰(zhàn)，體現(xiàn)在大數(shù)據(jù)挖掘的四個(gè)環(huán)節(jié)中。NO.4 未來(lái)機(jī)遇與挑戰(zhàn)挑戰(zhàn)大數(shù)據(jù)技術(shù)的運(yùn)用仍有困難大量數(shù)據(jù)的集中存儲(chǔ)增加了其泄露的風(fēng)險(xiǎn)；一些敏感數(shù)據(jù)的所有權(quán)和使用權(quán)并沒(méi)有清晰界定。復(fù)雜的數(shù)據(jù)存儲(chǔ)在一起，可能造成企業(yè)安全管理不合規(guī)；安全防護(hù)手段更新升級(jí)慢，存在漏洞黑客可收集更多有用信息，大數(shù)據(jù)分析讓攻擊更精準(zhǔn)；大數(shù)據(jù)為黑客發(fā)起攻擊提供了更多的機(jī)會(huì)加大隱私泄露風(fēng)險(xiǎn)對(duì)現(xiàn)有存儲(chǔ)和安防措施提出挑戰(zhàn)被運(yùn)用到攻擊手段中NO.4 未來(lái)機(jī)遇與挑戰(zhàn)挑戰(zhàn)大數(shù)據(jù)給信息安全帶來(lái)新挑戰(zhàn)“棱鏡門”引爆大數(shù)據(jù)時(shí)代爭(zhēng)議 斯諾登的爆料引起一片嘩然，根據(jù)他提供的資料，被卷入“棱鏡門”事件的公司包括微軟、雅

20、虎、谷歌、蘋果、Facebook等9大IT業(yè)巨頭。在“棱鏡門”事件開(kāi)始發(fā)酵之后，這些公司先是趕緊出面否認(rèn)與美國(guó)政府的監(jiān)視項(xiàng)目進(jìn)行過(guò)合作，并相繼發(fā)表聲明，呼吁政府采取更透明態(tài)度，以證明他們的“清白”。 事情的起因是美國(guó)中情局前職員斯諾登向媒體爆料，過(guò)去6年間，美國(guó)的情報(bào)部門通過(guò)一個(gè)代號(hào)為“棱鏡”的項(xiàng)目，從多家知名互聯(lián)網(wǎng)公司獲取電子郵件、在線聊天內(nèi)容、照片、文檔、視頻等網(wǎng)絡(luò)私人數(shù)據(jù)，跟蹤用戶一舉一動(dòng)。他說(shuō)，自己只需要坐在辦公桌前，動(dòng)動(dòng)指頭，敲敲鍵盤，就能了解很多人的私密信息。NO.4 未來(lái)機(jī)遇與挑戰(zhàn) 一方面我們通過(guò)對(duì)大量用戶數(shù)據(jù)的分析，公司、企業(yè)、政府都可以更好的了解用戶行為、消費(fèi)習(xí)慣的等等，從而可以提供更好的服務(wù)。但是另外一方面，這又不可避免的對(duì)用戶的隱私構(gòu)成威脅、挑戰(zhàn)。很多人已經(jīng)意識(shí)到，在數(shù)據(jù)的應(yīng)用方面，相關(guān)法律法規(guī)的制定變得越來(lái)越重