大數(shù)據(jù)的經(jīng)典應(yīng)用案例.docx

大數(shù)據(jù)的經(jīng)典應(yīng)用案例大數(shù)據(jù)(Big Data)是指“無法用現(xiàn)有的軟件工具提取、存儲(chǔ)、搜索、共享、分析和處理的海量的、復(fù)雜的數(shù)據(jù)集合?！睒I(yè)界通常用4個(gè)V(即Volume、Variety、Value、Velocity)來概括大數(shù)據(jù)的特征。大數(shù)據(jù)時(shí)代下的核心，預(yù)測(cè)分析已在商業(yè)和社會(huì)中得到廣泛應(yīng)用。隨著越來越多的數(shù)據(jù)被記錄和整理，未來預(yù)測(cè)分析必定會(huì)成為所有領(lǐng)域的關(guān)鍵技術(shù)。本文為大家介紹一些典型的應(yīng)用例子。健康與醫(yī)療：Fitbit Official Site: Flex, One and Zip Wireless Activity and Sleep Trackers的健身腕帶可以收集有關(guān)我們走路或者慢跑的數(shù)據(jù)，例如行走步數(shù)、卡路里消耗、睡眠時(shí)長(zhǎng)等數(shù)據(jù)與健康記錄來改善我們的健康狀況；Early Detection of Patient Deterioration等公司正在開發(fā)床墊監(jiān)測(cè)傳感器，自動(dòng)監(jiān)測(cè)和記錄心臟速率、呼吸速率、運(yùn)動(dòng)和睡眠活動(dòng)。該傳感器收集的數(shù)據(jù)以無線方式被發(fā)送到智能手機(jī)和平板電腦進(jìn)行進(jìn)一步分析；美國(guó)公共衛(wèi)生協(xié)會(huì)（APHA: American Public Health Association）開發(fā)Flu Near You用來的癥狀，通過大數(shù)據(jù)分析生成報(bào)告顯示用戶所在地區(qū)的流感活動(dòng)。視頻：互聯(lián)網(wǎng)電視能夠追蹤你正在看的內(nèi)容，看了多長(zhǎng)時(shí)間，甚至能夠識(shí)別多少人坐在電視機(jī)前，來確定這個(gè)頻道的流行度。Netflix美國(guó)國(guó)內(nèi)規(guī)模最大的商業(yè)視頻流供應(yīng)商，收集的數(shù)據(jù)包括用戶在看什么、喜歡在什么時(shí)段觀看、在哪里觀看以及使用哪些設(shè)備觀看等。甚至記錄用戶在哪視頻的哪個(gè)時(shí)間點(diǎn)后退、快進(jìn)或者暫停，乃至看到哪里直接將視頻關(guān)掉等信息。典型的應(yīng)用是Netflix公司利用數(shù)據(jù)說服BBC重新翻拍了電視連結(jié)劇紙牌屋，而且成功的挖掘出演員Kevin Spacey和導(dǎo)演David Fincher的支持者與原劇集粉絲的關(guān)聯(lián)性，確定新劇拍攝的最佳人選。交通：車來了通過分析公交車上GPS定位系統(tǒng)每天的位置和時(shí)間數(shù)據(jù)，結(jié)合時(shí)刻表預(yù)測(cè)出每一輛公交車的到站時(shí)間；WNYC開發(fā)的Transit Time NYC通過開源行程平臺(tái)（Github：OpenTripPlanner和MTA）獲取的數(shù)據(jù)將紐約市劃分成2930個(gè)六邊形，模擬出從每一個(gè)六邊形中點(diǎn)到邊緣的時(shí)間（地鐵和步行，時(shí)間是上午九點(diǎn)），最終建模出4290985條虛擬線路。用戶只需點(diǎn)擊地圖或者輸入地址就能知道地鐵到達(dá)每個(gè)位置的時(shí)間；實(shí)時(shí)交通數(shù)據(jù)采集商INRIX-Traffic的口號(hào)是（永不遲到?。?，通過記錄每位用戶在行駛過程中的實(shí)時(shí)數(shù)據(jù)例如行駛車速，所在位置等信息并進(jìn)行數(shù)據(jù)匯總分析，而后計(jì)算出最佳線路，讓用戶能夠避開擁堵。電子商務(wù)：Decide是一家預(yù)測(cè)商品價(jià)格并為消費(fèi)者提出購買時(shí)間建議的創(chuàng)業(yè)公司，通過抓取亞馬遜、百思買、新蛋及全球各大網(wǎng)站上數(shù)以十億計(jì)的數(shù)據(jù)進(jìn)行分析，最終整合在一個(gè)頁面中方便消費(fèi)者對(duì)比查看，并且能夠預(yù)測(cè)產(chǎn)品的價(jià)格趨勢(shì)，幫助用戶確定商品的最好購買時(shí)機(jī)。已經(jīng)于2013年被 eBay收購。政治：奧巴馬在總統(tǒng)競(jìng)選中使用大數(shù)據(jù)分析來收集選民的數(shù)據(jù)，讓他可以專注于對(duì)他最感興趣的選民，谷歌執(zhí)行董事長(zhǎng)Eric Schmidt當(dāng)時(shí)向奧巴馬的大數(shù)據(jù)分析團(tuán)隊(duì)投資數(shù)百萬美元并聚攏核心成員成立了Civis Analytics咨詢公司，該公司將會(huì)將在奧巴馬連任競(jìng)選中所獲得的經(jīng)驗(yàn)應(yīng)用到商業(yè)和非營(yíng)利行業(yè)中。（了解更多可以看看MIT technology的文章The Definitive Story of How President Obama Mined Voter Data to Win A Second Term）金融：ZestFinance | Big Data Underwriting是由是Google的前任 CIO，Douglas Merrill創(chuàng)立金融數(shù)據(jù)分析服務(wù)提供商，使用機(jī)器學(xué)習(xí)算法和大數(shù)據(jù)為放款者提供承保模式，旨在為那些個(gè)人信用不良或者不滿足傳統(tǒng)銀行貸款資格的個(gè)人提供服務(wù)。公司使用分析模型對(duì)每位信貸申請(qǐng)人的上萬條原始信息數(shù)據(jù)進(jìn)行分析，只需幾秒時(shí)間便可以得出超過十萬個(gè)行為指標(biāo)。目前違約率比行業(yè)平均水平低 60%左右。另外一個(gè)不得不提到的是風(fēng)險(xiǎn)管理先驅(qū)者FICO | Predictive Analytics, Big Data Analytics and FICO Credit Scores，通過大數(shù)據(jù)分析為銀行和信用卡發(fā)卡機(jī)構(gòu)、保險(xiǎn)、醫(yī)療保健、政府和零售行業(yè)提供服務(wù)。FICO 信用分計(jì)算的基本思想是：把借款人過去的信用歷史資料與數(shù)據(jù)庫中的全體借款人的信用習(xí)慣相比較，檢查借款人的發(fā)展趨勢(shì)跟經(jīng)常違約、隨意透支、甚至申請(qǐng)破產(chǎn)等各種陷入財(cái)務(wù)困境的借款人的發(fā)展趨勢(shì)是否相似。FICO 已經(jīng)為三分之二的世界 100 強(qiáng)銀行提供服務(wù)，提高了客戶忠誠度和盈利率、減少欺詐損失、管理信貸風(fēng)險(xiǎn)、滿足監(jiān)管與競(jìng)爭(zhēng)要求并快速獲取市場(chǎng)份額。想了解更多的企業(yè)可以看看附錄中經(jīng)濟(jì)學(xué)人的文章Big data: Crunching the numbers。電信：美國(guó)T-mobiles采用Informatica - The Data Integration Company平臺(tái)開展大數(shù)據(jù)工作，通過集成數(shù)據(jù)綜合分析客戶流失的原因，根據(jù)分析結(jié)果優(yōu)化網(wǎng)絡(luò)布局為客戶提供了更好的體驗(yàn)，在一個(gè)季度內(nèi)將流失率減半；韓國(guó)SK telecom新成立一家公司SK Planet，通過大數(shù)據(jù)分析用戶的使用行為，在用戶做出決定之前推出符合用戶興趣的業(yè)務(wù)防止用戶流失。美國(guó)AT&T公司將記錄用戶在Wifi網(wǎng)絡(luò)中的地理位置、網(wǎng)絡(luò)瀏覽歷史記錄以及使用的應(yīng)用等數(shù)據(jù)銷售給廣告客戶。比如當(dāng)用戶距離商家很近時(shí)，就有可能收到該商家提供的折扣很大的電子優(yōu)惠券。英國(guó)BT - Broadband公司發(fā)布了新的安全數(shù)據(jù)分析服務(wù)Assure AnalyticsBT news releases，幫助企業(yè)收集、管理和評(píng)估大數(shù)據(jù)集，將這些數(shù)據(jù)通過可視化的方式呈現(xiàn)給企業(yè)，幫助企業(yè)改進(jìn)決策。一般來說盈利性質(zhì)的商業(yè)公司和企業(yè)都不會(huì)輕易泄露自己的數(shù)據(jù)、建模方法和分析過程，所以還有很多大家不知道的神秘應(yīng)用潛伏在黑暗里，如同三體中的”黑暗森林法則“。宇宙就是一座黑暗森林，每個(gè)文明都是帶槍的獵人，像幽靈般潛行于林間，輕輕撥開擋路的樹枝，竭力不讓腳步發(fā)出一點(diǎn)兒聲音，連呼吸都必須小心翼翼：他必須小心，因?yàn)榱种械教幎加信c他一樣潛行的獵人，如果他發(fā)現(xiàn)了別的生命，能做的只有一件事：開槍消滅之。在這片森林中，他人就是地獄，就是永恒的威脅，任何暴露自己存在的生命都將很快被消滅，這就是宇宙文明的圖景，這就是對(duì)費(fèi)米悖論的解釋。理解了大數(shù)據(jù)的定義，了解了大數(shù)據(jù)的典型應(yīng)用。這時(shí)相信在每個(gè)人的心中，關(guān)于大數(shù)據(jù)的價(jià)值都有了自己的答案。隨著計(jì)算機(jī)的處理能力的日益強(qiáng)大，你能獲得的數(shù)據(jù)量越大，你能挖掘到的價(jià)值就越多。實(shí)驗(yàn)的不斷反復(fù)、大數(shù)據(jù)的日漸積累讓人類發(fā)現(xiàn)規(guī)律，預(yù)測(cè)未來不再是科幻電影里的讀心術(shù)。 如果銀行能及時(shí)地了解風(fēng)險(xiǎn)，我