大數(shù)據(jù)時代所面臨的發(fā)展與挑戰(zhàn)

1、大數(shù)據(jù)時代所面臨的發(fā)展與挑戰(zhàn) 來源：金窩窩大數(shù)據(jù)是信息通信技術(shù)發(fā)展積累至今，按照自身技術(shù)發(fā)展邏輯，從提高生產(chǎn)效率向更高級智能階段的自然生長。無處不在的信息感知和采集終端為我們采集了海量的數(shù)據(jù)，而以云計算為代表的計算技術(shù)的不斷進步，為我們提供了強大的計算能力，這就圍繞個人以及組織的行為構(gòu)建起了一個與物質(zhì)世界相平行的數(shù)字世界。關(guān)鍵詞：大數(shù)據(jù)，互聯(lián)網(wǎng)，策略大數(shù)據(jù)的挖掘大數(shù)據(jù)分析的理論核心就是數(shù)據(jù)挖掘算法，各種數(shù)據(jù)挖掘的算法基于不同的數(shù)據(jù)類型和格式才能更加科學(xué)的呈現(xiàn)出數(shù)據(jù)本身具備的特點，也正是因為這些被全世界統(tǒng)計學(xué)家所公認的各種統(tǒng)計方法(可以稱之為真理)才能深入數(shù)據(jù)內(nèi)部，挖掘出公認的價值。另外一個方面

2、也是因為有這些數(shù)據(jù)挖掘的算法才能更快速的處理大數(shù)據(jù)，如果一個算法得花上好幾年才能得出結(jié)論，那大數(shù)據(jù)的價值也就無從說起了。大數(shù)據(jù)時代下的信息技術(shù)日漸成熟，但是在高科技發(fā)展的今天，也存在著諸多不足，綜合各方面信息，技術(shù)上和非技術(shù)上大數(shù)據(jù)時代面臨的挑戰(zhàn)：運營商帶寬能力與對數(shù)據(jù)洪流的適應(yīng)能力面臨前所未有的挑戰(zhàn)大數(shù)據(jù)處理和分析的能力遠遠不及理想中水平，數(shù)據(jù)量的快速增長，對存儲技術(shù)提出了挑戰(zhàn);同時，需要高速信息傳輸能力支持，與低密度有價值數(shù)據(jù)的快速分析、處理能力。大數(shù)據(jù)環(huán)境下通過對用戶數(shù)據(jù)的深度分析，很容易了解用戶行為和喜好，乃至企業(yè)用戶的商業(yè)機密，對個人隱私問題必須引起充分重視;大數(shù)據(jù)時代的基本特征，決

3、定其在技術(shù)與商業(yè)模式上有巨大的創(chuàng)新空間，如何創(chuàng)新已成為大數(shù)據(jù)時代的一個首要問題;大數(shù)據(jù)時代對政府制訂規(guī)則與監(jiān)管部門發(fā)揮作用提出了新的挑戰(zhàn); 大數(shù)據(jù)的可視化還沒有達到人們的需求;海量數(shù)據(jù)洪流中，在線對話與在線交易活動日益增加，其安全威脅更為嚴峻;而且現(xiàn)今黑客的組織能力、作案工具、作案手法及隱蔽程度更上一層樓; l大數(shù)據(jù)人才的缺乏，大數(shù)據(jù)時代對數(shù)據(jù)分析師的要求極高，只有大數(shù)據(jù)專業(yè)化的人才，才具備開發(fā)預(yù)言分析應(yīng)用程序模型的技能。大數(shù)據(jù)時代面臨挑戰(zhàn)的應(yīng)對策略大數(shù)據(jù)時代的浪潮已經(jīng)襲來，這對于我們每一個人來說，既是大數(shù)據(jù)的締造者，因為我們的認知和行為方式都在源源不斷地產(chǎn)生各種各樣的數(shù)據(jù);又是大數(shù)據(jù)的使用者

4、，因為人的大腦幾乎每時每刻都在對所觀察到和所搜集到的各種數(shù)據(jù)進行分析，以期得出結(jié)論;更是大數(shù)據(jù)的直接受益者，因為通過對數(shù)據(jù)的分析和挖掘，大數(shù)據(jù)的大價值最終體現(xiàn)在指導(dǎo)人的行動并由此推動社會的不斷進步。1、合理獲取數(shù)據(jù)在大數(shù)據(jù)時代，數(shù)據(jù)的產(chǎn)生速度飛快而且體量龐大。各種機構(gòu)、個人都在不斷地向外產(chǎn)生和發(fā)布結(jié)構(gòu)化與非結(jié)構(gòu)化的復(fù)雜數(shù)據(jù)，并進行數(shù)據(jù)交換，如人們當(dāng)前最常用的數(shù)據(jù)來源渠道互聯(lián)網(wǎng)，每天的數(shù)據(jù)交換量已極為驚人。在這種情況下，由于數(shù)據(jù)傳播的速度極快，且在傳播過程中本身已有可能通過交換發(fā)生多次變換而生成了更多的復(fù)雜數(shù)據(jù)，那么，對我們普通人來說，當(dāng)數(shù)據(jù)充分融合在一起的時候就很難分辨其真正的來源。即使能夠弄

5、清楚數(shù)據(jù)的真正來源，你又將面臨那些復(fù)雜的非結(jié)構(gòu)化數(shù)據(jù)的考驗。大數(shù)據(jù)時代應(yīng)以智慧創(chuàng)新理念融合大數(shù)據(jù)與云計算，在大數(shù)據(jù)洪流中提升知識價值洞察力，實施高效實時個性化運作，建立有效增值的商業(yè)模式。針對大數(shù)據(jù)時代的基本特征，加強全方位創(chuàng)新。很多的IT巨頭，紛紛加速收購相關(guān)大數(shù)據(jù)公司進行技術(shù)整合，尋找數(shù)據(jù)洪流大潮中新的立足點。而涉及人工智能、機器學(xué)習(xí)等新技術(shù)的創(chuàng)新應(yīng)用，已初顯效益。將大數(shù)據(jù)時代全方位創(chuàng)新工作和智慧城市發(fā)展緊密結(jié)合。借助移動互聯(lián)網(wǎng)、大數(shù)據(jù)與云計算的融合、智能運營管道等，建立智能平臺，優(yōu)化配置城市資源，向真正的智慧城市邁進。2、存儲隨需而變美國一家知名的 DVD 租賃企業(yè)每年都會邀請一些協(xié)同處

6、理算法的專家對其用戶數(shù)據(jù)進行分析，從而了解租賃客戶的需求。一些美國金融企業(yè)甚至提出了分析即服務(wù)的理念。金融、電信、互聯(lián)網(wǎng)等企業(yè)對大數(shù)據(jù)的處理和分析有迫切的需求。與傳統(tǒng)的商務(wù)智能應(yīng)用相比，大數(shù)據(jù)對企業(yè)數(shù)據(jù)的處理能力和商務(wù)智能軟件提出了更高要求：首先，企業(yè)必須具備處理大量數(shù)據(jù)的能力，因為有的企業(yè)可能一天之內(nèi)就要多次處理 PB 級的數(shù)據(jù)，這是一些傳統(tǒng)的存儲設(shè)備所不能勝任的;其次，傳統(tǒng)的數(shù)據(jù)倉庫軟件是針對結(jié)構(gòu)化數(shù)據(jù)設(shè)計的，而大數(shù)據(jù)包含的主要是非結(jié)構(gòu)化的數(shù)據(jù)，因此傳統(tǒng)的數(shù)據(jù)倉庫軟件必須改變。3、篩選與分析大數(shù)據(jù)充分利用數(shù)據(jù)“洞察”自己身邊的人或物，在諸多供給方當(dāng)中精準地匹配自身需求，從而最大限度地滿足自

7、身吁求也是大數(shù)據(jù)價值的應(yīng)有之義。為此，即使是普通人也應(yīng)具備一定的數(shù)據(jù)篩選和識別能力。這些數(shù)據(jù)傳播渠道所發(fā)布的數(shù)據(jù)往往有其針對性和傾向性，甚至帶有誤導(dǎo)性，這時就需要數(shù)據(jù)使用者具備一定的甄別能力，才能真正充分利用大數(shù)據(jù)實現(xiàn)自身價值的最大化。大數(shù)據(jù)能夠為我所用而產(chǎn)生價值，離不開使用者具備一定的數(shù)據(jù)分析技能。當(dāng)然，普通人未必要掌握數(shù)理分析、數(shù)據(jù)挖掘等專業(yè)統(tǒng)計技能，但有必要學(xué)會對一些常用的指標(biāo)數(shù)據(jù)結(jié)合其應(yīng)用背景進行簡單分析。比如，大家熟悉的CPI、天氣指數(shù)、幸福指數(shù)等統(tǒng)計指標(biāo)，信用卡消費賬單等個人信息等，其實這些都是大數(shù)據(jù)價值的體現(xiàn)形式，要想讀懂這些數(shù)據(jù)信息并了解數(shù)字背后所反映的經(jīng)濟運行機理或個人消費行

8、為模式，就需要對其進行一定的分析。大數(shù)據(jù)時代對數(shù)據(jù)分析要求很高，所以培養(yǎng)大數(shù)據(jù)時代分析的人才必不可少，只有具備大數(shù)據(jù)專業(yè)方面的知識，才能更好地去研究大數(shù)據(jù)蘊含的特殊技能。4、理性面對大數(shù)據(jù)的價值誘惑毫無疑問，大數(shù)據(jù)時代將是商業(yè)智能“大顯身手”的時代。企業(yè)利用發(fā)達的數(shù)據(jù)挖掘技術(shù)正日益精準地揣摩著消費者心態(tài)，并運用各種手段對其“循循善誘” 。如今，當(dāng)人們上網(wǎng)購物時，只要輸入想要購買的物品，大部分商家都會依據(jù)所輸入的信息彈出相關(guān)的推薦產(chǎn)品，更有甚者還能夠利用人們的搜索記錄和地理位置信息在其瀏覽網(wǎng)頁的過程中植入符合人們需求的精準廣告。5.社交網(wǎng)絡(luò)的大數(shù)據(jù)分析互聯(lián)網(wǎng)社交網(wǎng)絡(luò)信息處理構(gòu)成了一個典型的大數(shù)據(jù)

9、系統(tǒng)，面向社交網(wǎng)絡(luò)的大數(shù)據(jù)管理分析與服務(wù)綜合運用搜索引擎技術(shù)、文本處理技術(shù)、自然語言處理和智能分析等技術(shù)，對互聯(lián)網(wǎng)海量社交網(wǎng)絡(luò)信息自動獲取和分析，提供面向互聯(lián)網(wǎng)的熱點話題監(jiān)測、分析、挖掘、溯源以及報表展示等功能，滿足社交網(wǎng)絡(luò)數(shù)據(jù)監(jiān)控和熱點事件追蹤工作中各個環(huán)節(jié)的用戶需求。面向社交網(wǎng)絡(luò)的大數(shù)據(jù)管理分析與服務(wù)適用于宣傳、公安、安全等部門進行輿論監(jiān)測、引導(dǎo)和管理，也適用于企業(yè)進行產(chǎn)品口碑跟蹤、技術(shù)情報收集和精準營銷。社交網(wǎng)絡(luò)大數(shù)據(jù)分析需要有大數(shù)據(jù)的技術(shù)與產(chǎn)品支持，發(fā)達國家一些信息技術(shù)企業(yè)已提前發(fā)力，通過加大開發(fā)力度和兼并等多種手段，成為大數(shù)據(jù)解決方案提供商。但過分依賴國外的大數(shù)據(jù)分析與技術(shù)平臺，難以

10、回避信息泄密風(fēng)險。因此，在社交網(wǎng)絡(luò)大數(shù)據(jù)分析領(lǐng)域，我們需要有自主可控的大數(shù)據(jù)技術(shù)與產(chǎn)品。社交網(wǎng)絡(luò)大數(shù)據(jù)成為了當(dāng)前的應(yīng)用熱點，在大數(shù)據(jù)應(yīng)用和落地方面具備先天的優(yōu)勢和基礎(chǔ)。社交網(wǎng)絡(luò)大數(shù)據(jù)的處理能力直接關(guān)系到國家的信息安全和社會穩(wěn)定，建立安全和諧的網(wǎng)絡(luò)環(huán)境是國家的重大戰(zhàn)略需求，是促使長治久安的大事。而從產(chǎn)業(yè)發(fā)展的角度來看，建立面向社交網(wǎng)絡(luò)的大數(shù)據(jù)管理分析與服務(wù)平臺并實現(xiàn)產(chǎn)業(yè)化推廣，對于支撐產(chǎn)業(yè)鏈的良性發(fā)展具有積極意義。我國擁有世界上最多的網(wǎng)民和最大的網(wǎng)絡(luò)訪問量，在社交網(wǎng)絡(luò)大數(shù)據(jù)分析方面已經(jīng)具有良好的基礎(chǔ)，有望做出世界領(lǐng)先的原始創(chuàng)新成果，應(yīng)該加大社交網(wǎng)絡(luò)大數(shù)據(jù)分析方面的研究力度，培育一批從事社交網(wǎng)絡(luò)大數(shù)據(jù)管理分析與服務(wù)的