鉆完井大數(shù)據(jù)與人工智能-3-大數(shù)據(jù)介紹

大數(shù)據(jù)介紹2課程導(dǎo)學(xué)大數(shù)據(jù)時代大數(shù)據(jù)的特征大數(shù)據(jù)的應(yīng)用場景大數(shù)據(jù)與機(jī)器學(xué)習(xí)1.大數(shù)據(jù)時代大數(shù)據(jù)介紹1.大數(shù)據(jù)時代大數(shù)據(jù)介紹

2010年前后，以云計算、大數(shù)據(jù)、物聯(lián)網(wǎng)的普及為標(biāo)志迎來第三次信息化浪潮1.大數(shù)據(jù)時代大數(shù)據(jù)介紹第一次信息化浪潮：1980年，個人計算機(jī)的成熟。IBM-PC，1981AppleLisa，19831.大數(shù)據(jù)時代大數(shù)據(jù)介紹1.大數(shù)據(jù)時代大數(shù)據(jù)介紹

路易斯·郭士納：“IT領(lǐng)域基本每隔15年都會迎來一次重大的技術(shù)變革”。1.大數(shù)據(jù)時代大數(shù)據(jù)介紹第二次信息化浪潮：1995年，互聯(lián)網(wǎng)的成熟。

1995，中國互聯(lián)網(wǎng)的開元之年1.大數(shù)據(jù)時代大數(shù)據(jù)介紹第三次信息化浪潮：2010年，大數(shù)據(jù)、云計算和物聯(lián)網(wǎng)。大數(shù)據(jù)云計算物聯(lián)網(wǎng)1.大數(shù)據(jù)時代大數(shù)據(jù)介紹技術(shù)支撐：存儲、計算、網(wǎng)絡(luò)硬盤CPU寬帶1.大數(shù)據(jù)時代大數(shù)據(jù)介紹存儲：存儲設(shè)備的性價比在不斷提升。

每年下降比例在15-20%左右1.大數(shù)據(jù)時代大數(shù)據(jù)介紹DNA存儲技術(shù)：利用DNA的分子結(jié)構(gòu)來進(jìn)行數(shù)據(jù)存儲。

DNA存儲了恐龍的生物信息，科技讓它重新表達(dá)1.大數(shù)據(jù)時代大數(shù)據(jù)介紹DNA存儲技術(shù)：一條和人手差不多長的DNA鏈，就可以存儲10.74億G數(shù)據(jù)。1.大數(shù)據(jù)時代大數(shù)據(jù)介紹CPU：性能不斷提升，數(shù)據(jù)處理能力不斷提升。1.大數(shù)據(jù)時代大數(shù)據(jù)介紹網(wǎng)絡(luò)：網(wǎng)絡(luò)帶寬也在不斷提升。1.大數(shù)據(jù)時代大數(shù)據(jù)介紹用戶原創(chuàng)內(nèi)容階段運營式系統(tǒng)階段感知式系統(tǒng)階段第一階段第二階段第三階段1.大數(shù)據(jù)時代大數(shù)據(jù)介紹運營式系統(tǒng)階段1.大數(shù)據(jù)時代大數(shù)據(jù)介紹用戶原創(chuàng)內(nèi)容階段1.大數(shù)據(jù)時代大數(shù)據(jù)介紹感知式系統(tǒng)階段

物聯(lián)網(wǎng)實現(xiàn)萬物互聯(lián)1.大數(shù)據(jù)時代大數(shù)據(jù)介紹物聯(lián)網(wǎng)的底層是感知層：RFID、攝像頭、傳感器2.大數(shù)據(jù)的特點大數(shù)據(jù)介紹VARIETY4V快速化VOLUME大量化VALUEVELOCITY多樣化價值密度低2.大數(shù)據(jù)的特點大數(shù)據(jù)介紹大量化：需要采集、處理、傳輸?shù)臄?shù)據(jù)量大。

1ZB=10^12GB2.大數(shù)據(jù)的特點大數(shù)據(jù)介紹多樣化：來源多、格式多。

結(jié)構(gòu)化數(shù)據(jù)多樣化（Variety）來源多搜索引擎社交網(wǎng)絡(luò)通話記錄傳感器......格式多結(jié)構(gòu)化的數(shù)據(jù)非結(jié)構(gòu)化的數(shù)據(jù)idnamegenderphoneaddress1張一female1233四川省成都市2王二male2344廣東省深圳市3李三female1334湖北省武漢市2.大數(shù)據(jù)的特點大數(shù)據(jù)介紹多樣化：來源多、格式多。

結(jié)構(gòu)化數(shù)據(jù)僅占到全部數(shù)據(jù)量的20%2.大數(shù)據(jù)的特點大數(shù)據(jù)介紹處理速度快：需要秒級決策。

從數(shù)據(jù)的生成到消耗，時間窗口小，可用于決策的時間少2.大數(shù)據(jù)的特點大數(shù)據(jù)介紹價值密度低3.大數(shù)據(jù)的應(yīng)用場景大數(shù)據(jù)介紹4.大數(shù)據(jù)與機(jī)器學(xué)習(xí)大數(shù)據(jù)介紹大數(shù)據(jù)的積累為機(jī)器學(xué)習(xí)發(fā)展提供燃料：爆炸性增長的數(shù)據(jù)推動著大數(shù)據(jù)技術(shù)