大數(shù)據(jù)和大分析—EMCHadoop解決方案蘊(yùn)含巨大商機(jī)20120430

1、1 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。大數(shù)據(jù)與大分析：EMC Hadoop 解決方案蘊(yùn)含巨大商機(jī)充分發(fā)掘大數(shù)據(jù)的價(jià)值2 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。今天的議程 簡(jiǎn)介 大數(shù)據(jù)商機(jī) Hadoop 大數(shù)據(jù)分析 Hadoop 的技術(shù)難題 面向企業(yè)的 EMC Hadoop 解決方案 Q+A 3 版權(quán)所有 2012 EMC Corporation。保留所有權(quán)利。EMC Isilon 概述橫向擴(kuò)展 NAS 存儲(chǔ)解決方案領(lǐng)域經(jīng)驗(yàn)證的全球領(lǐng)導(dǎo)者經(jīng)驗(yàn)證的全球領(lǐng)導(dǎo)者無(wú)可匹敵的產(chǎn)品創(chuàng)新創(chuàng)新 第六代超過(guò) 2,000 個(gè)全球客戶個(gè)全球客戶，并且客戶數(shù)量

2、仍在持續(xù)攀升世界一流的產(chǎn)品產(chǎn)品和全球服務(wù)服務(wù)強(qiáng)大的技術(shù)合作伙伴技術(shù)合作伙伴體系于 2010 年 12 月 21 日被被 EMC 收購(gòu)收購(gòu)4 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。大數(shù)據(jù)商機(jī)5 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。!“大數(shù)據(jù)無(wú)關(guān)乎大小，而關(guān)乎自由度” Techcrunch !“發(fā)現(xiàn)：大數(shù)據(jù)比卷更卓絕” Gartner “大數(shù)據(jù)！ 它真實(shí)存在，實(shí)時(shí)提供，并且正在改變您的世界”IDC “總數(shù)據(jù)：比大數(shù)據(jù)更大” 451 Group6 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。!“大數(shù)據(jù)無(wú)關(guān)乎大小，而關(guān)乎自

3、由度” Techcrunch !“發(fā)現(xiàn)：大數(shù)據(jù)比卷更卓絕” Gartner “大數(shù)據(jù)！ 它真實(shí)存在，實(shí)時(shí)提供，并且正在改變您的世界”IDC “總數(shù)據(jù)：比大數(shù)據(jù)更大” 451 Group大數(shù)據(jù)時(shí)代已經(jīng)到來(lái)7 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。大數(shù)據(jù)在活動(dòng) 醫(yī)療保健 利用歷史數(shù)據(jù)發(fā)現(xiàn)更好的治療方式 金融服務(wù) 數(shù)據(jù)驅(qū)動(dòng)型銀行壓力測(cè)試和風(fēng)險(xiǎn)分析 公用事業(yè) 機(jī)器學(xué)習(xí)以預(yù)測(cè)服務(wù)中斷和防止能源盜竊8 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。Hadoop 與大數(shù)據(jù)9 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。大數(shù)據(jù)分析的遠(yuǎn)大前程

4、 利用數(shù)據(jù)資產(chǎn)確定主要趨勢(shì)和新商機(jī) 分析新信息來(lái)源以獲得競(jìng)爭(zhēng)優(yōu)勢(shì) 采用靈活的分析方法，適應(yīng)業(yè)務(wù)的發(fā)展速度 擴(kuò)展您的存儲(chǔ)和分析平臺(tái)，應(yīng)對(duì)大數(shù)據(jù)的龐大數(shù)量、快速變化和繁雜種類10 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。 創(chuàng)建于 5-6 年前 旨在分析海量非結(jié)構(gòu)化數(shù)據(jù)的軟件平臺(tái) 兩個(gè)核心組件： Hadoop 分布式文件系統(tǒng) (HDFS)（存儲(chǔ)） MapReduce（計(jì)算） 目前是大型開放源代碼開發(fā)社區(qū)支持的首要 Apache 項(xiàng)目Hadoop 初展鋒芒11 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。為什么 Hadoop 很重要 面向超大規(guī)模的實(shí)用分

5、析方法 開創(chuàng)獲得洞察見解和發(fā)現(xiàn)商機(jī)的新方法 旨在應(yīng)對(duì)非結(jié)構(gòu)化數(shù)據(jù)的增長(zhǎng) 在未來(lái) 5 年內(nèi)，企業(yè)數(shù)據(jù)將增長(zhǎng)到現(xiàn)在的 650% 此增長(zhǎng)中超過(guò) 80% 將是非結(jié)構(gòu)化數(shù)據(jù)12 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。Hadoop 早期主流客戶早期主流客戶Hadoop 早期采用者早期采用者Hadoop 市場(chǎng)演變先行者和學(xué)術(shù)機(jī)構(gòu)應(yīng)用程序架構(gòu)師有遠(yuǎn)見卓識(shí)開放源代碼/社區(qū)驅(qū)動(dòng)構(gòu)建您自己的服務(wù)器、應(yīng)用程序和存儲(chǔ)基礎(chǔ)架構(gòu)商用組件Web 2.0大學(xué)生命科學(xué)13 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。Hadoop 早期主流客戶早期主流客戶Hadoop 早期采用者早

6、期采用者Hadoop 市場(chǎng)演變先行者和學(xué)術(shù)機(jī)構(gòu)應(yīng)用程序架構(gòu)師有遠(yuǎn)見卓識(shí)開放源代碼/社區(qū)驅(qū)動(dòng)構(gòu)建您自己的服務(wù)器、應(yīng)用程序和存儲(chǔ)基礎(chǔ)架構(gòu)商用組件IT 經(jīng)理和 CIO數(shù)據(jù)科學(xué)家業(yè)務(wù)線商業(yè)發(fā)布全包式解決方案端到端數(shù)據(jù)保護(hù)財(cái)富 1000 強(qiáng)金融服務(wù)零售業(yè)Web 2.0大學(xué)生命科學(xué)14 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。Hadoop 的技術(shù)難題15 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。Hadoop 的技術(shù)難題Hadoop DAS 環(huán)境1專用存儲(chǔ)基礎(chǔ)架構(gòu)僅用于 Hadoop 的一次性架構(gòu)2單點(diǎn)故障NameNode3缺乏企業(yè)數(shù)據(jù)保護(hù)無(wú)快照、復(fù)制、備

7、份4存儲(chǔ)效率低3 倍鏡像5固定可擴(kuò)展性固定的計(jì)算/存儲(chǔ)比率6手動(dòng)導(dǎo)入/導(dǎo)出無(wú)協(xié)議支持NameNode16 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。Hadoop 的技術(shù)難題Hadoop DAS 環(huán)境1專用存儲(chǔ)基礎(chǔ)架構(gòu)僅用于 Hadoop 的一次性架構(gòu)2單點(diǎn)故障NameNode3缺乏企業(yè)數(shù)據(jù)保護(hù)無(wú)快照、復(fù)制、備份4存儲(chǔ)效率低3 倍鏡像5固定可擴(kuò)展性固定的計(jì)算/存儲(chǔ)比率6手動(dòng)導(dǎo)入/導(dǎo)出無(wú)協(xié)議支持NameNode17 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。Hadoop 的技術(shù)難題Hadoop DAS 環(huán)境1專用存儲(chǔ)基礎(chǔ)架構(gòu)僅用于 Hadoop 的一

8、次性架構(gòu)2單點(diǎn)故障NameNode3缺乏企業(yè)數(shù)據(jù)保護(hù)無(wú)快照、復(fù)制、備份4存儲(chǔ)效率低3 倍鏡像5固定可擴(kuò)展性固定的計(jì)算/存儲(chǔ)比率6手動(dòng)導(dǎo)入/導(dǎo)出無(wú)協(xié)議支持1 倍1 倍2 倍2 倍3 倍2 倍3 倍3 倍1 倍NameNode18 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。Hadoop 的技術(shù)難題Hadoop DAS 環(huán)境1專用存儲(chǔ)基礎(chǔ)架構(gòu)僅用于 Hadoop 的一次性架構(gòu)2單點(diǎn)故障NameNode3缺乏企業(yè)數(shù)據(jù)保護(hù)無(wú)快照、復(fù)制、備份4存儲(chǔ)效率低3 倍鏡像5固定可擴(kuò)展性固定的計(jì)算/存儲(chǔ)比率6手動(dòng)導(dǎo)入/導(dǎo)出無(wú)協(xié)議支持NameNode19 版權(quán)所有 2011 EMC Corpo

9、ration。保留所有權(quán)利。1橫向擴(kuò)展存儲(chǔ)平臺(tái)多個(gè)應(yīng)用程序和工作流2無(wú)單點(diǎn)故障分布式 NameNode3端到端數(shù)據(jù)保護(hù)SnapshotIQ、SyncIQ、NDMP 備份4行業(yè)領(lǐng)先的存儲(chǔ)效率80% 以上的存儲(chǔ)利用率5獨(dú)立可擴(kuò)展性單獨(dú)添加計(jì)算和存儲(chǔ)6多協(xié)議行業(yè)標(biāo)準(zhǔn)協(xié)議NFS、CIFS、FTP、HTTP、HDFS適用于 Hadoop 的 EMC Isilon 優(yōu)勢(shì)20 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。EMC 可應(yīng)對(duì) Hadoop 難題1專用存儲(chǔ)基礎(chǔ)架構(gòu)僅用于 Hadoop 的一次性架構(gòu)2單點(diǎn)故障NameNode3缺乏企業(yè)數(shù)據(jù)保護(hù)無(wú)快照、復(fù)制、備份4存儲(chǔ)效率低3 倍鏡

10、像5固定可擴(kuò)展性固定的計(jì)算/存儲(chǔ)比率6手動(dòng)導(dǎo)入/導(dǎo)出無(wú)協(xié)議支持1橫向擴(kuò)展存儲(chǔ)平臺(tái)多個(gè)應(yīng)用程序和工作流2無(wú)單點(diǎn)故障分布式 NameNode3端到端數(shù)據(jù)保護(hù)SnapshotIQ、SyncIQ、NDMP 備份4行業(yè)領(lǐng)先的存儲(chǔ)效率80% 以上的存儲(chǔ)利用率5獨(dú)立可擴(kuò)展性單獨(dú)添加計(jì)算和存儲(chǔ)6多協(xié)議行業(yè)標(biāo)準(zhǔn)協(xié)議NFS、CIFS、FTP、HTTP、HDFS增強(qiáng) Hadoop 給企業(yè)帶來(lái)的好處降低風(fēng)險(xiǎn)端到端數(shù)據(jù)保護(hù)組織知識(shí)/經(jīng)驗(yàn)業(yè)界首款也是唯一一款具有本機(jī) Hadoop 集成的橫向擴(kuò)展存儲(chǔ)解決方案22 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。存儲(chǔ)計(jì)算EMC 的企業(yè) Hadoop 解決方

11、案 Apache Hadoop 經(jīng) Greenplum 認(rèn)證 簡(jiǎn)單的平臺(tái)管理和控制 使用 Greenplum Database 的并行分析訪問(wèn)EMC Greenplum HD 和 EMC Isilon 橫向擴(kuò)展存儲(chǔ)23 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。靈活的打包選項(xiàng) Hadoop 軟件 + 存儲(chǔ) 在商用 x86 硬件上打包 Greenplum HD 軟件 Isilon 橫向擴(kuò)展 NASHadoop 應(yīng)用裝置 + 存儲(chǔ) Greenplum HD Data Computing Appliance Isilon 橫向擴(kuò)展 NAS24 版權(quán)所有 2011 EMC Corporation。保留所有權(quán)利。 EMC Greenplum 統(tǒng)一分析平臺(tái)： Greenplum HD 用于非結(jié)構(gòu)化數(shù)據(jù)分析的企業(yè) Hadoop Greenplum Database 結(jié)構(gòu)化數(shù)據(jù)分析 Greenplum Chorus 面向數(shù)據(jù)科學(xué)家的生產(chǎn)效率工具 數(shù)據(jù)科學(xué)和咨詢服務(wù) 注重?cái)?shù)據(jù)科學(xué)實(shí)踐 具有廣泛分析專業(yè)知識(shí)的行業(yè)特定 PhD Greenplum Analytics Lab 協(xié)定將 Hadoop 提升到新的水平：來(lái)自 EMC 的業(yè)務(wù)分析25