分會(huì)場四大數(shù)據(jù)與洞察創(chuàng)新趨勢3mc cloudant user day

1

Cloudant讓您的大數(shù)據(jù)在云中動(dòng)起來

——面向互聯(lián)網(wǎng)、移動(dòng)和物聯(lián)網(wǎng)應(yīng)用的Cloudant數(shù)據(jù)層Cloudant概述NoSQL數(shù)據(jù)庫：

分布式，JSON，數(shù)據(jù)庫即服務(wù)（DBaaS）適合高速互聯(lián)網(wǎng)、移動(dòng)和IOT類應(yīng)用簡單和明確定義的HTTPRESTfulAPI，適用于各種開發(fā)語言完全集成的各種數(shù)據(jù)服務(wù)：高級(jí)索引全文搜索及索引地理空間數(shù)據(jù)及索引復(fù)制和同步數(shù)據(jù)備份3Cloudant著力于并發(fā)性持久性可用性移動(dòng)性4開源的DNA

Graphite&Riemann監(jiān)視Chef配置管理rsyslog聯(lián)合日志記錄CollectD持續(xù)集成CouchDBJSON存儲(chǔ)、API、復(fù)制Dynamo集群、擴(kuò)展、容錯(cuò)Lucene文本索引和搜索Haproxy地理負(fù)載均衡GeoJSON地理空間索引及查詢Jenkins持續(xù)集成結(jié)合了最好的操作系統(tǒng)技術(shù)和思想，為大型移動(dòng)和物聯(lián)網(wǎng)應(yīng)用提供可擴(kuò)展性、靈活性最高且永遠(yuǎn)在線的數(shù)據(jù)庫即服務(wù)IaaSPaaS云生態(tài)環(huán)境6Cloudant——提供全面管理的DBaaS最好的NoSQL數(shù)據(jù)庫和集群技術(shù)由大數(shù)據(jù)開發(fā)運(yùn)營專家24x7x365管理在全球幾十個(gè)數(shù)據(jù)中心內(nèi)開展數(shù)據(jù)業(yè)務(wù)7IaaS提供者：SoftLayer,Rackspace,Amazon,Azure7CloudantLocalCloudantNoSQLDBaaS的本地安裝版本集成了CloudantDBaaS的所有功能和優(yōu)勢包括文本搜索,CloudantQuery,地理空間支持,管理工作臺(tái)增加了運(yùn)營管理工具，為易于管理而建，由CloudantDBaaS經(jīng)驗(yàn)積累而成用于擴(kuò)展，監(jiān)控，安全管理，變更管理的工具核心技術(shù)經(jīng)6年來大型系統(tǒng)（

比如Samsung,Microsoft,Fidelity）實(shí)際驗(yàn)證靈活的部署選項(xiàng)本地安裝在數(shù)據(jù)中心或者其他云提供商支持Debian、RedHat，本地盤存儲(chǔ)，最小配置三個(gè)數(shù)據(jù)庫節(jié)點(diǎn)8Cloudant部署選項(xiàng)CloudantManaged保障性能的公共云DBaaSCloudantLocal位于客戶數(shù)據(jù)中心，受隱私保護(hù)CloudantDedicatedCloudantMulti-tenant由Cloudant托管和管理由Cloudant托管和管理應(yīng)用CloudantDevOps

工具，客戶運(yùn)營和管理24x7高級(jí)支持社區(qū)支持24x7高級(jí)支持用于生產(chǎn)、部署和開發(fā)用于開發(fā)和原型設(shè)計(jì)用于生產(chǎn)、部署和開發(fā)每月，按節(jié)點(diǎn)付費(fèi)每月，按使用量計(jì)費(fèi)永久許可或每月，按每個(gè)節(jié)點(diǎn)計(jì)費(fèi)SoftLayer,AmazonAWS,Rackspace,AzureSoftLayer,AmazonAWS,Rackspace,Azure本地部署或者選擇云平臺(tái)單租戶集群多租戶集群單租戶集群9自由、可流動(dòng)的部署公共云DBaaS:開發(fā)和運(yùn)維的便捷和成本私有云:數(shù)據(jù)隱私和管控、監(jiān)督異構(gòu)的混合云：客戶數(shù)據(jù)中心由CloudantDBaaS擴(kuò)展優(yōu)化成本、合規(guī)、性能和隱私保護(hù)隨時(shí)間改變，而不中斷服務(wù)不需要復(fù)雜的數(shù)據(jù)整合工作AWSSoftLayerRackspaceAzure客戶數(shù)據(jù)中心10與任何設(shè)備的同步Cloudant——JSONoverHTTP11Cloudant

Sync12Cloudant是參與型系統(tǒng)的最佳選擇

——尤其在移動(dòng)、物聯(lián)網(wǎng)、互聯(lián)網(wǎng)領(lǐng)域快速的響應(yīng)時(shí)間(一次JSON讀取可獲取所需數(shù)據(jù))手機(jī)游戲，互聯(lián)網(wǎng)媒體，電子商務(wù)..

系統(tǒng)永遠(yuǎn)在線，計(jì)劃內(nèi)外的維護(hù)不會(huì)產(chǎn)生停機(jī)移動(dòng)App，互聯(lián)網(wǎng)應(yīng)用，客戶交互的應(yīng)用…支持爆炸式的擴(kuò)展要求

傳感器(IOT),持續(xù)產(chǎn)生數(shù)據(jù)的流應(yīng)用…靈活可變的

客戶關(guān)系管理系統(tǒng)，客戶單一視圖…快速開發(fā)的要求

市場營銷app，游戲app..Cloudant在IOT領(lǐng)域中的應(yīng)用場景車輛

路線優(yōu)化，行駛狀況可穿戴設(shè)備

客戶的地理位置，動(dòng)作，環(huán)境數(shù)據(jù)健康

訓(xùn)練記錄科研

各種不同的研究/傳感器數(shù)據(jù)游戲

游戲管理控制臺(tái)，玩家排名榜，道具情況的實(shí)

時(shí)更新報(bào)告，等等制造

從監(jiān)控設(shè)備返回的生產(chǎn)狀態(tài)14案例研究：FitnessKeeper健身跟蹤移動(dòng)應(yīng)用RunKeeper的創(chuàng)建者開始時(shí)，使用關(guān)系數(shù)據(jù)庫PostgreSQL爆炸式增長，超過2千萬活躍用戶，可擴(kuò)展性問題使FitnessKeeper不得不重新考慮架構(gòu)高可用，可彈性擴(kuò)展易于開發(fā)專注于用戶體驗(yàn)和前端去年開始遷移到Cloudant并在Cloudant上構(gòu)建新應(yīng)用BreezeAppFitnessKeeper：關(guān)系數(shù)據(jù)庫可擴(kuò)展性簡化運(yùn)營和開發(fā)工作降低成本15案例研究：HotheadGames2012年旗艦產(chǎn)品BigWinSoccer上線，兩天內(nèi)升為iPhone體育類第一名應(yīng)用，新用戶蜂擁而至HotheadGames公司快速選擇了Cloudant作為其游戲數(shù)據(jù)層，并將后續(xù)所有BigWin體育系列游戲平臺(tái)，繼續(xù)創(chuàng)造了多個(gè)體育類第一從開始的6個(gè)節(jié)點(diǎn)，到一年后的200多個(gè)節(jié)點(diǎn)，Cloudant伴隨BigWin系列快速成長統(tǒng)計(jì)數(shù)據(jù)顯示，當(dāng)其達(dá)到100個(gè)節(jié)點(diǎn)時(shí)，服務(wù)超過2.75億個(gè)游戲（平均30人/秒打開一個(gè)BigWin應(yīng)用），數(shù)據(jù)庫中超過25億個(gè)JSON文檔。16“Ourcodemakeshundredsofmillionsoftransactionsaday.MovingourdatatoCloudanthasfreedupourteamtofocusonwhatmattersmost:makingagreatexperienceforusers.JoelDeYoungHotheadGamesSamsung

獲得數(shù)據(jù)的可擴(kuò)展性和靈活的數(shù)據(jù)模式Hyuk-JeenSuh,SeniorInvestmentManager;Samsung“SamsungVentures相信對于大型企業(yè)的業(yè)務(wù)而言，一個(gè)全球分布的數(shù)據(jù)層以及對這些數(shù)據(jù)的管理十分關(guān)鍵”案例研究:Samsung和MilkMusic

公司背景SamsungVentures研發(fā)團(tuán)隊(duì)有兩個(gè)目標(biāo):1)構(gòu)建新的，創(chuàng)新性的產(chǎn)品

2)評(píng)估新技術(shù)在建立網(wǎng)絡(luò)新應(yīng)用時(shí)，這個(gè)團(tuán)隊(duì)評(píng)估和測試了各種支撐技術(shù)比如MilkMusic——Galaxy手機(jī)產(chǎn)品線的一個(gè)新的流媒體音樂應(yīng)用成功場景最為迫切的需求是可擴(kuò)展性——必須支持10億用戶無縫集成整體應(yīng)用環(huán)境能夠部署在AWS上能夠管理多種不同的數(shù)據(jù)格式，

包括用戶檔案，會(huì)話數(shù)據(jù)，歌曲喜好，多媒體歷史，音樂文件元數(shù)據(jù)，使用和會(huì)話歷史，等等解決方案和成果通過Cloudant,Samsung擁有了一個(gè)可擴(kuò)展的數(shù)據(jù)庫層

從而支持公司的：大并發(fā)的基礎(chǔ)用戶，海量的讀寫需求用JSON文檔的自我描述能力，存儲(chǔ)任何結(jié)構(gòu)或者格式的數(shù)據(jù)無論用戶在哪里，數(shù)據(jù)永遠(yuǎn)可獲取全面管理的數(shù)據(jù)層，保證性能和在線時(shí)間18Fidelity-FidSafe成功管理2千多萬客戶的財(cái)務(wù)文件和生活，并提供高可用性，穩(wěn)定性，和安全性TravellPerkins,CTOofFidSafe“在FidSafe的擴(kuò)展性方面，我們不得不考慮從第一天起滿足Fidelity的兩千多萬的現(xiàn)有客戶。擴(kuò)展慢的方案是不可以接受的。許多解決方案是完全自動(dòng)的，他們很棒，一直到他們不好了。一旦你跑不動(dòng)了，沒有專業(yè)知識(shí)能讓你得到更高水平的支持。我們看中cloudant，因?yàn)樗兄С趾瓦\(yùn)維團(tuán)隊(duì)，真正能動(dòng)手幫到你的數(shù)據(jù)庫解決實(shí)際問題。.”案例研究：Fidelity-FidSafe公司背景$4.2兆金融投資公司，總部設(shè)在馬薩諸塞州。需要建立一個(gè)管理系統(tǒng)，保證客戶的敏感文件的安全，并且在在災(zāi)難性的災(zāi)害事件發(fā)生時(shí)可用。成功場景結(jié)合用戶的數(shù)字?jǐn)?shù)據(jù)和物理文件作為數(shù)字保險(xiǎn)箱。復(fù)制數(shù)據(jù)，獲得持續(xù)性和可用性。能夠快速響應(yīng)數(shù)據(jù)層擴(kuò)展需求，能夠地理分布數(shù)據(jù)，從而減輕災(zāi)難性災(zāi)害事件帶來的損失。解決方案和成果通過Cloudant,Fidelity自信能夠?yàn)閮汕Ф嗳f客戶提供一個(gè)數(shù)字保險(xiǎn)箱類的應(yīng)用。Cloudant的托管服務(wù)意味著Fidelity不需要添加更多的DBA支持系統(tǒng)。Cloudant支持的數(shù)據(jù)和使用的可擴(kuò)展性，滿足了Fidelity的需要，并且不需要增加本地硬件。JSON文檔存儲(chǔ)支持?jǐn)?shù)據(jù)格式、附件和模式的靈活性。20Comdata傳統(tǒng)行業(yè)互聯(lián)網(wǎng)+的創(chuàng)新，利用Cloudant先進(jìn)的地理空間能力，建立一個(gè)新的移動(dòng)應(yīng)用“Cloudant先進(jìn)的地理空間能力、安全性和全面托管服務(wù)結(jié)合在一起，使得Comdata可以提供給獨(dú)特的用戶體驗(yàn)，成為其特別的競爭優(yōu)勢?！卑咐芯?Comdata公司背景支付處理和車隊(duì)燃料卡發(fā)行公司，總部設(shè)在田納西州，業(yè)務(wù)遍及美國和加拿大。需要?jiǎng)?chuàng)建一個(gè)移動(dòng)應(yīng)用程序，為Comdata支付處理系統(tǒng)的最終用戶，提供更好的體驗(yàn)。這款移動(dòng)應(yīng)用是Comdata擾亂市場的戰(zhàn)略性計(jì)劃。成功場景顯示使用Comdata支付系統(tǒng)供應(yīng)商的位置提供離線數(shù)據(jù)訪問根據(jù)距離、Comdata供應(yīng)商、贈(zèng)品、折扣等，優(yōu)化路線解決方案及成果通過Cloudant，Comdata構(gòu)建了下一代移動(dòng)支付應(yīng)用：Cloudant先進(jìn)的地理空間能力，使Comdata提供給最終用戶特別的用戶體驗(yàn)，成為Comdata獨(dú)特的競爭優(yōu)勢；Cloudant的托管服務(wù)是Comdata沒有添加更多的DBA支持系統(tǒng)；Cloudant的JSON文檔存儲(chǔ)支持?jǐn)?shù)據(jù)格式和架構(gòu)的靈活性，使Comdata在一個(gè)單一的應(yīng)用程序中，利用廣泛的數(shù)據(jù)源，沒有成本，開銷，或ETL帶來的延遲。22Kohl’sKohl‘s是美國著名的面向家庭的專業(yè)百貨公司，商店遍布美國40個(gè)州，并且每年的商店數(shù)量都在增加當(dāng)中。Kohl’s的銷售對象以家有幼兒的年輕母親為主，店鋪多數(shù)設(shè)于家庭聚居的市區(qū)，強(qiáng)調(diào)購物便利和物有所值?！癐BMCloudant數(shù)據(jù)即服務(wù)的敏捷能力，使Kohl's能夠在幾周而不是幾個(gè)月內(nèi)增強(qiáng)移動(dòng)解決方案，保持領(lǐng)先的競主地位和業(yè)務(wù)增長?！卑咐芯?Kohl’s業(yè)務(wù)挑戰(zhàn)APP需要管理上百萬客戶的促銷和優(yōu)惠券需要快速創(chuàng)新，快速為市場提供新的服務(wù)之前的解決方案在AWS的云平臺(tái)上，無法處理高并發(fā)的用戶需求因?yàn)樽x/寫鎖，MongoDB無法滿足Kohl’s的大并發(fā)量的需要，并且也缺少全面托管服務(wù)24解決方案及成果需要一個(gè)可擴(kuò)展的靈活的平臺(tái)來支撐面向客戶的移動(dòng)APP簡化了數(shù)據(jù)庫：從12張表結(jié)構(gòu)，簡化為4種類型的JSON文檔；去除了冗余數(shù)據(jù)當(dāng)前150萬的移動(dòng)用戶，預(yù)計(jì)年底達(dá)到400萬與Worklight/MobileFirst相集成截止目前使用了4個(gè)Cloudant集群，共12個(gè)數(shù)據(jù)庫節(jié)點(diǎn)BidirectionalSyncStandaloneClusters電信、零售、金融客戶案例Verizon(Telco,NorthAmerica)Terremark分公司，托管服務(wù)提供商，需要為其云托管客戶提供NoSQL數(shù)據(jù)庫服務(wù)，最終選擇了Cloudant。cloudant提供NoSQL數(shù)據(jù)服務(wù)，為Terremark公司贏得了新的客戶和商機(jī)。除Terremark之外，專注于網(wǎng)絡(luò)和移動(dòng)應(yīng)用開發(fā)的Verizon無線公司，也將Cloudant作為最佳NoSQL數(shù)據(jù)層，加速開發(fā)周期，并且為Verizon的客戶和員工提供更好的應(yīng)用性能。Walmart(Retail,NorthAmerica)他們的電子商務(wù)網(wǎng)頁在使用cloudant，管理API網(wǎng)關(guān)獲得的數(shù)據(jù)和1億9千7百萬客戶檔案（平均每個(gè)檔案200多屬性）。同時(shí)考慮更換他們部署的Cassandra。USAA(Insurance,NorthAmerica)用于IT和企業(yè)架構(gòu)團(tuán)隊(duì)使用的內(nèi)部的移動(dòng)應(yīng)用程序，曾經(jīng)在后臺(tái)DB2和SQLServer。下一個(gè)項(xiàng)目的重點(diǎn)將是基于cloudant，開發(fā)一個(gè)更大規(guī)模的內(nèi)部移動(dòng)應(yīng)用。

Fidelity(FinancialService,NorthAmerica)在個(gè)人投資部門，為Fidsafe應(yīng)用和新的項(xiàng)目，擴(kuò)展內(nèi)部PaaS平臺(tái)，支持更好的應(yīng)用程序開發(fā)，并未和內(nèi)部、外部服務(wù)引入新的對象存儲(chǔ)。希望基于同樣的NoSQL標(biāo)準(zhǔn)，建立一個(gè)服務(wù)于批發(fā)商和注冊投資顧問的，類似于Fidsafe移動(dòng)和Web應(yīng)用程序。25為什么選用Cloudant大規(guī)模的擴(kuò)展且富有彈性的集群每日處理數(shù)百萬活躍用戶有保證的性能和正常運(yùn)行時(shí)間消除項(xiàng)目和SLA交付失敗的風(fēng)險(xiǎn)靈活的數(shù)據(jù)模型、更加敏捷的Web和移動(dòng)開發(fā)沒有會(huì)拖慢開發(fā)速度的剛性模式為您提供24x7的管理服務(wù)專注于新的開發(fā)工作，而不是數(shù)據(jù)庫管理更多創(chuàng)新,更快增長,更多休息Cloudant

FAQ27CloudantFAQ（1）在一群x86機(jī)器加本地盤的分布式架構(gòu)中，如何實(shí)現(xiàn)集群的靈活擴(kuò)展？如何滿足高可用性的要求？28水平擴(kuò)展采用一致性哈希算法數(shù)據(jù)在整個(gè)集群中自動(dòng)分片永不丟失的寫操作，讀操作均衡負(fù)載在全部節(jié)點(diǎn)所有節(jié)點(diǎn)均讀和寫，沒有單點(diǎn)故障在缺省配置下，一式三份地存儲(chǔ)所有數(shù)據(jù):

每次寫操作意味著至少寫完了兩個(gè)不同的服務(wù)器的磁盤

每個(gè)讀至少從兩節(jié)點(diǎn)獲取數(shù)據(jù)并比對，以保證一致性節(jié)點(diǎn)之間最終同步(eventuallysynchronized)集群永遠(yuǎn)在線升級(jí)維護(hù)不影響可用性服務(wù)器故障不影響可用性Cloudant集群——可擴(kuò)展與高可用29CloudantCloudantFAQ（2）在GIS相關(guān)的應(yīng)用場景中，Cloudant是否取代了原來的GIS系統(tǒng)或者地圖服務(wù)？30更好的存儲(chǔ)和查詢地理數(shù)據(jù)——CloudantGeopatial便捷有效的存儲(chǔ)和查詢手機(jī)、相機(jī)、電腦、傳感器和上網(wǎng)設(shè)備產(chǎn)生的大量瞬間地理數(shù)據(jù)將現(xiàn)有的GIS應(yīng)用程序擴(kuò)展，與移動(dòng)應(yīng)用結(jié)合通過易用的API，用戶可以：用多邊形邊界，矩形，圓形/橢圓形等查詢最近鄰預(yù)測路徑分析與以下Cloudant的功能結(jié)合數(shù)據(jù)靈活性：支持JSON/GeoJSON可擴(kuò)展性：數(shù)據(jù)量，高并發(fā)用戶數(shù)據(jù)復(fù)制：可以跨地域的數(shù)據(jù)分發(fā)本地訪問：CloudantSync支持離線高可用：多個(gè)副本，數(shù)據(jù)持續(xù)可用31初級(jí)查詢32Cloudant可以查詢?nèi)我庑螤睿踔劣脩糇远x33定制化企業(yè)自己的地理信息圖層，與通用地圖相結(jié)合34APP或者瀏覽器客戶定制化圖層服務(wù)器地圖服務(wù)提供商開發(fā)接口地圖服務(wù)提供商數(shù)據(jù)庫定制化圖層數(shù)據(jù)(GeoJSON)API調(diào)用API解析與ESRI等集成Koop/Esri/koop

Query,Map,orAnalyzeGeoJSONfilesjustliketheywereafullAPIservice.CloudantisaprovidertoKoopUseAGOLandEsriDesktoptoolsforqueryingandretrievalofCloudantdatabasesCloudantFAQ（3）JSON數(shù)據(jù)的靈活結(jié)構(gòu)能支持?jǐn)?shù)據(jù)結(jié)構(gòu)的不斷變化，很好的適應(yīng)迭代開發(fā)，滿足業(yè)務(wù)快速發(fā)展的要求。但是：如果我們想對Cloudant中產(chǎn)生的大量數(shù)據(jù)進(jìn)行查詢分析怎么辦？更進(jìn)一步，如何對這些靈活多變的數(shù)據(jù)實(shí)現(xiàn)商業(yè)智能分析？36CloudantAPI和查詢選擇JSONDocumentsPrimaryIndexSecondaryIndicesSearchCloudantGeospatialCloudantQuery通過_id查詢文檔開箱即用的B樹存儲(chǔ)的主鍵

doc._id使用MapReduce構(gòu)建，存儲(chǔ)在B樹中鍵

用戶定義的字段使用Lucene構(gòu)建

任何字段、所有字段都可以被索引存儲(chǔ)在R*樹中GeoJSON經(jīng)緯度坐標(biāo)Erlang語言構(gòu)建聲明性查詢當(dāng)需要單一的可被_id識(shí)別的文檔當(dāng)通過_id可定位的文檔返回一系列鍵需要分析數(shù)據(jù)或得到一定范圍的鍵時(shí)使用例如：數(shù)據(jù)字段計(jì)數(shù)、總和/平均數(shù)值結(jié)果、高級(jí)統(tǒng)計(jì)、按日期分組等即席查詢基于其內(nèi)容查找文檔可以執(zhí)行分組、分片和簡單的地理查詢（bbox

和按距離排序）復(fù)雜的幾何形狀（多邊形、多個(gè)連續(xù)圓弧線段的集合等）高級(jí)關(guān)系（相交、重疊等）即席查詢多種操作符(>,<,IN,OR,AND,等等)為方便Mongo

或者SQL背景的開發(fā)人員37dashDB–數(shù)據(jù)倉庫Forappsthatneed:ElasticscalabilityHighavailabilityDatamodelflexibilityDatamobilityTextsearchGeospatial

Availableas:FullymanagedDBaaSOn-premisesprivatecloudHybridarchitectureBLU

AccelerationNetezza

In-DatabaseAnalyticsCloudantDatabase

asaService?2015IBMCorporationIn-databaseanalyticscapabilities

forbestperformanceatop