淘寶系統(tǒng)架構(gòu)概述.ppt

1、系統(tǒng)架構(gòu)概述,了解什么是架構(gòu) 了解Alibaba網(wǎng)站架構(gòu)的歷史 掌握Alibaba網(wǎng)站架構(gòu)的現(xiàn)狀 掌握網(wǎng)站架構(gòu)設(shè)計(jì)的理念,課程目標(biāo)和內(nèi)容,架構(gòu)規(guī)定了軟件的高層劃分及各部分間的交互 架構(gòu)不是軟件，但架構(gòu)決策體現(xiàn)于軟件平臺(tái)和框架之中 架構(gòu)的優(yōu)劣決定了業(yè)務(wù)應(yīng)用系統(tǒng)的實(shí)施能力和發(fā)展空間 技術(shù)搭臺(tái)，業(yè)務(wù)唱戲 架構(gòu)搭臺(tái)，應(yīng)用唱戲 架構(gòu)永遠(yuǎn)在隨著業(yè)務(wù)的發(fā)展而變遷 擁抱變化！,什么是架構(gòu)？,B2B架構(gòu)演化過(guò)程,1999 史前,2001 石器時(shí)代,2002 中世紀(jì),2005 工業(yè)革命,未來(lái) 星際時(shí)代？,Perl,WebMacro pojo jdbc,Velocity Ejb,WebX Spring,SOA OP

2、EN API 云計(jì)算 ,Perl，CGI Mysql Apache 服務(wù)器在美國(guó)，56KModem，遠(yuǎn)程開(kāi)發(fā)、測(cè)試、部署,1999-史前時(shí)代,Java服務(wù)器使用線程性能比cgi技術(shù)使用進(jìn)程好 Java相比Perl，可維護(hù)性好，開(kāi)發(fā)效率高 Java開(kāi)始在國(guó)內(nèi)流行,史前-石器時(shí)代原因,開(kāi)始使用Java 模板技術(shù)采用WebMacro 中間層采用Servlet技術(shù)，使用POJO封裝業(yè)務(wù)邏輯和數(shù)據(jù)訪問(wèn) 使用BizObj對(duì)象封裝基本業(yè)務(wù)邏輯和數(shù)據(jù)訪問(wèn)方法 其它業(yè)務(wù)對(duì)象繼承BizObj方法，實(shí)現(xiàn)自己的業(yè)務(wù)邏輯和數(shù)據(jù)訪問(wèn)方法 使用JDBC訪問(wèn)數(shù)據(jù)庫(kù) Servlet容器使用resin，Web服務(wù)器使用Apach

3、e,2001底-石器時(shí)代-www系統(tǒng),2001底-石器時(shí)代(續(xù)),基于POJO的biz層,基于WebMacro的模板技術(shù),表現(xiàn)層,業(yè)務(wù)層,Oracle數(shù)據(jù)庫(kù),LDAP,數(shù)據(jù)存儲(chǔ),表現(xiàn)層僅僅使用模板技術(shù)，缺乏MVC框架，導(dǎo)致大量的servlet配置 業(yè)務(wù)邏輯層和數(shù)據(jù)訪問(wèn)層耦合，可維護(hù)性和可擴(kuò)展性差 受到EJB風(fēng)潮的影響,石器時(shí)代-中世紀(jì)原因,表現(xiàn)層采用WebX 模板技術(shù)Velocity 在Turbine基礎(chǔ)上開(kāi)發(fā)了自己的服務(wù)框架和一系列公共服務(wù) 通過(guò)一個(gè)delegate對(duì)象訪問(wèn)業(yè)務(wù)邏輯層 業(yè)務(wù)邏輯層使用EJB（SLSB，CMP，DAO等） 通過(guò)一個(gè)faade對(duì)象供表現(xiàn)層delegate訪問(wèn) Fa

4、ade對(duì)象訪問(wèn)多個(gè)SLSB實(shí)現(xiàn)的controller對(duì)象實(shí)現(xiàn)業(yè)務(wù)邏輯 使用CMP實(shí)現(xiàn)單條記錄的增加和刪除 考慮性能，在CMP之外封裝DAO對(duì)象通過(guò)JDBC訪問(wèn)數(shù)據(jù)庫(kù) EJB服務(wù)器使用Weblogic Web服務(wù)器使用Apache,2002底-中世紀(jì),2002底-中世紀(jì)（續(xù)）,搜索引擎,Oracle數(shù)據(jù)庫(kù),LDAP,使用SLSB實(shí)現(xiàn)的業(yè)務(wù)邏輯對(duì)象Controlers,基于Webx以及Service框架的Web層框架,CMP進(jìn)行單條記錄的增加刪除，DAO對(duì)象查找,表現(xiàn)層,商業(yè)邏輯層,數(shù)據(jù)訪問(wèn)層,數(shù)據(jù)存儲(chǔ),delegate,Faade,Turbine的發(fā)展緩慢 EJB配置復(fù)雜,可維護(hù)性差 重量級(jí)框架

5、，業(yè)務(wù)侵入高 高度容器依賴，可測(cè)試性差 CMP性能差，導(dǎo)致DAO和CMP并存,中世紀(jì)-工業(yè)革命原因,表現(xiàn)層使用WebX和Service 框架 Velocity模板技術(shù) 自有服務(wù)框架及多種公共服務(wù)：Form Service，Template Service，Mail Service，Rundata Service，Upload Service等 通過(guò)command模式和biz層交互 無(wú)狀態(tài)Web應(yīng)用，基于cookie實(shí)現(xiàn)session，獲取線性擴(kuò)展性 業(yè)務(wù)邏輯層使用Alibaba Service框架，并且引入spring 框架 Spring容器和Alibaba Service框架無(wú)縫集成 AO，

6、BO 使用分布式cache緩存對(duì)象 數(shù)據(jù)訪問(wèn)層 透明的事務(wù)處理 引入Hibernate和iBatis，以iBatis為主,2005-工業(yè)革命,2005-工業(yè)革命（續(xù)）,搜索引擎,Oracle數(shù)據(jù)庫(kù),LDAP,基于Spring以及Service框架的biz層框架,基于Webx以及Service框架的Web層框架,分布式 Cache,分布式 Session,基于Spring以及DAO設(shè)計(jì)模式的數(shù)據(jù)訪問(wèn)框架,表現(xiàn)層,商業(yè)邏輯層,數(shù)據(jù)訪問(wèn)層,數(shù)據(jù)存儲(chǔ),數(shù)據(jù)庫(kù)成為瓶頸 - 分布式數(shù)據(jù)庫(kù) 應(yīng)用耦合嚴(yán)重 - SOA Pampas平臺(tái),演化還在繼續(xù),中文站會(huì)員數(shù)超過(guò)2000萬(wàn) 中文站Offer已經(jīng)超過(guò)1.5億

7、 中文站每天的用戶PV已經(jīng)超過(guò)1.6億 中文站每天新發(fā)Offer超過(guò)100萬(wàn) 中文站每天重發(fā)Offer超過(guò)1500萬(wàn) 國(guó)際站略少，但是增長(zhǎng)迅猛,網(wǎng)站的現(xiàn)在,中文站/國(guó)際站應(yīng)用部署圖,網(wǎng)站鏡像部署圖(國(guó)際站),中供用戶,網(wǎng)站運(yùn)營(yíng),海外賣家,Load Balance (F5, Alteon),Apache,Jboss,Database,Search Engine,Apache,Jboss,Apache,Jboss,Apache,Static Resource,Cache,Storage,用戶請(qǐng)求處理,流量隨著用戶量而增加 業(yè)務(wù)的變更頻繁 用戶行為的收集 產(chǎn)品角色的細(xì)分及調(diào)整 7 X 24的高可用性

8、,互聯(lián)網(wǎng)的挑戰(zhàn),流量激增,處理用戶請(qǐng)求,應(yīng)對(duì)的挑戰(zhàn),并發(fā)(垂直) 用戶數(shù)量的增加 使用資源的增加 響應(yīng)(水平) 處理性能的維持,業(yè)務(wù)變更,專業(yè)化細(xì)分之前,專業(yè)化細(xì)分之后,數(shù)據(jù)挖掘,行為數(shù)據(jù)的采集 追蹤埋點(diǎn) 異步收集 采集數(shù)據(jù)的分析 數(shù)據(jù)倉(cāng)庫(kù) 分析引擎 運(yùn)營(yíng)團(tuán)隊(duì)決策 風(fēng)險(xiǎn)行為的控制 CTU系統(tǒng) 安全團(tuán)隊(duì),網(wǎng)站產(chǎn)品的生命周期,團(tuán)隊(duì)再細(xì)分,角色專業(yè)化細(xì)分,避免宕機(jī) 集群化 服務(wù)化 備份切換 維護(hù)時(shí)間有限 新產(chǎn)品發(fā)布 在線發(fā)布 疊加式發(fā)布 用戶透明過(guò)渡,高可用性,架構(gòu)是平衡的藝術(shù) 不要把簡(jiǎn)單問(wèn)題復(fù)雜化，也不要把復(fù)雜問(wèn)題簡(jiǎn)單化 系統(tǒng)架構(gòu)需要考慮哪些業(yè)務(wù)要求和質(zhì)量指標(biāo)？ 怎樣取得平衡？ 分解復(fù)雜度 自上而

9、下，分離關(guān)注點(diǎn)（總體系統(tǒng)局部） 分配復(fù)雜度 用合適的技術(shù)、合適的組織來(lái)解決問(wèn)題,架構(gòu)設(shè)計(jì)理念,架構(gòu)的考慮要點(diǎn),架構(gòu)考慮的方向,總體架構(gòu) 分解：按不同的業(yè)務(wù)領(lǐng)域、用戶群來(lái)分解業(yè)務(wù)復(fù)雜性 分配：將業(yè)務(wù)需求分配到各個(gè)公司、部門、系統(tǒng)、服務(wù) 系統(tǒng)/服務(wù)可獨(dú)立部署和維護(hù)，它們之間多采用分布式交互,業(yè)務(wù)劃分(總體架構(gòu)),業(yè)務(wù)劃分(總體架構(gòu)),系統(tǒng)架構(gòu),系統(tǒng)架構(gòu) 分解：按不同的技術(shù)層次來(lái)分解技術(shù)復(fù)雜性 分配：將技術(shù)需求分配到各個(gè)中間件、容器、框架、工具組件 容器/框架通過(guò)特定的技術(shù)模式來(lái)透明或半透明地解決技術(shù)問(wèn)題,系統(tǒng)細(xì)分,應(yīng)用優(yōu)化,局部調(diào)優(yōu)（數(shù)據(jù)存取） 分解：按數(shù)據(jù)的位置、讀寫、計(jì)算特性等分解數(shù)據(jù)存取復(fù)雜性 分配：將數(shù)據(jù)分配到各個(gè)數(shù)據(jù)庫(kù)、索引庫(kù)、存儲(chǔ)系統(tǒng)、Cache 不同的存儲(chǔ)技術(shù)適合于不同