阿里技術(shù)沙龍

豆瓣閱讀中的持續(xù)集成/發(fā)布實(shí)踐豆瓣

孫毅豆瓣閱讀豆瓣閱讀是

豆瓣讀書(shū)推出的數(shù)字閱讀服務(wù)擁有質(zhì)量一流的內(nèi)容支持Web、iPad、iPhone、Android、Kindle等多種設(shè)備提供極佳的閱讀體驗(yàn)社會(huì)化閱讀WhyCI?減少風(fēng)險(xiǎn)減少重復(fù)過(guò)程任意時(shí)間，地點(diǎn)可部署可見(jiàn)性信心場(chǎng)景1-開(kāi)發(fā)本地服務(wù)起不來(lái)了？依賴(lài)！提交了才發(fā)現(xiàn)問(wèn)題？開(kāi)發(fā)服務(wù)器網(wǎng)速趕不上手速…問(wèn)題分析開(kāi)發(fā)環(huán)境復(fù)雜且不統(tǒng)一本地構(gòu)建困難本地沒(méi)有快速反饋機(jī)制解決方案本地的統(tǒng)一的虛擬開(kāi)發(fā)環(huán)境訂閱上游依賴(lài)變更，用puppet管理大家一起貢獻(xiàn)模塊基準(zhǔn)開(kāi)發(fā)工具包簡(jiǎn)單便捷的本地ci訂閱上游依賴(lài)變更必要性包依賴(lài)開(kāi)發(fā)環(huán)境必須和線(xiàn)上環(huán)境同步升級(jí)公司內(nèi)部的服務(wù)依賴(lài)，lib依賴(lài)版本升級(jí)現(xiàn)狀：RSS訂閱依賴(lài)更新消息不是很先進(jìn)，但是還算可靠大家一起貢獻(xiàn)模塊必要性項(xiàng)目眾多，每一個(gè)項(xiàng)目依賴(lài)和工具不同現(xiàn)狀：fork，pull-requestPuppet主文件中用注釋進(jìn)行特性開(kāi)關(guān)基準(zhǔn)開(kāi)發(fā)工具包工具的種類(lèi)/版本工具的配置現(xiàn)狀：靜態(tài)檢查單元測(cè)試Web測(cè)試簡(jiǎn)單便捷的本地集成(1)pylint/jshint基準(zhǔn)開(kāi)發(fā)工具包包含工具隨項(xiàng)目代碼進(jìn)行檢查項(xiàng)配置gitpre-commithook簡(jiǎn)單便捷的本地集成(2)unittest/apitest不干擾本地開(kāi)發(fā)服務(wù)coveragenosy/tag/etc..簡(jiǎn)單便捷的本地集成(3)web測(cè)試headlesswebdriverjserrorcollectionhtmlerrorcollectionxunit對(duì)比beforenow只能在服務(wù)器開(kāi)發(fā)可遷移/可定制的完整本地開(kāi)發(fā)環(huán)境先提交，再跑集成測(cè)試，改bug本地先進(jìn)行測(cè)試，再提交web測(cè)試只能在中心服務(wù)器本地web測(cè)試場(chǎng)景2-提交好大一個(gè)diff！懶得review合入的時(shí)候咋辦啊。。這功能誰(shuí)搞掛的？問(wèn)題分析review流于形式分支合并成本高問(wèn)題定位困難解決方案git/pull-requestgit分支的切換和合并成本極低以pull-request作為review單元鼓勵(lì)更多提交，強(qiáng)制review后合并review覆蓋面，針對(duì)性和參與度高幾乎每次merge都會(huì)觸發(fā)構(gòu)建pull-request的粒度保證問(wèn)題追查較容易通過(guò)構(gòu)建job通知提交作者對(duì)比beforenow定期review，覆蓋面小每個(gè)pull-request必須reviewreview意見(jiàn)很難定位到行響應(yīng)也不及時(shí)review精確到行，提醒機(jī)制完善修復(fù)一目了然寫(xiě)一大堆再合并提交天天合并/提交(5個(gè)月，1275個(gè)pull-request，2725個(gè)review意見(jiàn)，全體參與)構(gòu)建diff太大，出問(wèn)題不知道誰(shuí)的幾乎每個(gè)構(gòu)建只有1-2個(gè)merge(5個(gè)月，900次構(gòu)建)場(chǎng)景3-構(gòu)建大家都喜歡下班前提交跑一遍要20分鐘！CI服務(wù)器又排隊(duì)。。跑了15分鐘才告訴我沒(méi)通過(guò):(merge把主干搞掛啦問(wèn)題分析分支集成不足cisuite反饋速度慢無(wú)法獲取階段結(jié)果持續(xù)集成服務(wù)器資源問(wèn)題解決方案(1)基于openingpullrequest的分支持續(xù)集成解決方案(2)構(gòu)建鏈/測(cè)試分級(jí)corelintpylintjshintyuicheckutunitestapitestservicetestwebtestcorefullservice-syncrelease-tagstaging-regressiononline解決方案(3)冗余計(jì)算資源利用虛擬機(jī)開(kāi)啟jenkins-slave模塊即接入ci系統(tǒng)控制node的tag來(lái)分配接入的job對(duì)比beforenow中心ci只跑主干代碼的cisuite活動(dòng)中的pull-request分支均有自己的cisuite，結(jié)果更新在pr記錄中靜態(tài)檢查4min任務(wù)分拆并行化，關(guān)鍵任務(wù)11s/42s后續(xù)任務(wù)1min48s所有任務(wù)在中心服務(wù)器上排隊(duì)“下午4點(diǎn)的困擾”大家貢獻(xiàn)slave，大大提高了突然峰值下的執(zhí)行速度，自己的任務(wù)已經(jīng)可以由自己的slave全部消化cisuite中的job過(guò)大過(guò)長(zhǎng)先跑核心，再dailybuild全量提交構(gòu)建控制在10min場(chǎng)景4-交付上哪個(gè)版本？XX不在，怎么上線(xiàn)來(lái)著？手抖了。。怕出線(xiàn)上問(wèn)題啊…解決方案(1)繼承cisuite的版本狀態(tài)監(jiān)測(cè)/標(biāo)記提交構(gòu)建打包打tag解決方案(2)特性開(kāi)關(guān)重大變更

均使用feature-switchswitch多種狀態(tài)，可在線(xiàn)切換解決方案(3)直接從ci集成自動(dòng)化上線(xiàn)從cisuite傳入可上線(xiàn)的tag由jenkinsj