講義-運維體系梳理

1、運維體系梳理內(nèi)容敏捷開發(fā)與DevOps相關(guān)概念百度/騰訊組織架構(gòu)與職能阿里運維情況其它公司運維情況 優(yōu)酷土豆美團(tuán)網(wǎng)OSS與自動化系統(tǒng)百度，阿里巴巴，SINA，盛大游戲，小米，趕集，電信企業(yè)IT架構(gòu)浙江移動IT部架構(gòu)上海電信IT部架構(gòu)通用IT公司架構(gòu)參考框架關(guān)于敏捷， 來自百度文庫的智慧百度知道研發(fā)能力三級跳揭秘當(dāng)管理者遇上敏捷構(gòu)建可靠的自動化發(fā)布體系（qcon）_攜程持續(xù)交付，在云端淘寶應(yīng)用運維玩轉(zhuǎn)自動化運維_邵海楊部署系統(tǒng)的前世今生運維自動化實踐之路_小米-伏曄ITIL & DevOps & NoOpsITIL是廣為接受的一組IT管理流程管理框架，應(yīng)用最為廣泛的流程包括事件（故障）管理，問題

2、管理，變更管理，發(fā)布管理，配置管理。百度百科，/view/599342.htm?fr=aladdinDevOps源于持續(xù)集成，其觀點是開發(fā)推動的產(chǎn)品更新模式，借助自動化完成軟件版本的編譯/打包/自動化部署。經(jīng)典案例為Flickr發(fā)展了自己的DevOps能力，使之能夠支撐業(yè)務(wù)部門“每天部署10次”的要求百度百科，/view/5705743.htmNoOps是DevOps的擴(kuò)展，其思路是，IT人員不應(yīng)參與這個開發(fā)周期。根據(jù)這種觀點，開發(fā)人員不僅是將代碼發(fā)布至由不同的運維團(tuán)隊設(shè)計和管理的環(huán)境，而且負(fù)責(zé)所有架構(gòu)設(shè)計、容量規(guī)劃和性能優(yōu)化等工作。而NoOps的目標(biāo)是通過去除所有可能出現(xiàn)的人為干預(yù)和交接來消

3、除停機(jī)狀況并提高性能，允許由了解系統(tǒng)的開發(fā)人員創(chuàng)建一個單一的原始設(shè)計，然后自動傳到各處。關(guān)于DevOps百度， DevOps, 讓持續(xù)交付成為可能/view/3e0f135f3b3567ec102d8a4c.html喬梁，項目管理部（PMO），該部門是百度技術(shù)部重要的服務(wù)支撐部門，負(fù)責(zé)建設(shè)與優(yōu)化百度產(chǎn)品研發(fā)體系流程，積累與提煉百度研發(fā)項目管理方法，打造一流的研發(fā)項目管理平臺與知識管理平臺，做好大技術(shù)部的項目管理咨詢與服務(wù)支撐。后離職加入騰訊。百度，我們離DevOps有多遠(yuǎn)-持續(xù)集成思想的延伸/ops_bd/item/d57f885a0b5c5a564fff20ef暢游，DEVOPS進(jìn)化之路/v

4、iew/3b8ff1be195f312b3169a5fe.html百姓網(wǎng)，讓交付的速度趕上思考的速度/view/70f3f5a2b0717fd5360cdc14.html七牛，七牛的DEVOPS實踐/view/291c83dc941ea76e59fa040c.html京東，京東云鼎探索DevOps之路/view/b8cd5552011ca300a7c3903f.html關(guān)于DevOpsThoughtworks， 持續(xù)交付從云端到地面， /view/830f3538af1ffc4ffe47ac8f.html重復(fù)的事讓機(jī)器去做，人應(yīng)該從事創(chuàng)造性的工作得到好工具的關(guān)鍵在于不要再重復(fù)發(fā)明輪子與生產(chǎn)環(huán)境

5、相似的驗證環(huán)境應(yīng)該隨時可得每個研發(fā)人員的工作狀態(tài)應(yīng)該隨時可見好的研發(fā)實踐應(yīng)該立即被部署到每個人攜程首席架構(gòu)師談DevOps：找到合適的人最重要/cn/interviews/decops-finding-the-right-people持續(xù)集成持續(xù)集成是一種軟件開發(fā)實踐，即團(tuán)隊開發(fā)成員經(jīng)常集成它們的工作，通常每個成員每天至少集成一次，也就意味著每天可能會發(fā)生多次集成。每次集成都通過自動化的構(gòu)建（包括編譯，發(fā)布，自動化測試)來驗證，從而盡早地發(fā)現(xiàn)集成錯誤。持續(xù)集成要求開發(fā)人員頻繁地提交他們的所完成的工作產(chǎn)品，這個頻率通常是至少每天一次，有時候可以多次。每次集成會通過自動化構(gòu)建（automated

6、build）的方式進(jìn)行盡量快速地驗證，以確保新提交的變化不會造成新的問題。如果在集成的過程中出現(xiàn)異常，則應(yīng)當(dāng)快速的反饋給相關(guān)的人員。構(gòu)建是將源代碼放在一起，并驗證軟件可以作為一個一致的單元運行的過程；驗證活動一般包括編譯、測試、審查和部署。 持續(xù)集成要素與原則要素：1. 統(tǒng)一的代碼庫 2. 自動構(gòu)建 3. 自動測試 4. 每個人每天都要向代碼庫主干提交代碼 5. 每次代碼遞交后都會在持續(xù)集成服務(wù)器上觸發(fā)一次構(gòu)建 6. 保證快速構(gòu)建 7. 模擬生產(chǎn)環(huán)境的自動測試 8. 每個人都可以很容易的獲取最新可執(zhí)行的應(yīng)用程序 9. 每個人都清楚正在發(fā)生的狀況 10. 自動化的部署 原則：1. 所有的開發(fā)人員

7、需要在本地機(jī)器上做本地構(gòu)建，然后再提交的版本控制庫中，從而確保他們的變更不會導(dǎo)致持續(xù)集成失敗 2. 開發(fā)人員每天至少向版本控制庫中提交一次代碼 3. 開發(fā)人員每天至少需要從版本控制庫中更新一次代碼到本地機(jī)器 4. 需要有專門的集成服務(wù)器來執(zhí)行集成構(gòu)建,每天要執(zhí)行多次構(gòu)建 5. 每次構(gòu)建都要100%通過6. 每次構(gòu)建都可以生成可發(fā)布的產(chǎn)品 7. 修復(fù)失敗的構(gòu)建是優(yōu)先級最高的事情常規(guī)開發(fā)部署過程（例）基于DevOps開發(fā)部署過程（例）內(nèi)容敏捷開發(fā)與DevOps相關(guān)概念百度/騰訊組織架構(gòu)與職能阿里運維情況其它公司運維情況 優(yōu)酷土豆美團(tuán)網(wǎng)OSS與自動化系統(tǒng)百度，阿里巴巴，SINA，盛大游戲，小米，趕集

8、，電信企業(yè)IT架構(gòu)浙江移動IT部架構(gòu)上海電信IT部架構(gòu)通用IT參考架構(gòu)百度體系架構(gòu)百度系統(tǒng)部系統(tǒng)部是百度非常關(guān)鍵的核心部門！搜索引擎不僅需要算法技術(shù)，同時也需要網(wǎng)絡(luò)、IDC、操作系統(tǒng)、內(nèi)核、安全等各個層面的支持，而這些支持都是由百度的系統(tǒng)部提供的。百度每天數(shù)億的訪問流量，最終的壓力都是由系統(tǒng)來分擔(dān)。系統(tǒng)部是搜索引擎中的引擎，可以說除了應(yīng)用層，之下的的所有層面都由系統(tǒng)部來負(fù)責(zé)。系統(tǒng)部面對的挑戰(zhàn)來自系統(tǒng)各個層面：操作系統(tǒng)的定制、Linux內(nèi)核的深入分析和算法優(yōu)化、網(wǎng)絡(luò)的分析和調(diào)優(yōu)、硬件性能的優(yōu)化、安全和防攻擊能力的提高、優(yōu)化數(shù)據(jù)中心的能耗。我們的工作目標(biāo)不僅僅是維護(hù)全國規(guī)模最大的系統(tǒng)集群的安全和穩(wěn)

9、定，而且用我們的新技術(shù)，使公司用較少的成本實現(xiàn)較高的系統(tǒng)和網(wǎng)絡(luò)性能，用系統(tǒng)技術(shù)讓用戶獲得更快、更好、更穩(wěn)定的體驗。由于系統(tǒng)部工作涉及網(wǎng)絡(luò)、存儲、內(nèi)核、系統(tǒng)、安全等諸多技術(shù)方向，天生就是架構(gòu)師的搖籃。在系統(tǒng)部已經(jīng)有一些深入鉆研Linux內(nèi)核、深入分析內(nèi)核協(xié)議棧、鉆研網(wǎng)絡(luò)協(xié)議的資深工程師，他們在系統(tǒng)的調(diào)優(yōu)與規(guī)?；先〉昧撕艽蟪删?。我們擁有世界最先進(jìn)設(shè)備千萬級系統(tǒng)實驗室，可以進(jìn)行各種操作系統(tǒng)、硬件和網(wǎng)絡(luò)的測試。Ref：/百度運維部運維部是百度搜索引擎及產(chǎn)品線上運營的核心技術(shù)部門，在滿足產(chǎn)品快速迭代、規(guī)模迅速擴(kuò)張的要求下，實現(xiàn)搜索引擎的穩(wěn)定運行和快速訪問，為百度業(yè)務(wù)的順利開展提供保障。搜索引擎的穩(wěn)定高

10、效運行依賴我們親手打造的強大自動化管理平臺，這里的工作涉及廣泛的技術(shù)領(lǐng)域：你將親手調(diào)整系統(tǒng)架構(gòu)和內(nèi)部運行邏輯，讓它精確管理和從容協(xié)調(diào)每個任務(wù)的執(zhí)行；你將親手優(yōu)化網(wǎng)絡(luò)存儲架構(gòu)，使海量數(shù)據(jù)的傳輸、存儲與訪問也變得輕而易舉；你將親手設(shè)計高性能數(shù)據(jù)庫集群，讓每條記錄都能快速、準(zhǔn)確的記錄與索引；你將親手規(guī)劃分布式與虛擬化應(yīng)用，為計算效率、運營效率的不斷提高做出貢獻(xiàn)。主要技術(shù)方向：1.高可靠性大規(guī)模機(jī)群自動化管理平臺的設(shè)計與實現(xiàn)2.高性能Mysql數(shù)據(jù)庫集群設(shè)計與調(diào)優(yōu)3.海量數(shù)據(jù)分析與監(jiān)控4.大規(guī)模數(shù)據(jù)存儲架構(gòu)與設(shè)計5.分布式系統(tǒng)調(diào)度與運維設(shè)計6.搜索引擎及產(chǎn)品部署與性能優(yōu)化7.虛擬化技術(shù)與應(yīng)用8.運維安

11、全管理/corp/2785948/discuss/32145Ref：/百度質(zhì)量部質(zhì)量部是百度公司技術(shù)部核心部門之一，承擔(dān)著百度所有產(chǎn)品的質(zhì)量保證、測試框架的設(shè)計與軟件工具的開發(fā)、過程改進(jìn)等工作。在質(zhì)量部工作將有機(jī)會全面地接觸和了解百度各產(chǎn)品線的一流技術(shù)，并掌握和擴(kuò)展業(yè)界領(lǐng)先的自動化工具與流程。Ref：/百度信息技術(shù)工程部信息技術(shù)工程部的目標(biāo)是以一流的信息技術(shù)、一流的流程運作、支持公司一流的管理。部門人員通過業(yè)務(wù)流程分析、梳理和優(yōu)化，應(yīng)用IT技術(shù)到公司管理，實現(xiàn)信息化管理，提高公司運作效率，控制業(yè)務(wù)風(fēng)險，為管理層提供決策依據(jù)。信息工程部負(fù)責(zé)：公司網(wǎng)絡(luò)平臺、IT基礎(chǔ)設(shè)施的規(guī)劃、建設(shè)、運維。公司信息

12、安全管理策略、流程的制定、建設(shè)、監(jiān)控。公司IT應(yīng)用系統(tǒng)的規(guī)劃、建設(shè)、推廣、運維。騰訊組織架構(gòu)企業(yè)發(fā)展事業(yè)群(張小龍)移動互聯(lián)網(wǎng)事業(yè)群(劉成敏)社交網(wǎng)絡(luò)事業(yè)群(湯道生)互動娛樂事業(yè)群(任宇昕)網(wǎng)絡(luò)媒體事業(yè)群(劉勝義)技術(shù)工程事業(yè)群(盧山)騰訊電商控股公司（吳宵光）騰訊技術(shù)工程事業(yè)群技術(shù)工程事業(yè)群(TEG)：包含技術(shù)運營線及搜索平臺線。技術(shù)運營線為騰訊提供互聯(lián)網(wǎng)行業(yè)全方位的運營解決方案和服務(wù)支持，運營著亞洲最大的網(wǎng)絡(luò)、服務(wù)器集群和數(shù)據(jù)中心，擁有業(yè)內(nèi)領(lǐng)先的基礎(chǔ)架構(gòu)云運營平臺、云數(shù)據(jù)處理平臺、互聯(lián)網(wǎng)海量應(yīng)用支撐服務(wù)平臺，為億級用戶提供云計費服務(wù)和安全保障。搜索平臺線負(fù)責(zé)搜索引擎基礎(chǔ)技術(shù)、網(wǎng)頁、無線、垂

13、直類產(chǎn)品及問問、百科等社區(qū)搜索產(chǎn)品的研發(fā)和運營，為搜索引擎產(chǎn)品提供技術(shù)和數(shù)據(jù)支撐；同時負(fù)責(zé)搜索廣告、搜索引擎等產(chǎn)品數(shù)據(jù)挖掘的分布式存儲和并行計算平臺的管理運營，技術(shù)工程事業(yè)群秉承”專業(yè)服務(wù)伙伴”的理念為騰訊業(yè)務(wù)保駕護(hù)航！騰訊技術(shù)工程事業(yè)群云平臺大生態(tài)騰訊開放戰(zhàn)略分三層，而技術(shù)工程事業(yè)部建立云平臺，為開發(fā)者提供基礎(chǔ)服務(wù)。騰訊開放平臺接入騰訊業(yè)務(wù)相關(guān)的垂直領(lǐng)域開發(fā)者；騰訊Q+以桌面產(chǎn)品的形式接入各類應(yīng)用，構(gòu)建一個互聯(lián)網(wǎng)在線生活的一站式體驗樂園。云平臺形成基礎(chǔ)服務(wù)，為騰訊開發(fā)者提供基礎(chǔ)服務(wù)。Q+所有開發(fā)者iframe托管等系列基礎(chǔ)服務(wù)QQ統(tǒng)一登錄消息推送Q點支付云服務(wù)托管廣告數(shù)據(jù)分析騰訊技術(shù)工程事業(yè)

14、群掌門人：盧山，騰訊公司技術(shù)工程事業(yè)群總裁，集團(tuán)高級執(zhí)行副總裁。2000年加入騰訊，歷任即時通信產(chǎn)品部總經(jīng)理、平臺研發(fā)系統(tǒng)副總裁、運營平臺系統(tǒng)高級副總裁?，F(xiàn)負(fù)責(zé)公司技術(shù)及運營平臺的搭建、搜索相關(guān)產(chǎn)品的技術(shù)研發(fā)與運營等管理工作。技術(shù)工程事業(yè)群：研發(fā)及平臺支撐，未來騰訊業(yè)務(wù)的驅(qū)動力所在。盈利模式：第三方開發(fā)者托管。市場拓展：云平臺職能：研發(fā)：搜索、瀏覽器、地圖、輸入法平臺運營/內(nèi)容敏捷開發(fā)與DevOps相關(guān)概念百度/騰訊組織架構(gòu)與職能阿里運維情況其它公司運維情況 優(yōu)酷土豆美團(tuán)網(wǎng)OSS與自動化系統(tǒng)百度，阿里巴巴，SINA，盛大游戲，小米，趕集，電信企業(yè)IT架構(gòu)浙江移動IT部架構(gòu)上海電信IT部架構(gòu)通用

15、IT參考架構(gòu)內(nèi)容敏捷開發(fā)與DevOps相關(guān)概念百度/騰訊組織架構(gòu)與職能阿里運維情況其它公司運維情況 優(yōu)酷土豆美團(tuán)網(wǎng)OSS與自動化系統(tǒng)百度，阿里巴巴，SINA，盛大游戲，小米，趕集，電信企業(yè)IT架構(gòu)浙江移動IT部架構(gòu)上海電信IT部架構(gòu)通用IT參考架構(gòu)美團(tuán)網(wǎng)美團(tuán)網(wǎng)內(nèi)容敏捷開發(fā)與DevOps相關(guān)概念百度/騰訊組織架構(gòu)與職能阿里運維情況其它公司運維情況 優(yōu)酷土豆美團(tuán)網(wǎng)OSS與自動化系統(tǒng)百度，阿里巴巴，SINA，盛大游戲，小米，趕集，電信企業(yè)IT架構(gòu)浙江移動IT部架構(gòu)上海電信IT部架構(gòu)百度自動化運維企業(yè)級監(jiān)控解決方案隨想/ops_bd/item/78f72f0af1b469d12f4c6bed自動化運維

16、中的關(guān)系管理/ops_bd/item/5918af12c29b7bef746a843c阿里巴巴自動化運維架構(gòu)盛大網(wǎng)絡(luò)盛大網(wǎng)絡(luò)SINA自動化更新系統(tǒng)趕集網(wǎng)自動化發(fā)布系統(tǒng)小米自動化運維小米應(yīng)用部署系統(tǒng)內(nèi)容敏捷開發(fā)與DevOps相關(guān)概念百度/騰訊組織架構(gòu)與職能阿里運維情況其它公司運維情況 優(yōu)酷土豆美團(tuán)網(wǎng)OSS與自動化系統(tǒng)百度，阿里巴巴，SINA，盛大游戲，小米，趕集，電信企業(yè)及通用IT參考架構(gòu)浙江移動IT部架構(gòu)上海電信IT部架構(gòu)通用IT參考架構(gòu)浙江移動信息部架構(gòu)上海電信IT部架構(gòu)企業(yè)信息化部規(guī)劃與標(biāo)準(zhǔn)處應(yīng)用推進(jìn)處系統(tǒng)管理處信息數(shù)據(jù)管理處信息中心移動業(yè)務(wù)支撐中心IT規(guī)劃IT計劃IT標(biāo)準(zhǔn)項目管理IT系統(tǒng)

17、與應(yīng)用管理IT資產(chǎn)實物管理IT網(wǎng)絡(luò)管理統(tǒng)計指標(biāo)管理與分析信息數(shù)據(jù)管理綜合統(tǒng)計管理IT審計與服務(wù)管理綜合辦公室項目管理室管理支撐室數(shù)據(jù)應(yīng)用室需求架構(gòu)室業(yè)務(wù)支撐室綜合辦公室運維監(jiān)控室運維支撐室運維數(shù)據(jù)室系統(tǒng)管理室網(wǎng)絡(luò)終端室基本實現(xiàn)建維分離從按技術(shù)專業(yè)劃分轉(zhuǎn)變?yōu)榘垂ぷ髀毮軇澐謱崿F(xiàn)面向需求部門的統(tǒng)一接口完成面向IT服務(wù)的組織調(diào)整44最佳實踐意義整個集團(tuán)有盡職盡責(zé)，一體化的IT組織，統(tǒng)一向CIO匯報CIO直接向CEO匯報，并參與到企業(yè)規(guī)劃和決策中驅(qū)動整體IT運作和戰(zhàn)略將IT從業(yè)務(wù)支持的角色轉(zhuǎn)型 為業(yè)務(wù)使能者的角色CIO和IT部門在集團(tuán)層面定義IT戰(zhàn)略在業(yè)務(wù)單元層面實施IT戰(zhàn)略確保與整體業(yè)務(wù)目標(biāo)一致，與業(yè)

18、務(wù)需求相關(guān)IT戰(zhàn)略和規(guī)劃在集團(tuán)層面設(shè)計的總體架構(gòu)集團(tuán)發(fā)布的技術(shù)/數(shù)據(jù)標(biāo)準(zhǔn)和指導(dǎo)方針確?？上嗷ゲ僮餍院途S也維護(hù)的便利架構(gòu)和標(biāo)準(zhǔn)應(yīng)用開發(fā)和運營應(yīng)被分離新系統(tǒng)的維護(hù)中，與系統(tǒng)所有者的保持近距離接觸舊系統(tǒng)進(jìn)行遠(yuǎn)程維護(hù)為效率的提高而集中開發(fā)全公司范圍內(nèi)的應(yīng)用新應(yīng)用不穩(wěn)定，經(jīng)常要求排除故障，因此與系統(tǒng)所有者保持接近以確保反饋獲得協(xié)同效應(yīng)應(yīng)用開發(fā)與維護(hù)可能的話在公司進(jìn)行合并獲得規(guī)模經(jīng)濟(jì)和協(xié)同效應(yīng)基礎(chǔ)設(shè)施/運營依靠應(yīng)用，但可能的話在集團(tuán)層面進(jìn)行管理更強的談判能力提高戰(zhàn)略性采購供應(yīng)商管理IT管理業(yè)界最佳實踐IT中心 - IT總監(jiān)系統(tǒng)開發(fā)部測試網(wǎng)絡(luò)管理部數(shù)據(jù)庫團(tuán)隊網(wǎng)絡(luò)團(tuán)隊系統(tǒng)團(tuán)隊基礎(chǔ)設(shè)施運維異地支持PC前臺支持 (Level 2)服務(wù)臺 (Level 1)應(yīng)用軟件支持 (Level 2)技術(shù)支持服務(wù)引進(jìn)或開發(fā)實施行業(yè)咨詢