樂道1號(hào)店運(yùn)維云平臺(tái)介紹

1、樂道1號(hào)店運(yùn)維云平臺(tái)介紹技術(shù)創(chuàng)新，變革未來(lái)Agenda123四環(huán)一庫(kù)的深度解讀樂道的產(chǎn)品架構(gòu)及核心價(jià)值樂道的演變過程及核心功能私有云平臺(tái)的演變過程純手工標(biāo)準(zhǔn)化自動(dòng)化平臺(tái)化CMDB樂道首頁(yè)樂道的核心功能 - 四環(huán)一庫(kù)CMDB設(shè)備管理 裝機(jī)管理 配置管理配置管理 服務(wù)部署 服務(wù)注冊(cè)IDC閉環(huán)部署閉環(huán)監(jiān)控閉環(huán)監(jiān)控系統(tǒng) 事件管理 報(bào)警系統(tǒng)業(yè)務(wù)閉環(huán)持續(xù)集成 配置中心 發(fā)布系統(tǒng)四環(huán)一庫(kù) - CMDBCMDB基礎(chǔ)設(shè)施 系統(tǒng)&配置 組織&業(yè)務(wù)四環(huán)一庫(kù) - IDC閉環(huán)IDC閉環(huán)設(shè)備管理 裝機(jī)管理 配置管理四環(huán)一庫(kù) - 部署閉環(huán)部署閉環(huán)配置管理 服務(wù)部署 服務(wù)注冊(cè)四環(huán)一庫(kù) - 業(yè)務(wù)閉環(huán)業(yè)務(wù)閉環(huán)持續(xù)集成 配置中心

2、發(fā)布系統(tǒng)四環(huán)一庫(kù) - 監(jiān)控閉環(huán)監(jiān)控閉環(huán)監(jiān)控系統(tǒng) 事件管理 報(bào)警系統(tǒng)Agenda123四環(huán)一庫(kù)的深度解讀樂道的產(chǎn)品架構(gòu)及核心價(jià)值樂道的演變過程及核心功能四環(huán)一庫(kù) - IDC閉環(huán)IDC閉環(huán)監(jiān)控閉環(huán)IDC管理自動(dòng)化配置自動(dòng)化部署閉環(huán)裝機(jī)自動(dòng)化業(yè)務(wù)閉環(huán)裝機(jī)管理的演變過程物理機(jī)IPMICobblerPXEAPI物理機(jī)命令行-GUI虛擬機(jī)CMDB網(wǎng)絡(luò)安裝遠(yuǎn)程控制統(tǒng)一管理自動(dòng)更新?lián)肀г艻DC_A主機(jī)Puppet AgentZabbix ServerIDC_B主機(jī)Puppet AgentZabbix Server配置管理Puppet Masterfile - zabbix_agentd.confpackage

3、 - zabbix-agentCMDB獲取詳細(xì)信息(用于factor)IDC管理系統(tǒng)設(shè)備管理宿主機(jī)管理裝機(jī)管理資源池裝機(jī)初始化創(chuàng)建虛擬機(jī)Hypervisor配置管理設(shè) 備 錄 入應(yīng)用運(yùn)維IDC運(yùn)維IDC管理系統(tǒng)四環(huán)一庫(kù) - 部署閉環(huán)IDC閉環(huán)監(jiān)控閉環(huán)服務(wù)注冊(cè)自動(dòng)化服務(wù)部署自動(dòng)化部署閉環(huán)業(yè)務(wù)閉環(huán) 配置管理可視化主機(jī)狀態(tài)空閑已廢棄預(yù)上架 中維護(hù)中使用中維護(hù)注銷服務(wù)屏蔽監(jiān)控維護(hù)完成配置管理部署服務(wù)注冊(cè)服務(wù)下架報(bào)廢刪除監(jiān)控釋放IP清理設(shè)備下架回收開啟監(jiān)控清理日志清理服務(wù)清理代碼報(bào)廢刪除監(jiān)控釋放IP清理設(shè)備上架應(yīng)用運(yùn)維一 鍵 上 架一鍵上架通用文件管理系統(tǒng)通用文件管理系統(tǒng)通用文件 管理系統(tǒng)GitLabP

4、uppet Master主機(jī)Puppet Agent1.git push2.web hook3.api4.git pull5.puppet agent服務(wù)自動(dòng)部署發(fā)布系統(tǒng)配置中心待上架主機(jī)主機(jī)管理MQ版本倉(cāng)庫(kù)產(chǎn)生消息消費(fèi)消息推送代碼拉取配置服務(wù)自動(dòng)注冊(cè)ZooKeeper服務(wù)調(diào)用者服務(wù)調(diào)用者服務(wù)提供者監(jiān)聽監(jiān)聽服務(wù)注冊(cè)(服務(wù)啟動(dòng))服務(wù)注銷(服務(wù)停止)etcd應(yīng)用(服務(wù)調(diào)用者)LBLBconfdconfd監(jiān)聽監(jiān)聽服務(wù)注冊(cè)(主機(jī)上架)服務(wù)注銷(主機(jī)下架)應(yīng)用層服務(wù)層四環(huán)一庫(kù) - 業(yè)務(wù)閉環(huán)IDC閉環(huán)部署閉環(huán)業(yè)務(wù)閉環(huán)監(jiān)控閉環(huán)進(jìn)度控制降低風(fēng)險(xiǎn)無(wú)人值守編譯 打包代碼 倉(cāng)庫(kù)持續(xù)集成預(yù)發(fā)布 環(huán)境生產(chǎn) 環(huán)境發(fā)布系統(tǒng)

5、預(yù)發(fā)布 環(huán)境生產(chǎn) 環(huán)境配置中心生產(chǎn)環(huán)境流程管理配置代碼發(fā)布流程發(fā)布平臺(tái)無(wú)人發(fā)布生產(chǎn)環(huán)境自動(dòng)化階段化人工單階段發(fā)布無(wú)人發(fā)布無(wú)人發(fā)布乘客業(yè)務(wù)線一趟列車一次發(fā)布車站發(fā)布系統(tǒng)時(shí)刻表上線周期訂票上線申請(qǐng)檢票上線審核專車緊急上線無(wú)人發(fā)布的整體架構(gòu)SCM配置代碼配置中心持續(xù)集成8.代碼發(fā)布7.代碼獲取預(yù)發(fā)布環(huán)境6.配置拉取產(chǎn)環(huán)境生1.提交審核3.審核發(fā)布系統(tǒng)4.生成發(fā)布5.發(fā)布流程管理2.上線申請(qǐng)配置 客戶端業(yè)務(wù)開發(fā)灰度發(fā)布生產(chǎn)環(huán)境自動(dòng)化階段化人工單階段發(fā)布無(wú)人發(fā)布灰度發(fā)布灰度發(fā)布的訪問控制服務(wù)提供者服務(wù)提供者服務(wù)提供者應(yīng)用(服務(wù)調(diào)用者)應(yīng)用 (服務(wù)調(diào)用者)應(yīng)用(服務(wù)調(diào)用者)服務(wù)層ZK集群LB發(fā)布系統(tǒng)HC/

6、調(diào)度服務(wù)發(fā)現(xiàn)服務(wù)注冊(cè)灰度控制應(yīng)用層應(yīng)用(服務(wù)調(diào)用者)服務(wù)提供者進(jìn)度控制待發(fā)布已作廢發(fā)布中已發(fā)布階段N已 完成回滾中回滾暫停已回滾作廢發(fā)布完成暫停回滾完成暫停繼續(xù) 回滾灰度YYN最后 階段N階段等待繼續(xù)發(fā)布發(fā)布暫?；貪L進(jìn)度控制待發(fā)布已作廢發(fā)布中已發(fā)布階段N已 完成回滾中回滾暫停已回滾作廢發(fā)布完成停回滾完成暫停繼續(xù) 回滾灰度YYN最后 階段N階段等待繼續(xù)暫發(fā)布發(fā)布暫?；貪L四環(huán)一庫(kù) - 監(jiān)控閉環(huán)IDC閉環(huán)部署閉環(huán)業(yè)務(wù)閉環(huán)監(jiān)控閉環(huán)準(zhǔn)確性及時(shí)性全面性監(jiān)控整體架構(gòu)負(fù)載均衡交換機(jī)服務(wù)器路由器存儲(chǔ)設(shè)備NginxRedisDBTomcatApp 1App NApp 2健康數(shù)據(jù)日志數(shù)據(jù)服務(wù)數(shù)據(jù)業(yè)務(wù)數(shù)據(jù)系統(tǒng)數(shù)據(jù)SQ

7、LLogAgentAPIZabbixZabbix基礎(chǔ)監(jiān)控日志監(jiān)控大屏監(jiān)控業(yè)務(wù)監(jiān)控?cái)?shù) 據(jù) 采 集 層監(jiān) 控 報(bào) 警 層數(shù) 據(jù) 展 示 層監(jiān)控系統(tǒng)監(jiān)控項(xiàng)配置報(bào)警系統(tǒng)短信/語(yǔ)音/郵件事件管理屏蔽/去噪 降維/合并網(wǎng)絡(luò)監(jiān)控監(jiān)控的全面性監(jiān)控的及時(shí)性Zabbix ServerZabbix ProxyZabbix ProxyZabbix AgentZabbix AgentZabbix AgentZabbix Agent基礎(chǔ)監(jiān)控Storm日志監(jiān)控Kafka原始日志ElasticSearch圖表、報(bào)警訪問日志應(yīng)用日志監(jiān)控項(xiàng)的分類可 用 性穩(wěn) 定 性外部?jī)?nèi)部負(fù)載網(wǎng)卡流量CPU使用率進(jìn)程端口PingHealthCh

8、eck接口調(diào)用量接口錯(cuò)誤數(shù)接口響應(yīng)時(shí)間監(jiān)控的準(zhǔn)確性 - 系統(tǒng)故障降維核心交換機(jī)接入交換機(jī)物理機(jī)虛擬機(jī)TomcatApp接入交換機(jī)物理機(jī)虛擬機(jī)Tomcat AppMonitorpingpingporthcpingping監(jiān)控的準(zhǔn)確性 - 系統(tǒng)故障降維監(jiān)控對(duì)象監(jiān)控降維過程AppApp異常-Tomcat異常-虛擬機(jī)異常-物理機(jī) 異常-接入交換機(jī)異常-接入交換機(jī)異常TomcatTomcat異常-虛擬機(jī)異常-物理機(jī)異常-接入交換機(jī)異常-接入交換機(jī)異常虛擬機(jī)虛擬機(jī)異常-物理機(jī)異常-接入交換機(jī)異常-接入交換機(jī)異常物理機(jī)物理機(jī)異常-接入交換機(jī)異常-接入交換機(jī)異常接入交換機(jī)接入交換機(jī)異常-接入交換機(jī)異常核心交換機(jī)接入交換機(jī)異常接 入 交 換 機(jī) 異 常遠(yuǎn)近監(jiān)控的準(zhǔn)確性 - 應(yīng)用故障降維Service BService CService Ahc監(jiān)控對(duì)象監(jiān)控降維過程Service AService A異常-Service B異常-Service C異常Service A異常-Service C異常Service BService B異常-Service C異常Service CService C異常hchcService C異常Agenda123四環(huán)一庫(kù)的深度解讀樂道的產(chǎn)品架構(gòu)及核心