光載無限監(jiān)控體系的變革與演進(jìn)

光載無限監(jiān)控體系的變革與演進(jìn)2016/04/09在開始之前?設(shè)備監(jiān)控、資源監(jiān)控、網(wǎng)絡(luò)監(jiān)控、服務(wù)監(jiān)控、網(wǎng)站監(jiān)控、業(yè)務(wù)監(jiān)控、性能監(jiān)控、應(yīng)用性能管理（APM）、應(yīng)用程序監(jiān)控、安全監(jiān)控目錄????過去的監(jiān)控系統(tǒng)?我們?yōu)槭颤N選擇了Open-Falcon?光載無限如何玩轉(zhuǎn)Open-Falcon?總結(jié)過去的監(jiān)控系統(tǒng)?4過去的監(jiān)控系統(tǒng)????難以擴(kuò)展?二次開發(fā)難度高?多套系統(tǒng)，不同的操作方式?Zabbix需要管理不同的配置，系統(tǒng)間同步??難以保證監(jiān)控全覆蓋WhatsupGold?Cacti5需求總結(jié)?統(tǒng)一監(jiān)控工具，降低維護(hù)以及排查的成本??

降低值班人員的學(xué)習(xí)成本與技術(shù)門檻，將解決問題的經(jīng)驗(yàn)積累到系統(tǒng)上?提高監(jiān)控系統(tǒng)的效能、可用性、用戶體驗(yàn)???高可擴(kuò)展性??

目標(biāo)至少支持一萬臺服務(wù)器的規(guī)模?能滿足內(nèi)部的二次定制需求?6尋找開源解決方案?7有這麼多的開源監(jiān)控系統(tǒng)...Zabbix,Nagios,Cacti,WhatsupGOLD,Sensu,

Open-Falcon,

Prometheus,

Flapjack,Bonsun,OMD,Check_MK,graphite,collectd,Zenoss,monit,Munin,OpenNMS,Ganglia,Consul...8也有這麼多的商業(yè)監(jiān)控系統(tǒng)...NewRelic,LogicalMonitor,DataDog,Splunk,監(jiān)控寶,Elastic-Marvel,Librato,Stackdriver...9我們?nèi)绾芜x擇開源項(xiàng)目????現(xiàn)代化的設(shè)計與良好的架構(gòu)?活躍的社區(qū)與大公司的支持?模塊化、可擴(kuò)展性高，易於二次開發(fā)??可以很容易地利用既有的ZabbixScript或Plugin??滿足光載無限的業(yè)務(wù)需求??網(wǎng)路質(zhì)量、7x24小時值班人員、等等10依照這標(biāo)準(zhǔn)，剩下...???Sensu?Consul??

2011??

2013??HasiCorp??Heavy-Water??Prometheus?

Open-Falcon???2012?2015??

SoundCloud?

Xiaomi11我們?yōu)槭颤N選擇Open-Falcon???????系統(tǒng)設(shè)計簡潔，易於二次開發(fā)?分佈式組件，水平擴(kuò)展容易，支持量級高?高效數(shù)據(jù)展示與查詢?Golang二進(jìn)制部署方便?完善的基礎(chǔ)採集項(xiàng)?人性化的告警策略與模板設(shè)計12Open-Falcon的問題13Op?????????G14Open-Falcon的問題?????????系統(tǒng)不易分發(fā)?安全性考量不到位?沒有通盤考慮的權(quán)限設(shè)計?複雜度稍高?每個

Graph

實(shí)例均是單點(diǎn)?Graph

擴(kuò)容有損?上下游組件沒有

naming?報警沒有入庫?報警現(xiàn)場沒有保存15二次開發(fā)Open-Falcon?16玩轉(zhuǎn)Open-Falcon???????Container/MonitoringasaService?安全性補(bǔ)強(qiáng)?用戶界面改善與體驗(yàn)優(yōu)化?CMDB與Open-Falcon結(jié)合?運(yùn)維內(nèi)部接口適配?後端模塊統(tǒng)一與簡化?CDN網(wǎng)絡(luò)質(zhì)量監(jiān)測17我們是這麼看待Open-Falcon的UICoreAux.Aux.storagenoti?cationAgent18Enhanced?DashboardCMDBGrafana?Dashboard?EnhancedQueryInfluxDBContainerasaService??Open-Falcon所有組件容搭配Docker-Swarm做資20安全性補(bǔ)強(qiáng)??SSO單一登入?Grafana

與

Open-Falcon222的賬號整合SingleSign-OnDashboard

Portal

UICFE

Grafana21用戶界面改善與體驗(yàn)優(yōu)化（1/4）??統(tǒng)一入口不再迷失?加入側(cè)邊欄、導(dǎo)覽列2用戶界面改善與體驗(yàn)優(yōu)化（1/4）??探索趨勢圖以外的可能?Grafana與Open-Falcon的深度整合23用戶界面改善與體驗(yàn)優(yōu)化（3/4）?IsomorphicWebDesign????單頁式設(shè)計?服務(wù)端渲染?前端組件統(tǒng)一24用戶界面改善與體驗(yàn)優(yōu)化（4/4）25CMDB整合（1/2）???支持以內(nèi)部BOSS賬號登入?設(shè)備列表跳轉(zhuǎn)至概覽頁面?資產(chǎn)信息同步26CMDB整合（2/2）?CMDB統(tǒng)一管理服務(wù)與角色，專用接口替換模板變量27運(yùn)維內(nèi)部接口適配?協(xié)助運(yùn)維更快上手??

Screen,Template,HostGroup的初始範(fàn)本??Zabbix腳本移植、提供插件範(fàn)本??Agent安裝流程與配置簡化??如：RPM包安裝、/etc/init.d啟動腳本???支持ZabbixAPI接口?支持以HostGroup為單位查找，設(shè)備同步自CMDB28網(wǎng)路質(zhì)量監(jiān)測?點(diǎn)對點(diǎn)的網(wǎng)絡(luò)指標(biāo)數(shù)據(jù)採集29網(wǎng)路質(zhì)量監(jiān)測的挑戰(zhàn)????多維度??

機(jī)房、省份、城市、地區(qū)、運(yùn)營商?批次計算??平均值、最大/最小值、標(biāo)準(zhǔn)差?不同的分組：??

內(nèi)網(wǎng)、外網(wǎng)、平臺?向量??

方向與大小30架構(gòu)上的調(diào)整OWLGrafanaMySQLRedis…OWLNQM31網(wǎng)路質(zhì)量監(jiān)測（1/3）32網(wǎng)路質(zhì)量監(jiān)測（2/3）33後端模塊統(tǒng)一與簡化（1/2）?

借鑒

Consol與

Docker-Compose??

簡化服務(wù)端維護(hù)與部署的負(fù)擔(dān)??

配置檔統(tǒng)一管理??打造周邊工具鏈??

docker,

vagrant,

test,

scripts,

make?集中管理，聚人氣??代碼、文檔、問題、反饋、PR??

★399

agent

(~2016/04/09)??

★262of-release(~2016/04/09)34後端模塊統(tǒng)一與簡化（2/2）UIDockerBackendModulesDriver35總結(jié)36回顧Open-Falcon的問題?????????系統(tǒng)不易分發(fā)?安全性考量不到位?沒有通盤考慮的權(quán)限設(shè)計?複雜度稍高?每個

Graph

實(shí)例均是單點(diǎn)?Graph