竹光螞蟻金服移動端高可用技術實踐-21頁

1、螞蟻金服移動端高可用技術實踐螞蟻金服高級技術專家竹光每日免費獲取報告1、每日微信群內分享5+最新重磅報告；2、每日分享當日華爾街日報、3、每周分享經濟學人4、每月匯總500+份當月重磅報告（增值服務）；掃一掃二維碼關注公號回復：研究報告加入“起點財經”微信群。 2015年，加入支付寶。 參與多次雙十一、雙十二、春節(jié)紅包大促的客戶端技術保障。 工作職責 負責支付寶APP的性能穩(wěn)定性和移動端高可用 在釘釘上掃一掃加我1億級APP的可用性挑戰(zhàn)2APP線上運維的發(fā)展和演進3移動端高可用的定義、目標、核心打法4支付寶的移動端高可用技術實踐APP的可用性APP使用行為閃退ANR啟動不了可用打不開頁面 支付

2、失敗 億級APP的可用性挑戰(zhàn)用戶環(huán)境業(yè)務發(fā)展開發(fā)模式質量風險團隊組織移動端可用性運維體系的發(fā)展歷程1.0閃退監(jiān)控2.0穩(wěn)定性監(jiān)控體系3.0移動端高可用聚合展示診斷信息上報 分析解決客戶端監(jiān)控閃退 發(fā)布新版本 動態(tài)修復診斷日志流量、電量內存、存儲穩(wěn)定性監(jiān)控體系閃退卡死高可用在移動端的重新定義通過專門的設計、優(yōu)化和整套技術體系，保持用戶遇到的不可用總次數(shù)很低，保持APP的高度可用性。通過盡量縮短因日常維護操作（計劃）和突發(fā)的系統(tǒng)（非計劃） 所導致的停機時間，以提高系統(tǒng)和應用的可用性。 移動端高可用的目標異常感知靈敏度線上問題影響人數(shù)到達500 人之前感知03可用率 02可用次數(shù)在使用次數(shù)中占比99

3、.99%APP可用率：4個9 問題覆蓋率不可用問題類型覆蓋超過90% 01修復速度P1故障1小時內修復04移動端高可用的核心打法 可用性監(jiān)控 高靈敏 移動端高可用技術體系 故障演練 快速修復 支付寶的移動端高可用技術實踐統(tǒng)一演練故障模擬線上演練攻防對抗客戶端可用性監(jiān)控埋點SDK 穩(wěn)定性業(yè)務不可用統(tǒng)一管控高可用技術體系容災平臺熱修復自動恢復定向修復快速回滾監(jiān)控報警平臺 高靈敏系統(tǒng)模型特征監(jiān)控報警體系發(fā)布中心客戶端可用性監(jiān)控埋點上報問題采集統(tǒng)一管控 實時性 準確率 到達率 情況保障 整體性 全面性 擴展性 穩(wěn)定性 業(yè)務不可用 多種埋點手段 監(jiān)控盲點 高靈敏度系統(tǒng)模型內容高可用容災平臺內容高可用容災

4、過程臟數(shù)據安裝問題診斷信息定位問題本地容災非變更故障代碼bug動態(tài)修復故障解決故障不可回滾緊急發(fā)布發(fā)布中心定位誘因變更故障可回滾回滾高可用的動態(tài)修復體系發(fā)布平臺 修復包管理推拉結合特征匹配智能修復快速覆蓋下發(fā)通道 高實時性高可靠性獨立進程修復手段 hotpatchCMD動態(tài)部署模塊配置服務高可用實戰(zhàn)經驗成功案例某圈子業(yè)務下發(fā)錯誤菜單配置10分鐘后閃退報警負責人收到報警快速拉群處理10分鐘后完成配置回滾，止血總結：發(fā)現(xiàn)及時，解決的快，影響用戶少。失敗案例大促開啟限流，客戶端bug導致頁面黑屏黑屏數(shù)量負責人拉群處理， 排查原因1小時后暫停限流止血大漲，三天后發(fā)現(xiàn)。總結：發(fā)現(xiàn)晚，因為不可用問題沒覆蓋到；影響用戶數(shù)量未知，決策慢。故障演練避免故障的最好方式就是不斷演練故障線上演模擬故障攻防對