眾安銀行敏捷研發(fā)體系建設與提效的理念與實踐-唐嘉龍

眾安國際測試架構師現(xiàn)任眾安銀行首席測試架構師，負責眾安銀行整體測試架構體系建設，同時負責零售銀行促活拉新活動、智能營銷平臺、客戶與運營等業(yè)務的整體質量保障工作。曾就職于騰訊FIT金融科技業(yè)務線，負責微信支付的跨境收單支付、國際清結算及微信分付信貸管理等業(yè)務質量管理工作，同時也對EKYC中臺、風控證件鑒偽、AI量化投資模型等金融領域AI算法應用有獨到見解。曾發(fā)表多篇AI模型測試相關專利、并獲得騰訊微創(chuàng)新獎。AboutZA&&600K300KStrengtheningofdigitalfinanceproductsuiteAboutZA&&600K300KStrengtheningofdigitalfinanceproductsuite 2021Sep-21Dec-21Mar-22Jun-22Dec-22Mar-23Jun23Sep-23Mar-24背景-企業(yè)數(shù)字化轉型敏捷之所以更快，根本原因在于持續(xù)迭代和驗證節(jié)省了大量不必要的浪費和返工背景-研發(fā)流程中常見問題業(yè)務敏捷業(yè)務敏捷需求過多，高優(yōu)先級需求快速交付，快速驗證需求過多，高優(yōu)先級需求快速交付，快速驗證環(huán)境管理環(huán)境管理環(huán)境多復雜性上升，一致性難以保證，交付慢代碼評審，單元測試，持續(xù)集成環(huán)境多復雜性上升，一致性難以保證，交付慢部署管理技術債務部署管理提交代碼質量差系統(tǒng)架構設計受限，潛在的提交代碼質量差背景-眾安國際研效體系建設之旅智能質效診斷最佳實踐智能質效診斷最佳實踐度量可視化工具自動化研發(fā)過程管理線上管理研發(fā)過程管理線上管理啟動單測、靜態(tài)掃描卡點啟動單測、靜態(tài)掃描卡點自研平臺工程1.0落地啟動研發(fā)過程度量分析(質效)平臺工程1.0最佳實踐打造自驅式質量管理平臺工程2.0項目啟動引入開源研發(fā)工具生態(tài)搭建自動化測試框架體系啟動自建持續(xù)集成流水線項目搭建線上管理流程體系引入線上管理工具啟動線上度量分析(質效) ?眾安CICD交付流水線架構設計?AutoQE的落地實踐CodeCodeMRCodeMRCodeMRGitLabCIserver集成腳本developerTester jira l系統(tǒng)監(jiān)控 jira l系統(tǒng)監(jiān)控 AutoQEAutoQEJira工作流Moray工作流AutoQEAutoQEAutoQEAutoQECI卡點AutoQE卡點值檢查AutoQE門禁CI卡點AutoQE卡點值檢查AutoQE門禁?眾安CICD交付流水線架構設計?流水線之AutoQE的理念?AutoQE的落地實踐2、流水線部署方案1、流水線平臺工程方案設計4、流水線自動化執(zhí)行優(yōu)化3、流水線環(huán)境配置管理5、流水線自動化用例管理1.開發(fā)環(huán)境2.AutoQE環(huán)境：使用develop分支，CI自動部署，并執(zhí)行自動化測試用例3.SIT環(huán)境：使用release分支部署，部署后打sittag4.UAT環(huán)境：基于sittag部署，部署后打uattag：基于uattag部署，上線后打生CutyyyymmddTagAutoQE門禁AutoQE門禁AutoQE門禁 ;;持續(xù)集成流水線平臺工程2.0-簡版CutyyyymmddTagAutoQE門禁AutoQE門禁 TEST TESTdeveloper持續(xù)集成流水線平臺工程2.0-完整版AutoQE門禁AutoQE門禁 SIT/UATfeature TEST SIT/UATfeature跨迭代feature TEST developAutoQE門禁AutoQE門禁 SIT/UATfeature TEST SIT/UATfeature跨迭代feature TEST develop TEST TEST 1、緩存集中部署，減少發(fā)布單量級2、緩存區(qū)所有部署完畢后開始執(zhí)行自動化，避免環(huán)境依賴干擾地鐵：準點發(fā)車地鐵：準點發(fā)車1、實時觸發(fā)部署AutoQE2、K8s健康檢查、優(yōu)雅終止來實現(xiàn)應用無感切換跑車：上車即走跑車：上車即走時間窗耗時=CI單測掃描+autoqe自動化+流程等待耗時優(yōu)雅發(fā)布耗時=CI單測掃描+autoqe自動化各業(yè)務線值班跟進各業(yè)務線值班跟進詳細記錄問題原因解決方案劃分四個階段的值?A1全量覆蓋率：40%->45%->50%->60%?A2全量覆蓋率：20%->25%->30%->40%SQL即代碼迭代版本：文件夾命名區(qū)分環(huán)境部署：文件夾命名區(qū)分執(zhí)行管理SQL即代碼迭代版本：文件夾命名區(qū)分環(huán)境部署：文件夾命名區(qū)分執(zhí)行管理：已部署過后臺打標配置即代碼迭代版本：文件夾命名區(qū)分環(huán)境部署：文件名后綴區(qū)分執(zhí)行管理：已部署過后臺打標rApollowebApollowebAdminservice ConfigservicebankservicesAdminservice ConfigserviceAdminservice ConfigservicebankservicesAdminservice ConfigservicebankservicesAdminservice Configservicebankservices bankAdminservice ConfigservicebankservicesAdminservice ConfigserviceAdminservice ConfigservicebankservicesAdminservice ConfigservicebankservicesAdminservice Configservicebankservices bankservices AdminAdminservice ConfigConfigservicebankservicesbankservicesCutyyyymmddTag AutoApollo配置中心AutoApollo配置中心標準化用例生成版本用例管理合入主干…版本合入主干…基準用例庫接口變更感知新特性用例編寫MR主干集成測試&Auto新特性用例編寫MR主干集成測試&AutoQE使用JiraA創(chuàng)建分支集成測試&AutoQE使用!自動化生成與手工編寫結合!自動化生成與手工編寫結合數(shù)據(jù)驅動數(shù)據(jù)驅動JiraJiraB新特性用例集成測試&創(chuàng)建分支編寫AutoQE使用爭200500分0單系統(tǒng)自動化案例優(yōu)化效果（1400cases）。優(yōu)化前c插件優(yōu)化。啟用并行風控優(yōu)化did優(yōu)?眾安CICD交付流水線架構設計?AutoQE的落地最佳實踐部署成功通知部署失敗通知自動化門禁通過自動化門禁未通過1、聯(lián)調配置誤提交2、消息堆積導致性能瓶頸3、持續(xù)執(zhí)行導致OOMAutoQE測試自動化覆蓋率面板應用持續(xù)構建面板單測靜態(tài)掃描跟蹤面板應用構建詳情面板?眾安CICD交付流水線架構設計?流水線之AutoQE的治理理念?AutoQE的落地實踐?成效與展望CICD質量門禁3.213.215.155.157.104.245.304.24AveragetimeforAutoqeCaseExecution2502001、需求吞吐量穩(wěn)定上升2、生產問題數(shù)持續(xù)下降3、系統(tǒng)可用性2502001、需求吞吐量穩(wěn)定上升2、生產問題數(shù)持續(xù)下降3、系統(tǒng)可用性4個9500220/5035265202020212022