基于指標(biāo)平臺的智能分析及零售金融行業(yè)實(shí)踐

基于指標(biāo)平臺的智能分析及零售/金融行業(yè)實(shí)踐杜永青數(shù)勢科技大數(shù)據(jù)產(chǎn)品負(fù)責(zé)人DataFunSummit#20232趨勢與挑戰(zhàn)：企業(yè)數(shù)據(jù)民主化&價值化指標(biāo)平臺：企業(yè)數(shù)據(jù)智能應(yīng)用新范式領(lǐng)先實(shí)踐：零售及金融行業(yè)指標(biāo)平臺實(shí)踐案例未來展望：基于大模型的智能分析未來32020+2000s–2020sTencen騰訊數(shù)據(jù)紅利時代流量紅利時代人口紅利時代數(shù)據(jù)紅利時代已經(jīng)到來2020+2000s–2020sTencen騰訊數(shù)據(jù)紅利時代流量紅利時代人口紅利時代1970s–2000s8億+勞動人口、2億高等教育人才移動互聯(lián)網(wǎng)浪潮下的10億網(wǎng)民4數(shù)據(jù)分析工具數(shù)據(jù)應(yīng)用核心價值數(shù)據(jù)消費(fèi)者業(yè)務(wù)決策者財務(wù)等數(shù)據(jù)“依賴者”+BI分析師+業(yè)務(wù)分析師+業(yè)務(wù)全員+上下游合作伙伴過往當(dāng)前未來WhatWhat數(shù)據(jù)分析工具數(shù)據(jù)應(yīng)用核心價值數(shù)據(jù)消費(fèi)者業(yè)務(wù)決策者財務(wù)等數(shù)據(jù)“依賴者”+BI分析師+業(yè)務(wù)分析師+業(yè)務(wù)全員+上下游合作伙伴過往當(dāng)前未來WhatWhat&WhyWhat&Why&How數(shù)倉+BI指標(biāo)平臺+Copilot指標(biāo)化經(jīng)營的益處以指標(biāo)為基礎(chǔ)構(gòu)建業(yè)務(wù)統(tǒng)一度量和數(shù)字孿生56數(shù)據(jù)方面業(yè)務(wù)方面得不到IT及時支持的業(yè)務(wù)人員及分析師數(shù)據(jù)方面業(yè)務(wù)方面得不到IT及時支持的業(yè)務(wù)人員及分析師分身乏術(shù)的數(shù)據(jù)工程師7趨勢與挑戰(zhàn)：企業(yè)數(shù)據(jù)民主化&價值化指標(biāo)平臺：企業(yè)數(shù)據(jù)智能應(yīng)用新范式領(lǐng)先實(shí)踐：零售及金融行業(yè)指標(biāo)平臺實(shí)踐案例未來展望：基于大模型的智能分析未來8指標(biāo)體系指標(biāo)應(yīng)用建立指標(biāo)平臺統(tǒng)一服務(wù)各業(yè)務(wù)應(yīng)用端三位一體的數(shù)據(jù)智能應(yīng)用新范式指標(biāo)平臺指標(biāo)平臺-指標(biāo)體系-指標(biāo)應(yīng)用：數(shù)據(jù)智能應(yīng)用新范式指標(biāo)體系指標(biāo)應(yīng)用建立指標(biāo)平臺統(tǒng)一服務(wù)各業(yè)務(wù)應(yīng)用端三位一體的數(shù)據(jù)智能應(yīng)用新范式指標(biāo)平臺9…產(chǎn)品定位核心優(yōu)勢…產(chǎn)品定位核心優(yōu)勢數(shù)據(jù)應(yīng)用表n數(shù)據(jù)應(yīng)用表1事實(shí)維度寬表數(shù)據(jù)集1數(shù)據(jù)集2具 數(shù)據(jù)上傳維度維度寬表維度表事實(shí)明細(xì)表數(shù)據(jù)應(yīng)用表2帶有維度的輕度匯總表數(shù)據(jù)數(shù)據(jù)應(yīng)用表3事實(shí)明細(xì)表帶有維度的輕度匯總表屏維度表數(shù)據(jù)集3現(xiàn)狀2、資源成本高，數(shù)據(jù)搬運(yùn)次數(shù)多，計算存儲冗余，應(yīng)用端有3、指標(biāo)口徑管理成本高，口徑封裝在層層管道中，數(shù)據(jù)團(tuán)隊管控3、數(shù)據(jù)管理和應(yīng)用分離數(shù)據(jù)應(yīng)用表n數(shù)據(jù)應(yīng)用表1事實(shí)維度寬表數(shù)據(jù)集1數(shù)據(jù)集2具 數(shù)據(jù)上傳維度維度寬表維度表事實(shí)明細(xì)表數(shù)據(jù)應(yīng)用表2帶有維度的輕度匯總表數(shù)據(jù)數(shù)據(jù)應(yīng)用表3事實(shí)明細(xì)表帶有維度的輕度匯總表屏維度表數(shù)據(jù)集3現(xiàn)狀2、資源成本高，數(shù)據(jù)搬運(yùn)次數(shù)多，計算存儲冗余，應(yīng)用端有3、指標(biāo)口徑管理成本高，口徑封裝在層層管道中，數(shù)據(jù)團(tuán)隊管控3、數(shù)據(jù)管理和應(yīng)用分離，應(yīng)用端有自己的和管理效率低下 原始數(shù)據(jù)表1 原始數(shù)據(jù)表3 原始數(shù)據(jù)表n原始數(shù)據(jù)表2湖 原始數(shù)據(jù)表1維度表 原始數(shù)據(jù)表n維度表事實(shí)明細(xì)表原始數(shù)據(jù)表3事實(shí)明細(xì)表原始數(shù)據(jù)表2 原始數(shù)據(jù)表1維度表 原始數(shù)據(jù)表n維度表事實(shí)明細(xì)表原始數(shù)據(jù)表3事實(shí)明細(xì)表原始數(shù)據(jù)表2規(guī)范化加工原子指標(biāo)、維度等積木式組裝派生和衍生指標(biāo)數(shù)據(jù)湖數(shù)據(jù)倉庫DWD指標(biāo)平臺基于指標(biāo)的下一代BI分析?指標(biāo)平臺中標(biāo)準(zhǔn)化指標(biāo)直接選取使用，派生和衍生指標(biāo)無需寫SQL也可以自助配置?去除數(shù)據(jù)集和字段，直接用封裝好口徑信息的指標(biāo)配報表，過濾條件等信息都會反寫到指標(biāo)口徑信息上，保證口徑清晰一致基于標(biāo)準(zhǔn)化指標(biāo)拖拉拽配置指標(biāo)呈現(xiàn)支付金額230,000PV（w）1,500支付單量2,240退款金額4,500毛利33,000＃支付金額＃支付單量＃退款金額＃瀏覽量T渠道T省份支付金額（求和）23日期（年月日）渠道（線上）結(jié)果基于指標(biāo)的下一代BI分析?指標(biāo)平臺中標(biāo)準(zhǔn)化指標(biāo)直接選取使用，派生和衍生指標(biāo)無需寫SQL也可以自助配置?去除數(shù)據(jù)集和字段，直接用封裝好口徑信息的指標(biāo)配報表，過濾條件等信息都會反寫到指標(biāo)口徑信息上，保證口徑清晰一致基于標(biāo)準(zhǔn)化指標(biāo)拖拉拽配置指標(biāo)呈現(xiàn)支付金額230,000PV（w）1,500支付單量2,240退款金額4,500毛利33,000＃支付金額＃支付單量＃退款金額＃瀏覽量T渠道T省份支付金額（求和）23日期（年月日）渠道（線上）結(jié)果?新需求一般都需要構(gòu)建新數(shù)據(jù)集，不管是從數(shù)倉開發(fā)新表同步，BI工具中拼裝數(shù)據(jù)集，都離不開技術(shù)人員支持，避免不了需求排隊等待?數(shù)據(jù)集中字段缺少完整口徑信息，業(yè)務(wù)不敢用，且用字段疊加邏傳統(tǒng)的BI分析數(shù)據(jù)集101數(shù)據(jù)集102數(shù)據(jù)集001 數(shù)據(jù)應(yīng)用表n數(shù)據(jù)集00232支付金額230,000數(shù)據(jù)應(yīng)用表2PV（w）1,500支付單量2,240數(shù)據(jù)應(yīng)用表3退款金額4,500毛利33,000數(shù)據(jù)應(yīng)用表1業(yè)務(wù)更友好：新需求無需新增數(shù)據(jù)集，用指標(biāo)直接做報表，業(yè)務(wù)使用門檻更低對業(yè)務(wù)人員來說，有很高的學(xué)習(xí)成本對業(yè)務(wù)人員來說，有很高的學(xué)習(xí)成本指標(biāo)計算引擎技術(shù)特點(diǎn)JavaAPISQLMDXExcel業(yè)務(wù)系統(tǒng)BI產(chǎn)品大屏App化指標(biāo)計算引擎技術(shù)特點(diǎn)JavaAPISQLMDXExcel業(yè)務(wù)系統(tǒng)BI產(chǎn)品大屏App化指標(biāo)計算引擎（HME）RESTful執(zhí)行引擎（執(zhí)行引擎（Doris）物化視圖跨表關(guān)聯(lián)查詢緩存SQL引擎理理趨勢與挑戰(zhàn)：企業(yè)數(shù)據(jù)民主化&價值化指標(biāo)平臺：企業(yè)數(shù)據(jù)智能應(yīng)用新范式領(lǐng)先實(shí)踐：零售及金融行業(yè)指標(biāo)平臺實(shí)踐案例未來展望：基于大模型的智能分析未來統(tǒng)一的賦能業(yè)務(wù)應(yīng)用到各類經(jīng)營場景億賦能業(yè)務(wù)應(yīng)用到各類經(jīng)營場景億完成了300+核心商品指標(biāo)口徑統(tǒng)一形成了服務(wù)采銷的經(jīng)營分析閉環(huán)數(shù)勢搭建了該企業(yè)的指標(biāo)平臺，梳理統(tǒng)一300個商品域核心指標(biāo)，形成了服務(wù)采銷、營運(yùn)、財務(wù)等多團(tuán)隊的經(jīng)營分析看板，實(shí)現(xiàn)了快消品、生鮮品全鏈路的數(shù)據(jù)分析和決策支持能力，幫助企業(yè)提升營銷ROI、優(yōu)化成本結(jié)構(gòu)指標(biāo)口徑不一致：各部門指標(biāo)的數(shù)據(jù)來源不同、指標(biāo)口徑定義也不同，拉齊業(yè)務(wù)口徑溝通成本高、技術(shù)口徑難梳理，下游應(yīng)用五花八門，分析數(shù)據(jù)資產(chǎn)是個黑盒子：數(shù)倉模型與指標(biāo)無清晰映射，指標(biāo)定義全靠開發(fā)求需數(shù)據(jù)開發(fā)開發(fā)完成…③數(shù)據(jù)開發(fā)開發(fā)完成…③④…④??煙囪林立?指標(biāo)口徑不統(tǒng)一??指標(biāo)定義黑盒子?無法高效復(fù)用可落地診斷與設(shè)計戰(zhàn)役成體系鏈部門數(shù)勢科技和企業(yè)共建指標(biāo)平臺體系可落地診斷與設(shè)計戰(zhàn)役成體系鏈部門行行診斷開發(fā)與建設(shè)戰(zhàn)役 做開發(fā)開發(fā)與建設(shè)戰(zhàn)役 做開發(fā) 建平臺 建平臺組織與運(yùn)營戰(zhàn)役組織與運(yùn)營戰(zhàn)役助決策助決策2.診斷報告輸出3.行動路徑設(shè)計初版4K指標(biāo)體系整體框架設(shè)計存量指標(biāo)調(diào)研與業(yè)務(wù)訪談，輸出具體指標(biāo)分類，明確需求范圍數(shù)據(jù)完善度校驗，結(jié)合數(shù)據(jù)可得性調(diào)整優(yōu)先級排布4指標(biāo)數(shù)據(jù)開發(fā)規(guī)劃與落地實(shí)施5統(tǒng)一指標(biāo)平臺上線與培訓(xùn)6試點(diǎn)指標(biāo)分析場景搭建與推廣231.診斷內(nèi)容與方法論行診斷成體系做開發(fā)建平臺指標(biāo)應(yīng)用指標(biāo)體系A(chǔ)PI2.診斷報告輸出3.行動路徑設(shè)計初版4K指標(biāo)體系整體框架設(shè)計存量指標(biāo)調(diào)研與業(yè)務(wù)訪談，輸出具體指標(biāo)分類，明確需求范圍數(shù)據(jù)完善度校驗，結(jié)合數(shù)據(jù)可得性調(diào)整優(yōu)先級排布4指標(biāo)數(shù)據(jù)開發(fā)規(guī)劃與落地實(shí)施5統(tǒng)一指標(biāo)平臺上線與培訓(xùn)6試點(diǎn)指標(biāo)分析場景搭建與推廣231.診斷內(nèi)容與方法論行診斷成體系做開發(fā)建平臺指標(biāo)應(yīng)用指標(biāo)體系A(chǔ)PI管理指標(biāo)市場指標(biāo)開發(fā)指標(biāo)管理信息來源一級主題二級主題指標(biāo)定義業(yè)務(wù)主題產(chǎn)品主題經(jīng)營分析指標(biāo)體系員工績效主題財務(wù)主題內(nèi)部營運(yùn)主題行診斷成體系做開發(fā)建平臺信息來源一級主題二級主題指標(biāo)定義業(yè)務(wù)主題產(chǎn)品主題經(jīng)營分析指標(biāo)體系員工績效主題財務(wù)主題內(nèi)部營運(yùn)主題行診斷成體系做開發(fā)建平臺成體系：結(jié)合業(yè)務(wù)流程設(shè)計經(jīng)營分析指標(biāo)體系指標(biāo)舉例指標(biāo)舉例入凈傭金收入新產(chǎn)品數(shù)量 凈值類行診斷成體系做開發(fā)建平臺 凈值類行診斷成體系做開發(fā)建平臺成體系：以4K模型為指標(biāo)體系設(shè)計綱領(lǐng)，進(jìn)行架構(gòu)規(guī)劃圍繞企業(yè)最終目標(biāo)AUM最大化的關(guān)鍵因素設(shè)計頂層框架4K模型，再聚焦各模塊向下拆解。保證了企業(yè)級指標(biāo)體系的框架全局視角、結(jié)構(gòu)化模塊的可拓展性。規(guī)避了同一個模塊、跨模塊多套指標(biāo)問題。只數(shù)期限（年）票面利率（%）服務(wù)客戶數(shù)拜訪次數(shù)聯(lián)合拜訪次數(shù)承銷金額發(fā)行額發(fā)行量投行客戶數(shù)服務(wù)次數(shù)商機(jī)填報數(shù)量東北地區(qū)企業(yè)債發(fā)行量同比增長率今年東北地區(qū)企業(yè)債發(fā)行量發(fā)行起始日區(qū)域信息發(fā)行量債券類型華東地區(qū)西北地區(qū)華東地區(qū)...企業(yè)債中票短期融資券...行診斷成體系做開發(fā)建平臺機(jī)構(gòu)客戶名稱投行跟蹤團(tuán)隊產(chǎn)業(yè)鏈類型證券簡稱擔(dān)保人客戶狀態(tài)東北地區(qū)機(jī)構(gòu)客戶編號區(qū)域信息融資賽道發(fā)行起始日發(fā)行債券評級客戶類別是否有效客戶是否活躍客戶債券類型發(fā)行主體評級發(fā)行狀態(tài)商機(jī)狀態(tài)公司債投行業(yè)務(wù)主題-債券類指標(biāo)：維度/原子/派生指標(biāo)與計算指標(biāo)梳理只數(shù)期限（年）票面利率（%）服務(wù)客戶數(shù)拜訪次數(shù)聯(lián)合拜訪次數(shù)承銷金額發(fā)行額發(fā)行量投行客戶數(shù)服務(wù)次數(shù)商機(jī)填報數(shù)量東北地區(qū)企業(yè)債發(fā)行量同比增長率今年東北地區(qū)企業(yè)債發(fā)行量發(fā)行起始日區(qū)域信息發(fā)行量債券類型華東地區(qū)西北地區(qū)華東地區(qū)...企業(yè)債中票短期融資券...行診斷成體系做開發(fā)建平臺機(jī)構(gòu)客戶名稱投行跟蹤團(tuán)隊產(chǎn)業(yè)鏈類型證券簡稱擔(dān)保人客戶狀態(tài)東北地區(qū)機(jī)構(gòu)客戶編號區(qū)域信息融資賽道發(fā)行起始日發(fā)行債券評級客戶類別是否有效客戶是否活躍客戶債券類型發(fā)行主體評級發(fā)行狀態(tài)商機(jī)狀態(tài)公司債投行業(yè)務(wù)主題-債券類指標(biāo)：維度/原子/派生指標(biāo)與計算指標(biāo)梳理統(tǒng)一梳理并定義了投行業(yè)務(wù)主題-債券類的核心維度與原子指標(biāo)。統(tǒng)一維度提升了指標(biāo)取數(shù)的靈活性、保證了各維度的口徑統(tǒng)一。支持業(yè)務(wù)方以“樂高組合式”取數(shù)模式進(jìn)行指標(biāo)分析，加速指標(biāo)取數(shù)效率1數(shù)倉加工原子指標(biāo)：成交金額指標(biāo)平臺加工派生指標(biāo)：近7天成交金額派生指標(biāo)：開發(fā)關(guān)系A(chǔ)股成交金額衍生指標(biāo)：開發(fā)關(guān)系股票成交金額+基金交易量3行診斷成體系做開發(fā)建平臺24做開發(fā)：1數(shù)倉加工原子指標(biāo)：成交金額指標(biāo)平臺加工派生指標(biāo)：近7天成交金額派生指標(biāo)：開發(fā)關(guān)系A(chǔ)股成交金額衍生指標(biāo)：開發(fā)關(guān)系股票成交金額+基金交易量3行診斷成體系做開發(fā)建平臺24做開發(fā)：以員工績效分析類指標(biāo)為例說明開發(fā)流程ETL加工（在券商側(cè)數(shù)據(jù)倉庫內(nèi)）統(tǒng)一指標(biāo)平臺員工績效分析底層數(shù)據(jù)統(tǒng)一指標(biāo)平臺55原有指標(biāo)派生模式：原有的指標(biāo)派生與衍生過程仍優(yōu)化后指標(biāo)派生模式：直接在指標(biāo)平臺內(nèi)通過同時OLAP引擎加速了指標(biāo)查詢與取數(shù)效率行診斷成體系做開發(fā)建平臺做開發(fā)：極大提效派生衍生指標(biāo)開發(fā)，支持自助取數(shù)行診斷成體系做開發(fā)建平臺?傳統(tǒng)取數(shù)模式中，報表開發(fā)需要由懂SQL的數(shù)據(jù)分析師進(jìn)行人工開發(fā)，開發(fā)周期長，業(yè)務(wù)人員難以自行數(shù)據(jù)挖掘?數(shù)勢指標(biāo)平臺通過統(tǒng)一口徑指標(biāo)的自助取數(shù)功能，支持配置化自助提取指標(biāo)，系統(tǒng)自動關(guān)聯(lián)跨表指標(biāo)，無需等待開發(fā)排期?取數(shù)提效成果：獲取指標(biāo)結(jié)果的時間，平均每人每周減少10小時；新增派生指標(biāo)時效從1周縮短到30分鐘實(shí)現(xiàn)價值業(yè)務(wù)運(yùn)營效率300%數(shù)字基建成熟度40%實(shí)現(xiàn)價值業(yè)務(wù)運(yùn)營效率300%數(shù)字基建成熟度40%獲取指標(biāo)數(shù)據(jù)，賦能“人人都是分析師”行診斷成體系做開發(fā)