數(shù)據(jù)中臺的定義與價值

1、數(shù)據(jù)中臺的定義與價值 導(dǎo)讀：要建設(shè)數(shù)據(jù)中臺，我們首先需要明確什么是數(shù)據(jù)中臺，以及數(shù)據(jù)中臺能為 企 業(yè)帶來什么價值。第一章數(shù)據(jù)中臺定義數(shù)據(jù)中臺是一種將企業(yè)沉睡的數(shù)據(jù)變成數(shù)據(jù)資產(chǎn)，持續(xù)使用數(shù)據(jù)、產(chǎn)生智能、為業(yè)務(wù)效勞，從而實現(xiàn)數(shù)據(jù)價值變現(xiàn)的系統(tǒng)和機制。通過數(shù)據(jù)中臺提供的方法和運行機制，形成會聚整合、提純加工、建模處理、算法學(xué)習(xí)，并以共享效勞的方式 將數(shù)據(jù) 提供給業(yè)務(wù)使用，從而與業(yè)務(wù)聯(lián)動。再者，結(jié)合業(yè)務(wù)中臺的數(shù)據(jù)生產(chǎn)能力，最終構(gòu)建數(shù)據(jù)生產(chǎn)一消費一再生的閉環(huán)。為了更好地理解數(shù)據(jù)中臺，我們將其與數(shù)據(jù)倉庫、數(shù)據(jù)湖、 BI 、大數(shù)據(jù)等相關(guān)槪 念進 行比照。1? 1 與數(shù)據(jù)倉庫的比照 數(shù)據(jù)倉庫是一個面向主題的、

2、集成的、相對穩(wěn)定的、反映歷史變化的數(shù)據(jù)集合 , 用于 支持管理決策。因此，其重點在于數(shù)據(jù)的集合。數(shù)據(jù)倉庫可使用維度建模方 法論從 業(yè)務(wù)過程中抽象出通用維度與度量，組成數(shù)據(jù)模型，為決策分析提供通用的數(shù)據(jù)分析能力。數(shù)據(jù)中臺與數(shù)據(jù)倉庫相比，至少有四大優(yōu)勢。 笫一，數(shù)據(jù)中臺強調(diào)數(shù)據(jù)業(yè)務(wù)化，讓數(shù)據(jù)用起來，滿足企業(yè)數(shù)據(jù)分析和應(yīng)用的需 求。笫二，數(shù)據(jù)中臺梳理的流程比數(shù)據(jù)倉庫建設(shè)更加復(fù)雜和全面。數(shù)據(jù)中臺增加了以企業(yè)的全局視角來梳理數(shù)據(jù)域的環(huán)節(jié)，這是數(shù)據(jù)中臺建設(shè)中很重要的一環(huán)。數(shù)據(jù)域的梳理正好表達了中臺化的能力。舉個例子，新零售場景下，企業(yè)的交易場景有很多，包括自建商城渠道、第三方電商渠道、外賣訂單渠道、線下門

3、店渠道等。建設(shè)數(shù)據(jù)中臺時就需要規(guī)劃出一個交易域，此交易域要抽象出各種渠道的業(yè)務(wù)流程，并能覆蓋線上、線下運營部門在運營時需要考核的維度與度量。因此數(shù)據(jù)中臺建設(shè)過程要更多從企業(yè)全局出發(fā)，從人、貨、場多維度打通數(shù)據(jù)， 真正 做到無論消費者從哪個渠道進來，都能洞察其與本企業(yè)的接觸軌跡。而數(shù)據(jù)倉庫的建設(shè)那么相對單一，專注于維度模型如何設(shè)計，如何拆解指標(biāo)和維度 ,卻 很少關(guān)注基于人、貨、場這些主體進行實體拉通，然后做出全局的畫像數(shù)據(jù)供 前端業(yè) 務(wù)調(diào)用。笫三，數(shù)據(jù)中臺建設(shè)的范疇遠(yuǎn)遠(yuǎn)大于數(shù)據(jù)倉庫的建設(shè)，除了完成數(shù)據(jù)倉庫的建模 ,還 需要制定完善的數(shù)據(jù)治理方案，其至在建設(shè)的過程中需要成立專門的數(shù)據(jù)治理 委員會

4、來促成復(fù)雜的數(shù)據(jù)治理工作。最重要的一點是，在數(shù)據(jù)中臺的規(guī)劃階段就需要去主動迎合業(yè)務(wù)，需要全面梳理 哪些 業(yè)務(wù)場景需要利用數(shù)據(jù)的賦能才能形成業(yè)務(wù)閉環(huán)，因此，在建設(shè)數(shù)據(jù)中臺的 同時就必 須著眼于業(yè)務(wù)場景的賦能。第四，對于企業(yè)來講，建設(shè)數(shù)據(jù)中臺并不只是搭建一個能力平臺。正如我們在?中 臺 戰(zhàn)略?一書中提到的，建設(shè)中臺需要中臺文化及相匹配的中臺組織。因此，從宏觀上來講，數(shù)據(jù)中臺承當(dāng)著企業(yè)重新搭建數(shù)據(jù)組織的職能，倒逼企業(yè) 為了 運營好數(shù)據(jù)中臺而建設(shè)一套能與之匹配的數(shù)據(jù)中臺組織。數(shù)據(jù)倉庫那么純粹注 重于系統(tǒng) 解決方案，并不涉及組織形態(tài)。因此，簡單來說，數(shù)據(jù)倉庫重在建數(shù)據(jù)，而數(shù)據(jù)中臺那么將建、治、管、服放到

5、同 樣的 高度，數(shù)據(jù)倉庫只是數(shù)據(jù)中臺的一個子集。那我們?yōu)槭裁磿臄?shù)據(jù)倉庫開展到數(shù)據(jù)中臺呢？因為傳統(tǒng)的數(shù)據(jù)倉庫已不能完 全滿 足企業(yè)數(shù)據(jù)分析的需求。企業(yè)已從原來的統(tǒng)訃分析轉(zhuǎn)變?yōu)轭A(yù)測分析并提供標(biāo) 簽、推薦 等算法，從被動分析轉(zhuǎn)變?yōu)橹鲃臃治?，從非實時分析轉(zhuǎn)變?yōu)閷崟r分析 ,并且從結(jié)構(gòu)化 數(shù)據(jù)轉(zhuǎn)變?yōu)榻Y(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化的多元化數(shù)據(jù)。1? 2與數(shù)據(jù)湖的比照與數(shù)據(jù)中臺相關(guān)的概念還有數(shù)據(jù)湖 (Data Lake)。數(shù)據(jù)湖是一種數(shù)據(jù)存儲理念,作為一 個集中的存儲庫，它可以以自然格式存儲任意規(guī)模的數(shù)據(jù)，包括來自關(guān)系數(shù)據(jù)庫行和列的結(jié)構(gòu)化數(shù)據(jù)，XML、JSON、日志等半結(jié)構(gòu)化數(shù)據(jù)，電子郵件、文 檔等非結(jié)構(gòu)化 數(shù)

6、據(jù)，以及圖像、音視頻等的二進制數(shù)據(jù)，從而實現(xiàn)數(shù)據(jù)的集中式管理。U前Hadoop是最常見的實現(xiàn)數(shù)據(jù)湖概念的技術(shù)。比方HBase可讓數(shù)據(jù)湖保存海 量數(shù) 據(jù)，Spark可以使得數(shù)據(jù)湖批量分析數(shù)據(jù)，而 Flink等可讓數(shù)據(jù)湖實時接入 和處理loT 數(shù)據(jù)等。1? 3與 Bl 的比照Bl 商業(yè)智能是分析數(shù)據(jù)并獲取洞察，進而幫助企業(yè)做出決策的一系列方法、 技術(shù) 和軟件。相比數(shù)據(jù)倉庫， Bl 還包含數(shù)據(jù)挖掘、數(shù)據(jù)可視化等工具，并可支 持用戶在一 定范圍內(nèi)任意組合維度與指標(biāo)， 從而上升到支持決策的層面， 而不只 是作為數(shù)據(jù)倉儲。4. 與大數(shù)據(jù)的比照數(shù)據(jù)中臺也不等于大數(shù)據(jù)。數(shù)據(jù)中臺是基于大數(shù)據(jù)、人工智能等技術(shù)構(gòu)建

7、的數(shù)據(jù)采、存、通、管、用的平臺。數(shù)據(jù)中臺需要以 Hadoop. Spark 等為代表的大數(shù)據(jù)處理技術(shù)做支撐，但絕不能將 數(shù)據(jù) 中臺與大數(shù)據(jù)劃等號。數(shù)據(jù)中臺不只有大數(shù)據(jù)處理技術(shù)，還包括智能算法、 與業(yè)務(wù)聯(lián) 動的特性、數(shù)據(jù)資產(chǎn)、數(shù)據(jù)工具等。5. 小結(jié)可以說數(shù)據(jù)中臺是上述概念和技術(shù)的集大成者。 首先，大數(shù)據(jù)豐富的數(shù)據(jù)計算和存儲技術(shù)為數(shù)據(jù)中臺提供了強大的數(shù)據(jù)處理能力。 其次，數(shù)據(jù)中臺作為企業(yè)數(shù)據(jù)的集結(jié)地，其底層也當(dāng)然承載著數(shù)據(jù)湖的職能。再次，數(shù)據(jù)倉庫對數(shù)據(jù)的分域建模是數(shù)據(jù)中臺的重要局部，它承載著將企業(yè)數(shù)據(jù)治理得井井有條的職能。最后，基于強大的數(shù)據(jù)能力，結(jié)合業(yè)務(wù)場景提供實時、智能的效勞和應(yīng)用是數(shù)據(jù)中臺的

8、核心價值表達。第二章數(shù)據(jù)中臺價值數(shù)據(jù)中臺不等于大數(shù)據(jù)平臺，數(shù)據(jù)中臺的核心工作也并不是將企業(yè)的數(shù)據(jù)全部收集起來做匯總就夠了。數(shù)據(jù)中臺的使命是利用大數(shù)據(jù)技術(shù)、通過全局規(guī)劃來治理好企業(yè)的數(shù)據(jù)資產(chǎn)，讓數(shù)據(jù)使用者能隨時隨地獲取到可靠的數(shù)據(jù)。因此，數(shù)據(jù)中臺一旦建成并得以持續(xù)運營，其價值將隨著時間的推移將呈指數(shù)級增長。數(shù)據(jù)中臺的價值眾多，下面詳述其中的三大價值，見圖4-1。賦能業(yè)務(wù),降本増效融存儲標(biāo)準(zhǔn)數(shù)據(jù)銷毀標(biāo)準(zhǔn)數(shù)據(jù)建設(shè)標(biāo)準(zhǔn)數(shù)據(jù)建模標(biāo)準(zhǔn)數(shù)據(jù)接入標(biāo)準(zhǔn)建立數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)消費標(biāo)準(zhǔn)數(shù)據(jù)調(diào)用標(biāo)準(zhǔn)數(shù)據(jù)權(quán)限標(biāo)準(zhǔn)數(shù)據(jù)產(chǎn)品經(jīng)理團隊數(shù)據(jù)運営團隊中臺建設(shè)團隊勰組織中臺運維團隊圖4-1數(shù)據(jù)中臺的三大價值2? 1幫助企業(yè)建立數(shù)據(jù)標(biāo)準(zhǔn)在

9、有數(shù)據(jù)中臺之前，企業(yè)根本不會有全局的數(shù)據(jù)標(biāo)準(zhǔn)，即使有相關(guān)的數(shù)據(jù)標(biāo)準(zhǔn) 沒有數(shù)據(jù)中臺這個實體形態(tài)，數(shù)據(jù)標(biāo)準(zhǔn)也無從執(zhí)行。數(shù)據(jù)中臺的建設(shè)天然會 業(yè)建設(shè)數(shù)據(jù)標(biāo)準(zhǔn)，包括數(shù)據(jù)建設(shè)標(biāo)準(zhǔn)和數(shù)據(jù)消費標(biāo)準(zhǔn)。數(shù)據(jù)建設(shè)標(biāo)準(zhǔn)有諸如數(shù)據(jù)接入標(biāo)準(zhǔn)、數(shù)據(jù)建模標(biāo)準(zhǔn)、數(shù)據(jù)存儲標(biāo)準(zhǔn)和數(shù)據(jù)平安規(guī) 等，數(shù)據(jù)消費標(biāo)準(zhǔn)包含數(shù)據(jù)權(quán)限標(biāo)準(zhǔn)、數(shù)據(jù)調(diào)用標(biāo)準(zhǔn)以及數(shù)據(jù)銷毀標(biāo)準(zhǔn)等。這 準(zhǔn)都是建設(shè)數(shù)據(jù)中臺時必須建立起來并依托數(shù)據(jù)中臺去執(zhí)行和落地的。2? 2促進中臺組織形成再宏偉的企業(yè)戰(zhàn)略規(guī)劃，都離不開一套科學(xué)合理的組織去落地執(zhí)行。數(shù)據(jù)中臺建 將是企業(yè)宏觀戰(zhàn)略規(guī)劃的一個重要局部，那么在踐行數(shù)據(jù)中臺建設(shè)的過程中， 企業(yè)第一位的問題就是如何搭建起一套能穩(wěn)定護航數(shù)

10、據(jù)中臺建設(shè)及運營的 班子。,由于幫助企范些標(biāo)設(shè)擺在數(shù)據(jù)中臺運維數(shù)據(jù)中臺這種體系化丄程將橫向拉通企業(yè)數(shù)據(jù)相關(guān)方，包括中臺建設(shè)團隊、中臺的企業(yè)數(shù)團隊、數(shù)據(jù)產(chǎn)品經(jīng)理團隊、數(shù)據(jù)資產(chǎn)管理團隊、數(shù)據(jù)運營團隊等，組成標(biāo)準(zhǔn) 據(jù)委員會，從而形成企業(yè)真正的中臺組織。 需要說明的是，中臺組織可以是一個橫跨各個業(yè)務(wù)部門的弱矩陣組織，也可以是 一 個完整的實體組織。這需要因地制宜，因企業(yè)不同而異。2? 3 全面賦能業(yè)務(wù)，促使降本增效數(shù)據(jù)中臺的終極價值是降本增效，無論是建設(shè)數(shù)據(jù)標(biāo)準(zhǔn)還是形成中臺組織，其核心LI 標(biāo)都是幫助企業(yè)達成戰(zhàn)略規(guī)劃。通過數(shù)據(jù)中臺，可以更加合理地布局團隊：數(shù)據(jù)從加工生產(chǎn)到使用的整個時間周 期 將大大縮短；以中臺之力拉通整合企業(yè)營銷、交易、效勞、庫存、物流等一方 數(shù) 據(jù)，結(jié)合二方及三方數(shù)據(jù)，以全局視角，形成強大的數(shù)據(jù)資產(chǎn)，滋養(yǎng)各業(yè)務(wù)板 塊。 同時有 LI