智慧金融大數(shù)據(jù)平臺(tái)建設(shè)方案

數(shù)ilil據(jù)1g—1源^rr數(shù)據(jù)平臺(tái)

基

礎(chǔ)

匯總

層

數(shù)

內(nèi)部數(shù)據(jù)貼源層整合層據(jù)

平

臺(tái)

數(shù)據(jù)結(jié)構(gòu)化轉(zhuǎn)換

大

大數(shù)據(jù)分析計(jì)算數(shù)

據(jù)

平

分布式數(shù)據(jù)庫(kù)臺(tái)

分碼文件系統(tǒng)

數(shù)據(jù)調(diào)度與處理數(shù)據(jù)傳輸教據(jù)

管理

數(shù)據(jù)生命周期管理

平臺(tái)

數(shù)據(jù)質(zhì)量檢核

元數(shù)據(jù)管理

智慧金融大數(shù)據(jù)平臺(tái)

建

設(shè)

方

案

目錄

第I章前言........................................................................0

第2章金融大數(shù)據(jù)現(xiàn)狀分析.........................................................1

2.1、基本現(xiàn)狀.................................................................1

2.2、總體現(xiàn)狀.................................................................1

2.2.1x行領(lǐng)導(dǎo).................................................................1

222、業(yè)務(wù)人員...............................................................1

2.3、數(shù)據(jù)架構(gòu)方面.............................................................1

2.3.1、業(yè)務(wù)表現(xiàn)...............................................................2

232、問題...................................................................2

2.4、數(shù)據(jù)應(yīng)用難題.............................................................3

241、缺少統(tǒng)一的應(yīng)用分析標(biāo)準(zhǔn)................................................3

2.4.1.1,業(yè)務(wù)表現(xiàn).............................................................3

2.412、問題.................................................................3

242、缺少統(tǒng)一的基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)................................................4

242.1、業(yè)務(wù)表現(xiàn).............................................................4

242.2、問題.................................................................4

243、缺少反饋機(jī)制...........................................................5

24.3.1、業(yè)務(wù)表現(xiàn).............................................................5

24.3.2、問題.................................................................6

2.5、數(shù)據(jù)應(yīng)用現(xiàn)狀總結(jié).........................................................6

第3章金融大數(shù)據(jù)治理階段目標(biāo).....................................................0

3.1、數(shù)據(jù)平臺(tái)邏輯架構(gòu).........................................................1

3.2、數(shù)據(jù)平臺(tái)部署架構(gòu).........................................................1

3.3、建設(shè)目標(biāo).................................................................2

3.3.1.建設(shè)大數(shù)據(jù)基礎(chǔ)設(shè)施，完善全行數(shù)據(jù)體系架構(gòu)............................2

332、開發(fā)大數(shù)據(jù)資源，支撐全行經(jīng)營(yíng)管理創(chuàng)新................................2

333、培養(yǎng)大數(shù)據(jù)人才隊(duì)伍，建立大數(shù)據(jù)分析能力...............................2

3.4、數(shù)據(jù)治理目標(biāo).............................................................3

3.4.1、發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題，推動(dòng)大數(shù)據(jù)治理工作的開展，建立數(shù)據(jù)質(zhì)量檢核系統(tǒng)……3

3.4.2、分析、梳理業(yè)務(wù)系統(tǒng)，推動(dòng)數(shù)據(jù)標(biāo)準(zhǔn)的建立，統(tǒng)一全行口徑................3

343、建立數(shù)據(jù)倉(cāng)庫(kù)模型框架，優(yōu)化我行數(shù)據(jù)架構(gòu)，建設(shè)穩(wěn)定、可擴(kuò)展的數(shù)據(jù)倉(cāng)庫(kù)….3

3.5、目標(biāo)建設(shè)方法.............................................................4

351、建設(shè)內(nèi)容...............................................................4

352、工作階段..............................................................4

,源系統(tǒng)分析階段....................................................4

.1,工作內(nèi)容.......................................................4

3.521.2、工作依據(jù).......................................................4

.3.工作重點(diǎn).......................................................5

3.522、數(shù)據(jù)質(zhì)量問題檢查階段..............................................5

.1,工作內(nèi)容.......................................................5

35222、工作依據(jù).......................................................5

352.2.3、工作重點(diǎn).......................................................5

3.523、數(shù)據(jù)質(zhì)量問題分析階段..............................................6

.1,工作內(nèi)容.......................................................6

3.523.2、工作依據(jù).......................................................6

352.3.3、工作重點(diǎn).......................................................6

3.6、預(yù)期建設(shè)效益............................................................6

3.6.1、實(shí)現(xiàn)數(shù)據(jù)共享...........................................................6

3.6.2、加強(qiáng)業(yè)務(wù)合作...........................................................7

363、促進(jìn)業(yè)務(wù)創(chuàng)新..........................................................7

364、提升建設(shè)效率..........................................................7

365、改善數(shù)據(jù)質(zhì)量...........................................................7

第4章金融大數(shù)據(jù)建設(shè)總體規(guī)劃.....................................................0

4.1、功能需求.................................................................0

4.1.1、個(gè)人和企業(yè)畫像........................................................0

4.1.2、實(shí)現(xiàn)精準(zhǔn)營(yíng)銷...........................................................2

4.1.3、為金融業(yè)提供風(fēng)險(xiǎn)管控..................................................3

4.1.4、運(yùn)營(yíng)優(yōu)化...............................................................4

4.2、金融大數(shù)據(jù)應(yīng)用架構(gòu)遠(yuǎn)景...................................................4

421、金融需要從“坐商"轉(zhuǎn)型為“行商”.....................................5

422、客戶下沉...............................................................5

423、與“互聯(lián)網(wǎng)金融”進(jìn)行差異化競(jìng)爭(zhēng)........................................5

4.3、金融大數(shù)據(jù)平臺(tái)應(yīng)用架構(gòu)...................................................6

4.4、金融大數(shù)據(jù)平臺(tái)架構(gòu).......................................................7

4.5、金融大數(shù)據(jù)支撐平臺(tái).......................................................7

451、大數(shù)據(jù)虛擬化平臺(tái)......................................................7

,設(shè)計(jì)原則..........................................................8

,虛擬化平臺(tái)設(shè)計(jì)...................................................10

,硬件基礎(chǔ)設(shè)施層...................................................10

,虛擬化存儲(chǔ).......................................................11

,虛擬化計(jì)算.......................................................11

451.6、平臺(tái)管理.........................................................12

,數(shù)據(jù)存儲(chǔ)系統(tǒng)設(shè)計(jì).................................................12

s高性能SAN存儲(chǔ)系統(tǒng)...............................................13

,存儲(chǔ)方案優(yōu)勢(shì).....................................................15

452、大數(shù)據(jù)分析管理平臺(tái)...................................................16

4.6、大數(shù)據(jù)分析處理平臺(tái).....................................................16

4.6.1、分布式內(nèi)存分析引擎...................................................17

462、數(shù)據(jù)挖掘引擎.........................................................17

4.6.3、分布式實(shí)時(shí)在線數(shù)據(jù)處理引擎...........................................17

464、流處理引擎............................................................18

4.6.5、大數(shù)據(jù)分析支撐系統(tǒng)....................................................18

466、大數(shù)據(jù)分析節(jié)點(diǎn)群.....................................................24

467、軟硬件配置...........................................................24

468、虛擬化平臺(tái)關(guān)鍵特性...................................................26

469、虛擬化平臺(tái)配置....................................................27

4.7、安全保障系統(tǒng)........................................................28

4.7.1、設(shè)計(jì)原則..........................................................28

4.7,2、總體設(shè)計(jì)..........................................................29

4.7.3、物理安全設(shè)計(jì)......................................................29

4.7.4、網(wǎng)絡(luò)安全設(shè)計(jì).......................................................31

4.7.4.1,外網(wǎng)邊界安全..................................................31

474.2、網(wǎng)絡(luò)基礎(chǔ)設(shè)施安全..............................................31

4.7.5、主機(jī)安全設(shè)計(jì)......................................................32

47.6、應(yīng)用安全設(shè)計(jì)......................................................33

4.7.7、數(shù)據(jù)庫(kù)安全設(shè)計(jì)....................................................33

4.7.8、安全制度與人員管理................................................34

4.7.9、安全管理體系建設(shè)..................................................35

4.7.10、安全運(yùn)維..........................................................36

4.7.11,安全人員管理......................................................36

4.7.12,技術(shù)安全管理......................................................37

4.7.13、安全保障系統(tǒng)配置..................................................37

4.8、計(jì)算機(jī)網(wǎng)絡(luò)系統(tǒng).......................................................38

4.8.1、設(shè)計(jì)原則........................................................38

482、系統(tǒng)設(shè)計(jì)..........................................................39

483、計(jì)算機(jī)網(wǎng)絡(luò)系統(tǒng)配置................................................41

4.9、基礎(chǔ)支撐軟件........................................................42

4.9.1、地理信息軟件......................................................42

492、操作系統(tǒng)軟件......................................................44

4.9.3、數(shù)據(jù)庫(kù)管理軟件....................................................45

494、機(jī)房建設(shè)方案......................................................46

495、基礎(chǔ)支撐系統(tǒng)軟硬件配置............................................48

第1章前后

隨著信息化程度的加深，以及移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)的崛起，人們

產(chǎn)生的數(shù)據(jù)急劇膨脹，傳統(tǒng)的數(shù)據(jù)處理技術(shù)難以支撐數(shù)據(jù)大量的增長(zhǎng)

和處理能力。經(jīng)過近幾年的發(fā)展，大數(shù)據(jù)技術(shù)逐步成熟，可以幫助企

業(yè)整合更多的數(shù)據(jù)，從海量數(shù)據(jù)中挖掘出隱藏價(jià)值。大數(shù)據(jù)已經(jīng)從“概

念”走向“價(jià)值”，逐步進(jìn)入實(shí)施驗(yàn)證階段。人們?cè)絹碓狡谕軐?shí)現(xiàn)

海量數(shù)據(jù)的處理，從數(shù)據(jù)中發(fā)現(xiàn)價(jià)值。數(shù)據(jù)越來越成為一種重要的資

產(chǎn)。。

我行已深刻認(rèn)識(shí)到數(shù)據(jù)戰(zhàn)略對(duì)企業(yè)運(yùn)營(yíng)以及企業(yè)未來發(fā)展方向

的重要性?；ヂ?lián)網(wǎng)金融的本質(zhì)是金融，核心是數(shù)據(jù)，載體是平臺(tái)，關(guān)

鍵是客戶體驗(yàn)，發(fā)展趨勢(shì)是互聯(lián)網(wǎng)與金融的深度融合，要提升大數(shù)據(jù)

貢獻(xiàn)度。因此，要深化互聯(lián)網(wǎng)思維理念，穩(wěn)步推進(jìn)互聯(lián)網(wǎng)金融產(chǎn)品和

服務(wù)模式創(chuàng)新，積極利用移動(dòng)互聯(lián)網(wǎng)、大數(shù)據(jù)等新技術(shù)新手段，沉著

應(yīng)對(duì)沖擊和挑戰(zhàn)，實(shí)現(xiàn)傳統(tǒng)金融與互聯(lián)網(wǎng)金融的融合發(fā)展。做好海量

異構(gòu)數(shù)據(jù)的專業(yè)化整合集成、關(guān)聯(lián)共享、安全防護(hù)和維護(hù)管理，深度

挖掘數(shù)據(jù)內(nèi)含的巨大價(jià)值，探索金融業(yè)務(wù)創(chuàng)新，實(shí)現(xiàn)數(shù)據(jù)資源的綜合

應(yīng)用、深度應(yīng)用，已成為提升企業(yè)核心競(jìng)爭(zhēng)力，實(shí)現(xiàn)企業(yè)信息化可持

續(xù)發(fā)展的關(guān)鍵途徑。按照行領(lǐng)導(dǎo)部署，信息科技部組織力量對(duì)大數(shù)據(jù)

技術(shù)進(jìn)行研究，完成對(duì)市場(chǎng)上主流的大數(shù)據(jù)平臺(tái)及應(yīng)用技術(shù)預(yù)研，征

求業(yè)務(wù)部門建議，提出項(xiàng)目建設(shè)要求。

第2章金融大數(shù)據(jù)現(xiàn)狀分析

2.1s基本現(xiàn)狀

金融已建立面向整個(gè)金融業(yè)務(wù)的數(shù)據(jù)倉(cāng)庫(kù)，整合了前臺(tái)業(yè)務(wù)運(yùn)營(yíng)

數(shù)據(jù)和后臺(tái)管理數(shù)據(jù)，建立了面向金融的管理分析應(yīng)用；

金融大數(shù)據(jù)積累了一定量的業(yè)務(wù)數(shù)據(jù)，同時(shí)業(yè)務(wù)人員也從客戶管

理、風(fēng)險(xiǎn)評(píng)級(jí)和經(jīng)營(yíng)規(guī)模預(yù)測(cè)等方面，提出了大量分析預(yù)測(cè)需求。

2.2、總體現(xiàn)狀

221、行領(lǐng)導(dǎo)

缺乏數(shù)據(jù)梳理，造成行領(lǐng)導(dǎo)看到的數(shù)據(jù)相互沖突和矛盾；

IT架構(gòu)中中都是以部門級(jí)應(yīng)用為主（如計(jì)財(cái)、資金計(jì)劃部等），

缺乏從大的管理職能（財(cái)務(wù)、風(fēng)險(xiǎn)、運(yùn)營(yíng)等）綜合方面的數(shù)據(jù)整合、

數(shù)據(jù)標(biāo)準(zhǔn)和統(tǒng)一業(yè)務(wù)定義。

222、業(yè)務(wù)人員

業(yè)務(wù)職能不清晰或相互重疊，觀察數(shù)據(jù)視角不盡相同，缺少數(shù)據(jù)

標(biāo)準(zhǔn)與業(yè)務(wù)統(tǒng)一定義，語軌不一致；

由于業(yè)務(wù)系統(tǒng)輸入的隨意性，導(dǎo)致部分關(guān)鍵業(yè)務(wù)數(shù)據(jù)質(zhì)量較差。

2.3、數(shù)據(jù)架構(gòu)方面

由于全行的數(shù)據(jù)散落在各個(gè)業(yè)務(wù)系統(tǒng)中，沒有進(jìn)行有效整合，形

成豎井式架構(gòu)，造成多個(gè)信息孤島，整體架構(gòu)缺少一個(gè)穩(wěn)定的、抗源

變化的保存最細(xì)粒度歷史數(shù)據(jù)的數(shù)據(jù)層。無法支撐未來共享性應(yīng)用。

2.3.1、業(yè)務(wù)表現(xiàn)

?信息孤島

A數(shù)據(jù)冗余

＞共享性差

A歷史數(shù)據(jù)缺失

232、問題

A數(shù)據(jù)分散，難以管理

A沒有一個(gè)穩(wěn)定的，抗源變化的數(shù)據(jù)層

缺少一個(gè)穩(wěn)定的、

抗源變化的數(shù)據(jù)層

豎井式架構(gòu)，

造成信息孤島--

客戶

間

客戶中

務(wù)

業(yè)支付

表

報(bào)

績(jī)效考核報(bào)表報(bào)表

客戶管理

11客戶風(fēng)險(xiǎn)1喀戶11中間業(yè)務(wù)1支付業(yè)務(wù)1

I??1fa2)i

報(bào)表應(yīng)用共用

主鷲集市層11111|Q11HI11

11Iki11otr1-11SIMI

r

[1；；

11

1=J=—b---------=rf沒有進(jìn)行整合，無法）

ODS層1??1共享，不能支持如客

BDS值1111戶管理等共享性應(yīng)用

i111

DEP醫(yī)l111

|_L_____J1______hzznzL：

源系統(tǒng)綜合崢信貸管理國(guó)際結(jié)算債券核算

2.4、數(shù)據(jù)應(yīng)用難題

241、缺少統(tǒng)一的應(yīng)用分析標(biāo)準(zhǔn)

2.4.1,1s業(yè)務(wù)表現(xiàn)

＞各集市系統(tǒng)指標(biāo)存在重復(fù)

A各集市系統(tǒng)在保有存量的同時(shí)，不斷產(chǎn)生新的指標(biāo)（增量）

＞集市指標(biāo)派生無法實(shí)現(xiàn)

A指標(biāo)邏輯視圖（指標(biāo)分類）不一致

241.2、問題

?重復(fù)投入

＞數(shù)據(jù)不一致

A指標(biāo)設(shè)計(jì)、口徑不一致

A指標(biāo)難以共享

客戶風(fēng)險(xiǎn)集市

242、缺少統(tǒng)一的基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)

2.421、業(yè)務(wù)表現(xiàn)

＞各系統(tǒng)存在冗余數(shù)據(jù)

A各系統(tǒng)存在業(yè)務(wù)含義一致，名稱定義不一致的屬性

＞各系統(tǒng)存在含義不一致，名稱定義一致的情況

＞業(yè)務(wù)代碼定義混亂

2.422、問題

A重復(fù)投入

?數(shù)據(jù)不一致、不準(zhǔn)確

?難以利用和管理

?各系統(tǒng)數(shù)據(jù)難以共享

243、缺少反饋機(jī)制

沒有歸納并總結(jié)數(shù)據(jù)質(zhì)量問題，缺少反饋機(jī)制，導(dǎo)致長(zhǎng)期存在各

類數(shù)據(jù)質(zhì)量問題。

2.431、業(yè)務(wù)表現(xiàn)

A指標(biāo)難以共享

A數(shù)據(jù)不一致、不準(zhǔn)確

2.432、問題

＞部分關(guān)鍵業(yè)務(wù)數(shù)據(jù)缺失

＞源系統(tǒng)校驗(yàn)關(guān)系缺失及業(yè)務(wù)人員操作隨意

非現(xiàn)場(chǎng)監(jiān)苜報(bào)表\"

統(tǒng)計(jì)各省分支機(jī)構(gòu)每筆神的再S繳\

由于信貸?W統(tǒng)業(yè)務(wù)A?沒

有填寫或填寫錯(cuò)誤借據(jù)的五級(jí)

信貸管理源系統(tǒng)操作錯(cuò)誤分類信息，導(dǎo)致報(bào)表數(shù)據(jù)不準(zhǔn)

〔確，需要手工補(bǔ)錄修改

信貸管理客75682839綜合廠

戶表

97326762國(guó)鑫資產(chǎn)

客戶號(hào)客戶簡(jiǎn)稱

核心客戶表75682839糧食局糧油綜合

97326762乳山市國(guó)鑫資產(chǎn)

2.5、數(shù)據(jù)應(yīng)用現(xiàn)狀總結(jié)

隨著業(yè)務(wù)的不斷發(fā)展和信息化的不斷深入，需建設(shè)的業(yè)務(wù)系統(tǒng)越

來越多，隨著業(yè)務(wù)系統(tǒng)的數(shù)據(jù)種類不斷豐富完善，數(shù)據(jù)量的不斷增大,

如果不采取有效手段解決數(shù)據(jù)架構(gòu)、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量問題，隨著

信息化建設(shè)的深入，這些問題將像雪球一樣越滾越大，越積越多。

第3章金融大數(shù)據(jù)治理階段目標(biāo)

通過數(shù)據(jù)平臺(tái)和BI應(yīng)用建設(shè)，金融大數(shù)據(jù)將搭建統(tǒng)一的大數(shù)據(jù)

共享和分析平臺(tái)，對(duì)各類業(yè)務(wù)進(jìn)行前瞻性預(yù)測(cè)及分析，為金融各層次

用戶提供統(tǒng)一的決策分析支持，提升數(shù)據(jù)共享與流轉(zhuǎn)能力。

統(tǒng)一制定目標(biāo)和分自定義報(bào)表工具多種格式報(bào)表BI分析工具

行+列的簡(jiǎn)單定義方式

=“篋端畫回/癡

因鼠力Q

云數(shù)據(jù)推送平臺(tái)已實(shí)現(xiàn)了—一

FZz-銀行決策層

主要零售及XXX業(yè)務(wù)系統(tǒng)\\

數(shù)據(jù)清洗、整合，為未來\J

XXX大數(shù)據(jù)數(shù)據(jù)平臺(tái)提供

了豐富的數(shù)據(jù)源。劃分分析主整一/

計(jì)數(shù)據(jù)稹支二77、%濠銀行職能管控層

郃署技木基神二1

[m..芝.1_______

累m題構(gòu)

各次業(yè)務(wù)操作層

POP系統(tǒng)SB管理系統(tǒng)其他業(yè)務(wù)系統(tǒng)

3.1.數(shù)據(jù)平臺(tái)邏輯架構(gòu)

源數(shù)據(jù)數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)應(yīng)用

整合層匯總層二集市縣二

琮合業(yè)務(wù)系統(tǒng)

當(dāng)事人非現(xiàn)場(chǎng)監(jiān)管集市

CM2006

國(guó)際結(jié)算系燒協(xié)議財(cái)會(huì)報(bào)表集市

俵券管理系統(tǒng)

風(fēng)險(xiǎn)報(bào)表集市

外匯資金系統(tǒng)

報(bào)文清算系統(tǒng)當(dāng)事人奧產(chǎn)高管駕駛艙集市

報(bào)價(jià)引挈系統(tǒng)

一

調(diào)

度

數(shù)

據(jù)

管

理

系

統(tǒng)

3.2、數(shù)據(jù)平臺(tái)部署架構(gòu)

省行1：新叫置卻n應(yīng)用做戴均■：1新購(gòu)要+。應(yīng)用隹誠(chéng)均瓶備

................-n

□

省行數(shù)據(jù)自朦務(wù)器

新購(gòu)置劇汨報(bào)&K偉服務(wù)笈（6分）

已力應(yīng)用用務(wù)器（2臺(tái)

“，，IrieHR8H.I.a107/188.1.6.

?■>iUrcport343...................

xBICrcpor-.3.2，「；>：?，1/——,?：：?

析出客，，只依取代更

?IL?客戶■拼我回生

；?strna用單曲tir光?中間業(yè)務(wù)抵友應(yīng)出

?

?一'"Ti

r應(yīng)用汲務(wù)器

新購(gòu)置數(shù)據(jù)罕ftEllffll務(wù)）《（88）I?7

?故據(jù)"煽平臺(tái)應(yīng)HI

>Ri'<lllutFntcrpriKPLinux5

(Advimwd)

>MD1A4.4atcenl百陛冊(cè)務(wù)器

>DataSt8Re8.5EE(4砂如

?明度葉臺(tái)代理U/

□□□smaaii

新聞&

5(Advani:ud)

>?i">h'Kic1I，風(fēng)齡應(yīng)用I

國(guó)發(fā)行內(nèi)網(wǎng)*,'-

部干￡配置出?MO1A期置住

?DS85%八”

?I)sx,5^r7^t||

3.3、建設(shè)目標(biāo)

以大數(shù)據(jù)項(xiàng)目建設(shè)作為契機(jī)，凝聚我行優(yōu)勢(shì)力量，全面梳理數(shù)據(jù)

資源，完善數(shù)據(jù)體系架構(gòu)，自主掌握大數(shù)據(jù)關(guān)鍵技術(shù)，加速大數(shù)據(jù)資

源的開發(fā)利用，將數(shù)據(jù)決策化貫穿到經(jīng)營(yíng)管理全流程，建設(shè)智慧金融,

提升核心競(jìng)爭(zhēng)力。

331、建設(shè)大數(shù)據(jù)基礎(chǔ)設(shè)施，完善全行數(shù)據(jù)體系架構(gòu)

構(gòu)建大數(shù)據(jù)平臺(tái)，實(shí)現(xiàn)更廣泛的半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)集中采

集、存儲(chǔ)、加工、分析和應(yīng)用，極大地豐富我行的信息資源，同現(xiàn)有

的企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)和歷史數(shù)據(jù)存儲(chǔ)系統(tǒng)一起，形成基礎(chǔ)數(shù)據(jù)體系，提

供支撐經(jīng)營(yíng)管理的各類數(shù)據(jù)應(yīng)用。

332、開發(fā)大數(shù)據(jù)資源，支撐全行經(jīng)營(yíng)管理創(chuàng)新

建設(shè)離線數(shù)據(jù)分析、實(shí)時(shí)數(shù)據(jù)/流數(shù)據(jù)分析集群和各類數(shù)據(jù)分析

集市，提供高性能可擴(kuò)展的分布式計(jì)算引擎，通過數(shù)據(jù)挖掘、計(jì)量分

析和機(jī)器學(xué)習(xí)等手段，對(duì)豐富的大數(shù)據(jù)資源進(jìn)行開發(fā)使用，并將數(shù)據(jù)

決策化過程結(jié)合到風(fēng)控、營(yíng)銷、營(yíng)運(yùn)等經(jīng)營(yíng)管理活動(dòng)。

3.3.3、培養(yǎng)大數(shù)據(jù)人才隊(duì)伍，建立大數(shù)據(jù)分析能力

結(jié)合大數(shù)據(jù)項(xiàng)目的落地實(shí)施，建立起一支大數(shù)據(jù)技術(shù)和分析人員

隊(duì)伍，具備自主運(yùn)營(yíng)和開發(fā)大數(shù)據(jù)的能力，以更好推動(dòng)業(yè)務(wù)創(chuàng)新，提

升我行核心競(jìng)爭(zhēng)力。

3.4、數(shù)據(jù)治理目標(biāo)

341、發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題，推動(dòng)大數(shù)據(jù)治理工作的開

展，建立數(shù)據(jù)質(zhì)量檢核系統(tǒng)

＞對(duì)源系統(tǒng)進(jìn)行數(shù)據(jù)質(zhì)量檢核，發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題并統(tǒng)計(jì)影響到

的報(bào)表

?對(duì)數(shù)據(jù)質(zhì)量問題進(jìn)行歸類總結(jié)，分析成因和改進(jìn)建議

?建設(shè)數(shù)據(jù)質(zhì)量檢核系統(tǒng)

342、分析、梳理業(yè)務(wù)系統(tǒng)，推動(dòng)數(shù)據(jù)標(biāo)準(zhǔn)的建立，

統(tǒng)一全行口徑

＞建立基礎(chǔ)標(biāo)準(zhǔn)和指標(biāo)標(biāo)準(zhǔn)框架

?確定標(biāo)準(zhǔn)化范圍，對(duì)重要屬性進(jìn)行標(biāo)準(zhǔn)化

343、建立數(shù)據(jù)倉(cāng)庫(kù)模型框架，優(yōu)化我行數(shù)據(jù)架構(gòu)，

建設(shè)穩(wěn)定、可擴(kuò)展的數(shù)據(jù)倉(cāng)庫(kù)

＞引進(jìn)業(yè)內(nèi)具有先進(jìn)水平的金融數(shù)據(jù)模型，進(jìn)行客戶化改造后，

建成符合某行特點(diǎn)的數(shù)據(jù)倉(cāng)庫(kù)模型框架

A覆蓋某行主要業(yè)務(wù)系統(tǒng)數(shù)據(jù)，以便快速高效的為應(yīng)用系統(tǒng)提供

數(shù)據(jù)

A存儲(chǔ)歷史數(shù)據(jù)，解決新報(bào)表上線才有數(shù)的問題。

?匯總層建設(shè)（共性加工）

3.5、目標(biāo)建設(shè)方法

351、建設(shè)內(nèi)容

分析源系統(tǒng)表數(shù)據(jù)，從及時(shí)性、完整性、準(zhǔn)確性、有效性、一致

性方面對(duì)源系統(tǒng)數(shù)據(jù)進(jìn)行數(shù)據(jù)校驗(yàn)，發(fā)現(xiàn)并記錄數(shù)據(jù)質(zhì)量問題，生成

數(shù)據(jù)質(zhì)量問題報(bào)告。

建設(shè)數(shù)據(jù)質(zhì)量檢核系統(tǒng)，對(duì)源系統(tǒng)基礎(chǔ)業(yè)務(wù)數(shù)據(jù)的進(jìn)行全面的數(shù)

據(jù)質(zhì)量檢查，并實(shí)現(xiàn)重要業(yè)務(wù)數(shù)據(jù)質(zhì)量的周期性動(dòng)態(tài)檢查，對(duì)發(fā)現(xiàn)的

數(shù)據(jù)質(zhì)量問題生成數(shù)據(jù)質(zhì)量報(bào)告，反饋給業(yè)務(wù)部門。

352、工作階段

3.521、源系統(tǒng)分析階段

全面分析主要源業(yè)務(wù)系統(tǒng)。

3.521.1、工作內(nèi)容

＞全面分析和消化主要源業(yè)務(wù)系統(tǒng)

＞重點(diǎn)分析核心業(yè)務(wù)系統(tǒng)和信貸兩個(gè)系統(tǒng)

3.521.2、工作依據(jù)

＞源系統(tǒng)文檔：《源系統(tǒng)操作手冊(cè)》、《源業(yè)務(wù)系統(tǒng)設(shè)計(jì)說明書》、

《源系統(tǒng)數(shù)據(jù)字典》

A源系統(tǒng)環(huán)境及調(diào)研數(shù)據(jù)

.3>工作重點(diǎn)

A系統(tǒng)內(nèi)：梳理業(yè)務(wù)流程、業(yè)務(wù)邏輯、業(yè)務(wù)關(guān)聯(lián)、數(shù)據(jù)庫(kù)表和字

段的設(shè)計(jì)

A系統(tǒng)間：梳理業(yè)務(wù)關(guān)聯(lián)關(guān)系、數(shù)據(jù)關(guān)聯(lián)關(guān)系

3.522、數(shù)據(jù)質(zhì)量問題檢查階段

根據(jù)制定的檢查規(guī)則編寫程序，對(duì)源系統(tǒng)數(shù)據(jù)進(jìn)行檢查。

.1^工作內(nèi)容

A梳理和制定數(shù)據(jù)質(zhì)量檢查規(guī)則，定義標(biāo)準(zhǔn)模板

A依據(jù)數(shù)據(jù)檢查規(guī)則，編寫程序，對(duì)核心業(yè)務(wù)系統(tǒng)、信貸管理系

統(tǒng)的進(jìn)行檢查

3.5.222、工作依據(jù)

?系統(tǒng)調(diào)研和分析成果

A數(shù)據(jù)質(zhì)量檢查規(guī)則的依據(jù)調(diào)研成果的以下內(nèi)容進(jìn)行梳理：

?業(yè)務(wù)流程、業(yè)務(wù)邏輯

令數(shù)據(jù)邏輯設(shè)計(jì)

令報(bào)表數(shù)據(jù)應(yīng)用

.3>工作重點(diǎn)

重點(diǎn)報(bào)表用到的表進(jìn)行分析

3.523、數(shù)據(jù)質(zhì)量問題分析階段

分析有質(zhì)量問題數(shù)據(jù)對(duì)現(xiàn)有應(yīng)用的影響；提出解決措施。

3.523.1、工作內(nèi)容

＞分析有質(zhì)量問題數(shù)據(jù)對(duì)現(xiàn)有報(bào)表應(yīng)用的影響

＞對(duì)數(shù)據(jù)質(zhì)量問題的成因進(jìn)行分析和總結(jié)

＞對(duì)數(shù)據(jù)質(zhì)量問題的解決措施進(jìn)行分析和總結(jié)

3.523.2、工作依據(jù)

A數(shù)據(jù)質(zhì)量檢查結(jié)果

＞源數(shù)據(jù)與報(bào)表依賴關(guān)系

3.523.3、工作重點(diǎn)

重點(diǎn)分析報(bào)表平臺(tái)的1104等報(bào)表存在的部分?jǐn)?shù)據(jù)質(zhì)量問題。

3.6、預(yù)期建設(shè)效益

361、實(shí)現(xiàn)數(shù)據(jù)共享

通過數(shù)據(jù)平臺(tái)實(shí)現(xiàn)數(shù)據(jù)集中，確保金融大數(shù)據(jù)各級(jí)部門均可在保

證數(shù)據(jù)隱私和安全的前提下使用數(shù)據(jù)，充分發(fā)揮數(shù)據(jù)作為企業(yè)重要資

產(chǎn)的業(yè)務(wù)價(jià)值。

362、加強(qiáng)業(yè)務(wù)合作

實(shí)現(xiàn)分散在供應(yīng)鏈金融、人人貸、保理等各個(gè)業(yè)務(wù)系統(tǒng)中的數(shù)據(jù)

在數(shù)據(jù)平臺(tái)中的集中和整合，建立單一的產(chǎn)品、客戶等數(shù)據(jù)的企業(yè)級(jí)

視圖，有效促進(jìn)業(yè)務(wù)的集成和協(xié)作，并為企業(yè)級(jí)分析、交叉銷售提供

基礎(chǔ)。

363、促進(jìn)業(yè)務(wù)創(chuàng)新

金融大數(shù)據(jù)業(yè)務(wù)人員可以基于明細(xì)、可信的數(shù)據(jù)，進(jìn)行多維分析

和數(shù)據(jù)挖掘，為金融業(yè)務(wù)創(chuàng)新（客戶服務(wù)創(chuàng)新、產(chǎn)品創(chuàng)新等）創(chuàng)造了

有利條件。

364、提升建設(shè)效率

通過數(shù)據(jù)平臺(tái)對(duì)數(shù)據(jù)進(jìn)行集中，為管理分析、挖掘預(yù)測(cè)類等系統(tǒng)

提供一致的數(shù)據(jù)基礎(chǔ)，改變現(xiàn)有系統(tǒng)數(shù)據(jù)來源多、數(shù)據(jù)處理復(fù)雜的現(xiàn)

狀，實(shí)現(xiàn)應(yīng)用系統(tǒng)建設(shè)模式的轉(zhuǎn)變，提升相關(guān)IT系統(tǒng)的建設(shè)和運(yùn)行

效率。

365、改善數(shù)據(jù)質(zhì)量

從中長(zhǎng)期看，數(shù)據(jù)倉(cāng)庫(kù)對(duì)金融大數(shù)據(jù)分散在各個(gè)業(yè)務(wù)系統(tǒng)中的數(shù)

據(jù)整合、清洗，有助于企業(yè)整體數(shù)據(jù)質(zhì)量的改善，提高的數(shù)據(jù)的實(shí)用

性。

第4章金融大數(shù)據(jù)建設(shè)總體規(guī)劃

4.1、功能需求

客戶畫像

?個(gè)人客戶里像

?企業(yè)客戶畫像

運(yùn)營(yíng)優(yōu)化精準(zhǔn)營(yíng)銷

?市場(chǎng)和渠道分析銀行大數(shù)據(jù)?交叉營(yíng)銷

?產(chǎn)品優(yōu)化?個(gè)性化推薦

?輿情分析?客戶生命周期管理

風(fēng)險(xiǎn)管控

?中小企業(yè)貸款風(fēng)險(xiǎn)評(píng)估

?實(shí)時(shí)欺詐交易分柝

?反洗錢業(yè)務(wù)分析

4.1」、個(gè)人和企業(yè)畫像

國(guó)內(nèi)不少金融已經(jīng)開始嘗試通過大數(shù)據(jù)來驅(qū)動(dòng)業(yè)務(wù)運(yùn)營(yíng)，為個(gè)人

客戶畫像和企業(yè)客戶“畫像”。個(gè)人客戶畫像包括人口統(tǒng)計(jì)學(xué)特征、

消費(fèi)能力數(shù)據(jù)、興趣數(shù)據(jù)、風(fēng)險(xiǎn)偏好等；企業(yè)客戶畫像包括企業(yè)的生

產(chǎn)、流通、運(yùn)營(yíng)、財(cái)務(wù)、銷售和客戶數(shù)據(jù)、相關(guān)產(chǎn)業(yè)鏈上下游等數(shù)據(jù)。

客戶畫像作用：

1、用戶的所有屬性特征、訂單特征、行為特征集合到一個(gè)系統(tǒng)

中，然后只需要在一個(gè)報(bào)表層面，只需要輸入用戶ID、手機(jī)號(hào)、用

戶名等即可實(shí)現(xiàn)完整的用戶信息查詢。

2、當(dāng)處理用戶的私人財(cái)務(wù)信息時(shí)候，用戶喜歡一對(duì)一的個(gè)性化

服務(wù)。用戶畫像可以展示用戶的每一次活動(dòng)，例如用戶注資、消費(fèi)等

主要的行為。

3、通過軟件的實(shí)時(shí)分析，可以及時(shí)跟蹤用戶的注冊(cè)、交易等關(guān)

鍵環(huán)節(jié)遇到的問題。

4、實(shí)時(shí)衡量廣告活動(dòng)的有效性，通過實(shí)時(shí)在線訪客工作，及時(shí)

評(píng)估活動(dòng)的引流用戶的活動(dòng)參與性?？梢约皶r(shí)調(diào)整廣告的投放策略,

減少?gòu)V告的浪費(fèi)。

社交畫他

客戶畫像：在金融方面有非常大的潛力，市面上有一些完善的軟

件和解決方案，但能夠真正打入到金融內(nèi)部的比較少，同時(shí)金融在手

機(jī)端和電商方面有很大的突破，對(duì)于大數(shù)據(jù)的信息也非常的需要。

建議：通過市面上的軟件進(jìn)行。em。

4.1.2、實(shí)現(xiàn)精準(zhǔn)營(yíng)銷

在客戶“畫像”的基礎(chǔ)上，金融業(yè)可以有效地開展精準(zhǔn)營(yíng)銷。例

如，根據(jù)客戶的實(shí)時(shí)狀態(tài)來進(jìn)行