mysql分布式交易系統(tǒng)架構(gòu)設(shè)計(jì)

About

ME(

/wubx

)泰岳互聯(lián)網(wǎng)學(xué)院高級講師http:

@?Blog:??群個(gè)人中國CMUG

組織者,

MySQL

者10年+專職MySQL

DBA，豐富的Support支撐能力熟悉MySQL高可用方案豐富的大型系統(tǒng)后端

規(guī)劃設(shè)計(jì)熟悉多機(jī)房架構(gòu)設(shè)計(jì)及運(yùn)維豐富的自動(dòng)化平臺開發(fā)及實(shí)踐http:

2大綱交易系統(tǒng)介紹MySQL架構(gòu)中元素交易系統(tǒng)如何使用MySQL總結(jié)http:

3交易系統(tǒng)介紹什么算是交易系統(tǒng)做為DBA關(guān)注是交易系統(tǒng)后端DB及架構(gòu)支撐傳統(tǒng)的交易系統(tǒng)大多是運(yùn)行在商業(yè)數(shù)據(jù)庫上特點(diǎn)：數(shù)據(jù)一致CAP的選擇事務(wù)處理http:

4交易系統(tǒng)介紹交易系統(tǒng)和MySQL國家主張系統(tǒng)自主化開源化互聯(lián)網(wǎng)方面人才流失到傳統(tǒng)企業(yè)成功案例淘寶通…h(huán)ttp:

5大綱交易系統(tǒng)介紹MySQL架構(gòu)中元素交易系統(tǒng)如何使用MySQL總結(jié)http:

6MySQL架構(gòu)中元素MySQL處理特點(diǎn)每個(gè)Query只能使用一個(gè)core沒有執(zhí)行計(jì)劃緩存MySQL是基于 引擎解決問題:

Innodb,

Tokudb,

Inforbright,

…MySQL被認(rèn)為：單表容量比較小單庫容量比較小事務(wù)處理能力弱數(shù)據(jù)一致性弱http:

7MySQL架構(gòu)中元素MySQL現(xiàn)在情況：可以利用64個(gè)core，bp分配上百G也沒什么問題PCI-E卡，讓MySQL實(shí)現(xiàn)一次飛躍單表物理大小30-50G單庫4T以上基于分布式架構(gòu)設(shè)計(jì)http:

8MySQL架構(gòu)中元素NoSQL

&

CacheRedisHbaseMongoDB消息隊(duì)列Apache

kafka…h(huán)ttp:

9大綱交易系統(tǒng)介紹MySQL架構(gòu)中元素交易系統(tǒng)如何使用MySQL總結(jié)http:

10交易系統(tǒng)如何使用MySQL傳統(tǒng)交易系統(tǒng)App中間件DB商業(yè)中間件商業(yè)DBhttp:

11交易系統(tǒng)如何使用MySQL傳統(tǒng)交易系統(tǒng)好處結(jié)構(gòu)簡單方案成熟，很多商業(yè)公司支持入行

要求比較低缺點(diǎn)：架構(gòu)成本，硬件成本比較高結(jié)構(gòu)固定，難于升級…h(huán)ttp:

12交易系統(tǒng)如何使用MySQL基于MySQL規(guī)劃AppDALDB自主研發(fā)分片MYSQL集群DBDBhttp:

13交易系統(tǒng)如何使用MySQL的交易系統(tǒng)使用MySQL數(shù)據(jù)一致性事務(wù)處理分布式架構(gòu)（參考以前的）互聯(lián)網(wǎng)中技術(shù)在交易系統(tǒng)有什么用？Cache

？NoSQL？消息隊(duì)列？http:

14交易系統(tǒng)如何使用MySQLMySQL目前在數(shù)據(jù)處理上特點(diǎn)：數(shù)據(jù)一致性可以做到一個(gè)事務(wù)級的保障事務(wù)處理方面也有保障唯一不足：拆分后，原來的事務(wù)有可能需要拆分到多個(gè)DB上怎么辦？XA事務(wù)二階段提交三階段提交http:

15交易系統(tǒng)如何使用MySQL的交易系統(tǒng)使用MySQLXA事務(wù)（二階段提交）三階段提交網(wǎng)絡(luò)超時(shí)如何處理？是不是可以考慮基于事件處理？http:

16交易系統(tǒng)如何使用MySQL基于事件的架構(gòu)AppDALDB1DB3DB2消息隊(duì)列http:

17交易系統(tǒng)如何使用MySQL基于事件的架構(gòu)http:

18如果在MySQL的分布式設(shè)計(jì)上這兩個(gè)用戶不在一個(gè)DB里怎么處理？DAL層需要能定位出來用戶屬于那個(gè)DB每個(gè)DB建立一個(gè)message_queue參考：銀行帳號系統(tǒng)：總帳+明細(xì)處理Begin;Update

accountset

fund

=fund

-1000

where

user_id=1001;Update

accountset

fund

=fund where

user_id=2002;Commit;交易系統(tǒng)如何使用MySQL基于message_queue處理跨節(jié)點(diǎn)的事務(wù)DB1:message_queue

入隊(duì)：1001的操作DB2: message_queue

入隊(duì)：2002的操作實(shí)現(xiàn)數(shù)據(jù)的最終一致性基于事件操作的好處：無鎖實(shí)現(xiàn)，響應(yīng)更快實(shí)現(xiàn)最終一致性http:

19交易系統(tǒng)如何使用MySQL異常環(huán)境處理：一個(gè)成功的設(shè)計(jì)，也是基于失敗場景處理的設(shè)計(jì)事務(wù)入隊(duì)，需要全局事務(wù)ID，依賴交易網(wǎng)關(guān)如果做生故障依賴消息隊(duì)列恢復(fù)，如果恢復(fù)不了，刪除相應(yīng)