電子商務(wù)課件 數(shù)據(jù)存儲與查詢 課件

1、電子商務(wù)課件第三講電子商務(wù)課件第三講- -數(shù)據(jù)存儲數(shù)據(jù)存儲與查詢與查詢選課及作業(yè)提交情況2課前回憶 第一次 Web站點(diǎn)的根本結(jié)構(gòu) 性能度量 訪問量變化對架構(gòu)的影響 第二次 前端：性能優(yōu)化、Cache 性能度量工具 瀏覽器本地cache CDN與反向代理 memcached3效勞架構(gòu)6第三講 數(shù)據(jù)存儲與查詢討論 如何存儲數(shù)據(jù)？ 你手里有什么武器？8系統(tǒng)架構(gòu) 組件 組件間的連接關(guān)系 LAMP: Linux, Apache, MySQL, PHP 應(yīng)用編程框架 架構(gòu)設(shè)計(jì)的價(jià)值觀 架構(gòu)圍繞設(shè)計(jì)需要，而不是反之業(yè)務(wù)驅(qū)動 選擇適宜的技術(shù)大公司就好嗎？新技術(shù)就酷嗎？ 不要嘗試解決所有問題 技術(shù)并不能解決所有

2、問題9以“存儲為例 結(jié)構(gòu) 文件 對象 表結(jié)構(gòu)化 訪問模式 實(shí)時(shí)讀寫 批量寫、實(shí)時(shí)讀 流式讀 掃描 / 范圍查詢 突發(fā)10 數(shù)據(jù)特點(diǎn) 大小 數(shù)據(jù)的關(guān)系 追加/更新 實(shí)時(shí)性 實(shí)時(shí)性 時(shí)效性 一致性以“存儲為例 矛盾 延遲與吞吐率 隨機(jī)與順序 規(guī)模與實(shí)時(shí)性 模型 B+ Tree實(shí)時(shí)、隨機(jī) Log-based 批量、順序 化解矛盾 弱化需求？發(fā)現(xiàn)局部性？組合模型？1112131415數(shù)據(jù)庫系統(tǒng) 常見的數(shù)據(jù)庫系統(tǒng) 商業(yè)軟件 MS SQL Server IBM DB2 Oracle 開源軟件 mySQL postgreSQL phpMyAdmin 圖形化的mySQL管理界面16數(shù)據(jù)庫系統(tǒng) 管理關(guān)系型數(shù)據(jù)的

3、軟件系統(tǒng) 庫-表-記錄，索引，視圖 對數(shù)據(jù)庫的訪問：結(jié)構(gòu)化查詢語言SQL 數(shù)據(jù)定義語言DDL：建立、更改和刪除庫/表/視圖 數(shù)據(jù)操作語言DML: 數(shù)據(jù)庫根本操作：增刪改查 數(shù)據(jù)控制語言DCL: 控制平安性和事務(wù)操作 數(shù)據(jù)庫應(yīng)用程序通過一定的編程接口，向DBMS發(fā)送SQL請求，獲得結(jié)果 ODBC: 開放數(shù)據(jù)庫互聯(lián) JDBC: JAVA API for ODBC17一個JDBC連接數(shù)據(jù)庫的例子1.String url = jdbc:odbc:driver=Microsoft Access Driver (*.mdb);DBQ=e:db3.mdb; 2.String user = sa; 3.Str

4、ing password = psa; 4.Connection conn=DriverManager.getConnection(url,user,password); 5.Statement stmt = conn.createStatement(6. ResultSet.TYPE_SCROLL_SENSITIVE, 7.); 8.String sql=select * from 222; 9.ResultSet rs=stmt.executeQuery(sql); 10. while(rs.next() 11. System.print(rs.getString(1); 12. Syst

5、em.print(rs.getString(2);13. 14. out.print(數(shù)據(jù)庫操作成功，恭喜); 15. rs.close(); 16. stmt.close(); 17. conn.close(); 數(shù)據(jù)庫如何存儲數(shù)據(jù)？ 復(fù)習(xí)一下數(shù)據(jù)結(jié)構(gòu)18MySQL19思考：什么會成為瓶頸 數(shù)據(jù)量大 訪問量大 兩個方向的擴(kuò)展20思考：什么會成為瓶頸 讀寫請求的別離 多個副本 一致性21分布式數(shù)據(jù)庫 MySQL的主從式配置原理22分布式數(shù)據(jù)庫 OceanBase 淘寶23思考：什么會成為瓶頸 數(shù)據(jù)庫的主從配置24Apachemod_php4pear DBMySQLApachemod_php4p

6、ear DBMySQLMySQLMySQL思考：什么會成為瓶頸 配置數(shù)據(jù)庫集群25思考：什么會成為瓶頸 分庫、分表26分布式系統(tǒng)的一致性 一個例子A. P1(1) | P2(1) ; P1(2) | P2(2) will produce x = z = 7, y = q = 3B. P1(1) ; P2(1) ; P1(2) | P2(2) will produce results same as S1C. P2(1) ; P1(1) ; P1(2) | P2(2) will produce results same as S227Initially, x = 5, y = 2P11: x :

7、= x + y 1: y := x - y P22: z := x 2: q := y 強(qiáng)一致性 A28 B CRead(x)=v1Read(x)=v1Read(x)=v1Write(x)=v2Read(x)=v2Read(x)=v2Read(x)=v2弱一致性 A29 B CRead(x)=v1Read(x)=v1Read(x)=v1Write(x)=v2Read(x)=v2Read(x)=v2Read(x)=v2Read(x)=v1Read(x)=v2分組作業(yè) 3a. 配置MySQL的主從模式 在搭建系統(tǒng)根底上，實(shí)現(xiàn)數(shù)據(jù)庫的讀寫別離 給出報(bào)告 3b. 配置Memcached+MySQL 配置memcached, 提供數(shù)據(jù)庫緩存 利用MySQL內(nèi)置的機(jī)制？ 兩個也可結(jié)合起來做。3031參考文獻(xiàn)與延伸閱讀 Steve Souder, 高性能網(wǎng)站建設(shè)進(jìn)階指南，O