工業(yè)信息管理課件 第五章 數(shù)據(jù)庫技術(shù)

1、第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)1 5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論 5.2 5.2 關(guān)系模型關(guān)系模型 5.3 5.3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 本章小結(jié)本章小結(jié) 第第五五章章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)25.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論什么是數(shù)據(jù)庫什么是數(shù)據(jù)庫: 數(shù)據(jù)庫（數(shù)據(jù)庫（Database）是一個數(shù)據(jù)的集合，可）是一個數(shù)據(jù)的集合，可以按照數(shù)據(jù)的邏輯結(jié)構(gòu)對其進(jìn)行組織和存取。以按照數(shù)據(jù)的邏輯結(jié)構(gòu)對其進(jìn)行組織和存取。 數(shù)據(jù)庫是由截然不同的兩個部分組成：數(shù)據(jù)庫是由截然不同的兩個部分組成： 數(shù)據(jù)本身；數(shù)據(jù)的邏輯結(jié)構(gòu)數(shù)據(jù)本身；數(shù)據(jù)的邏輯結(jié)構(gòu)第五

2、章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)3數(shù)據(jù)組織技術(shù)界面物理組織比特字節(jié)字字符 記錄文件數(shù)據(jù)庫數(shù)據(jù)倉庫第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)4 人工管理階段人工管理階段 文件系統(tǒng)階段文件系統(tǒng)階段 數(shù)據(jù)庫系統(tǒng)階段數(shù)據(jù)庫系統(tǒng)階段隨著計算機(jī)硬件和軟件的發(fā)展，以及管理隨著計算機(jī)硬件和軟件的發(fā)展，以及管理應(yīng)用的需要，數(shù)據(jù)管理經(jīng)歷了如下發(fā)展階段應(yīng)用的需要，數(shù)據(jù)管理經(jīng)歷了如下發(fā)展階段。5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)5 背景背景2020世紀(jì)世紀(jì)5050年代中期前年代中期前, ,計算機(jī)發(fā)展水平低計算機(jī)發(fā)展水平低 主要特點：主要特點：數(shù)據(jù)是程序的組成部分，修改數(shù)據(jù)必須修改數(shù)據(jù)是

3、程序的組成部分，修改數(shù)據(jù)必須修改程序。處理時數(shù)據(jù)隨程序一道送入內(nèi)存，用完后全部撤出，程序。處理時數(shù)據(jù)隨程序一道送入內(nèi)存，用完后全部撤出，不能保留。程序和數(shù)據(jù)的關(guān)系如下：不能保留。程序和數(shù)據(jù)的關(guān)系如下： 5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論 人工管理階段人工管理階段應(yīng)用程序應(yīng)用程序1應(yīng)用程序應(yīng)用程序2應(yīng)用程序應(yīng)用程序n數(shù)據(jù)組數(shù)據(jù)組1數(shù)據(jù)組數(shù)據(jù)組2數(shù)據(jù)組數(shù)據(jù)組n第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)6 背景背景2020世紀(jì)世紀(jì)5050年代后期到年代后期到6060年代中期，計算機(jī)硬件方面年代中期，計算機(jī)硬件方面出現(xiàn)直接存取設(shè)備磁盤，軟件方面出現(xiàn)了操作系統(tǒng)出現(xiàn)直接存取設(shè)備磁盤，軟件方面出現(xiàn)了操作系

4、統(tǒng) 主要特點：主要特點：數(shù)據(jù)管理方面，數(shù)據(jù)被組織到文件內(nèi)存儲在數(shù)據(jù)管理方面，數(shù)據(jù)被組織到文件內(nèi)存儲在磁帶、磁盤上，可以反復(fù)使用和保存。程序與數(shù)據(jù)的關(guān)系如磁帶、磁盤上，可以反復(fù)使用和保存。程序與數(shù)據(jù)的關(guān)系如下：下： 5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論 文件系統(tǒng)階段文件系統(tǒng)階段應(yīng)用程序應(yīng)用程序1應(yīng)用程序應(yīng)用程序2應(yīng)用程序應(yīng)用程序n數(shù)據(jù)組數(shù)據(jù)組1數(shù)據(jù)組數(shù)據(jù)組2數(shù)據(jù)組數(shù)據(jù)組n 文件文件管理系統(tǒng)管理系統(tǒng)第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)7 背景背景: :2020世紀(jì)世紀(jì)6060年代后期以來，計算機(jī)硬件方面出現(xiàn)大容年代后期以來，計算機(jī)硬件方面出現(xiàn)大容量磁盤，軟件方面出現(xiàn)數(shù)據(jù)庫管理系統(tǒng)量磁盤，軟件

5、方面出現(xiàn)數(shù)據(jù)庫管理系統(tǒng) 主要特點：主要特點：面向全組織的復(fù)雜數(shù)據(jù)結(jié)構(gòu)。數(shù)據(jù)冗余度小，面向全組織的復(fù)雜數(shù)據(jù)結(jié)構(gòu)。數(shù)據(jù)冗余度小，易于擴(kuò)充。程序與數(shù)據(jù)的關(guān)系如下：易于擴(kuò)充。程序與數(shù)據(jù)的關(guān)系如下：5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論 數(shù)據(jù)庫階段數(shù)據(jù)庫階段數(shù)據(jù)庫數(shù)據(jù)庫應(yīng)用程序應(yīng)用程序1應(yīng)用程序應(yīng)用程序2應(yīng)用程序應(yīng)用程序n 數(shù)據(jù)庫數(shù)據(jù)庫管理系統(tǒng)管理系統(tǒng)第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)8面向全組織的復(fù)雜的數(shù)據(jù)結(jié)構(gòu)面向全組織的復(fù)雜的數(shù)據(jù)結(jié)構(gòu) ，數(shù)據(jù)冗余度小，易擴(kuò)充，數(shù)據(jù)冗余度小，易擴(kuò)充 學(xué)生選課記錄學(xué)生選課記錄學(xué)生基本記錄學(xué)生基本記錄學(xué)號學(xué)號性別性別姓名姓名系別系別年齡年齡政治面貌政治面貌籍貫籍貫家

6、庭出身家庭出身日期日期地點地點學(xué)歷名學(xué)歷名課程名課程名學(xué)號學(xué)號 學(xué)分學(xué)分日期日期獎懲條目獎懲條目姓名姓名與本人關(guān)系與本人關(guān)系詳細(xì)情況詳細(xì)情況課程號課程號課程名課程名學(xué)生人事記錄學(xué)生人事記錄學(xué)生學(xué)籍記錄學(xué)生學(xué)籍記錄獎懲情況記錄獎懲情況記錄家庭成員記錄家庭成員記錄學(xué)生學(xué)學(xué)生學(xué)籍管理籍管理學(xué)生檔學(xué)生檔案管理案管理學(xué)生選學(xué)生選課管理課管理5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論 特點特點1 1第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)9 實現(xiàn)數(shù)據(jù)實現(xiàn)數(shù)據(jù)共共享享 減少數(shù)據(jù)的冗余度減少數(shù)據(jù)的冗余度 數(shù)據(jù)的一致性和完整性好數(shù)據(jù)的一致性和完整性好 數(shù)據(jù)和程序之間的獨立性好數(shù)據(jù)和程序之間的獨立性好 有較高的數(shù)據(jù)安

7、全性有較高的數(shù)據(jù)安全性 并發(fā)控制性好并發(fā)控制性好5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論 特點特點2 2第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)10 數(shù)據(jù)庫（數(shù)據(jù)庫（DatabaseDatabase）：）：以一定組織方式存儲的相以一定組織方式存儲的相關(guān)數(shù)據(jù)的有序集合。關(guān)數(shù)據(jù)的有序集合。 數(shù)據(jù)庫管理系統(tǒng)：數(shù)據(jù)庫管理系統(tǒng)：用戶與數(shù)據(jù)庫之間的一層數(shù)據(jù)用戶與數(shù)據(jù)庫之間的一層數(shù)據(jù)管理軟件，提供訪問數(shù)據(jù)庫的方法，數(shù)據(jù)庫的建管理軟件，提供訪問數(shù)據(jù)庫的方法，數(shù)據(jù)庫的建立、數(shù)據(jù)的組織、查詢、立、數(shù)據(jù)的組織、查詢、操縱、操縱、控制等功能?？刂频裙δ?。數(shù)據(jù)庫數(shù)據(jù)庫數(shù)據(jù)庫管理系統(tǒng)數(shù)據(jù)庫管理系統(tǒng)應(yīng)用系統(tǒng)應(yīng)用系統(tǒng)用戶用戶5

8、.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論 構(gòu)成構(gòu)成第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)11 數(shù)據(jù)庫管理系統(tǒng)組成：數(shù)據(jù)庫管理系統(tǒng)組成： DBMS引擎：引擎：接收查詢請求接收查詢請求數(shù)據(jù)定義子系統(tǒng)：數(shù)據(jù)定義子系統(tǒng)：定義文件結(jié)構(gòu)定義文件結(jié)構(gòu)數(shù)據(jù)操作子系統(tǒng)：數(shù)據(jù)操作子系統(tǒng)：信息處理信息處理應(yīng)用程序生成子系統(tǒng)：應(yīng)用程序生成子系統(tǒng)：開發(fā)工具開發(fā)工具數(shù)據(jù)管理子系統(tǒng)：數(shù)據(jù)管理子系統(tǒng)：備份恢復(fù)等備份恢復(fù)等5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論 功能功能第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)125.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫模型數(shù)據(jù)庫模型: 層次模型：一種數(shù)據(jù)從頂而下或倒掛樹的結(jié)構(gòu)層次模型：

9、一種數(shù)據(jù)從頂而下或倒掛樹的結(jié)構(gòu)進(jìn)行組織進(jìn)行組織 網(wǎng)狀模型：層次模型的擴(kuò)展一個屬記錄可以有網(wǎng)狀模型：層次模型的擴(kuò)展一個屬記錄可以有多個首記錄多個首記錄 關(guān)系模型：以表格的形式關(guān)系模型：以表格的形式行列的形式組織數(shù)行列的形式組織數(shù)據(jù)據(jù) 面向?qū)ο竽Ｐ停簩?shù)據(jù)與數(shù)據(jù)處理過程綜合在面向?qū)ο竽Ｐ停簩?shù)據(jù)與數(shù)據(jù)處理過程綜合在一起的數(shù)據(jù)庫模型一起的數(shù)據(jù)庫模型第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)13 5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論-層次數(shù)據(jù)庫模型層次數(shù)據(jù)庫模型項目1員工1部門3部門2部門1員工2員工4員工3員工5員工7第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)145.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論

10、-網(wǎng)狀模型網(wǎng)狀模型項目A項目B部門1部門2部門3第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)15 實體關(guān)系模型，實體關(guān)系模型，Entity Relationship Diagram 是描述數(shù)據(jù)屬性及其關(guān)系的圖型方法是描述數(shù)據(jù)屬性及其關(guān)系的圖型方法 實體：實體：人、地點、物體、事件、概念等人、地點、物體、事件、概念等(通用類通用類) 實體屬性：實體屬性：描述實體的數(shù)據(jù)項，姓名、地址等特描述實體的數(shù)據(jù)項，姓名、地址等特性性 關(guān)系：關(guān)系：有關(guān)若干實體的活動（有關(guān)若干實體的活動（Process），訂購等），訂購等5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論 E-RE-R模型模型第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)

11、16維修商維修商設(shè)備設(shè)備維修維修名稱名稱地址地址電話號電話號設(shè)備號設(shè)備號類型類型地點地點實體實體關(guān)系關(guān)系實體屬性實體屬性MIS, Robert A. Schultheis5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論 E-RE-R模型示例模型示例1 1第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)17班級班級成績成績組成組成學(xué)生學(xué)生學(xué)生人數(shù)學(xué)生人數(shù)選修選修課程課程講授講授教師教師參考書參考書1nnm1nm5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論 E-RE-R模型示例模型示例2 2第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)18學(xué)生學(xué)生學(xué)號學(xué)號姓名姓名性別性別年齡年齡班級班級班級編號班級編號 所屬專業(yè)系所屬專業(yè)系課

12、程課程課程號課程號課程名課程名學(xué)分學(xué)分教師教師教師號教師號姓名姓名性別性別年齡年齡職稱職稱參考書參考書書號書號書名書名內(nèi)容提要內(nèi)容提要價格價格5.1 5.1 數(shù)據(jù)庫系統(tǒng)概論數(shù)據(jù)庫系統(tǒng)概論 E-RE-R模型示例模型示例3 3返回返回第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)19學(xué)生登記表，學(xué)生登記表，Students屬性名屬性名（列名）（列名）記錄記錄關(guān)系模型的數(shù)據(jù)結(jié)構(gòu)是個二維表關(guān)系模型的數(shù)據(jù)結(jié)構(gòu)是個二維表學(xué)號學(xué)號姓名姓名性別性別系別系別年齡年齡籍貫籍貫95001李勇李勇男男計算機(jī)計算機(jī)20江蘇江蘇95002劉晨劉晨女女信息信息19山東山東95003王名王名女女?dāng)?shù)學(xué)數(shù)學(xué)18北京北京95004張立張立男男

13、計算機(jī)計算機(jī)19北京北京 95700楊曉冬楊曉冬男男計算機(jī)計算機(jī)21山西山西屬性（列）屬性（列）主鍵主鍵5.2 5.2 關(guān)系模型關(guān)系模型 數(shù)據(jù)結(jié)構(gòu)數(shù)據(jù)結(jié)構(gòu)第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)20結(jié)構(gòu)化查詢語言結(jié)構(gòu)化查詢語言（Structured Query Language，SQL）是一種功能強(qiáng)大的數(shù)據(jù)庫語言，用于完成數(shù)是一種功能強(qiáng)大的數(shù)據(jù)庫語言，用于完成數(shù)據(jù)庫的操作任務(wù)。如數(shù)據(jù)更新、檢索。據(jù)庫的操作任務(wù)。如數(shù)據(jù)更新、檢索。SQL功能功能SQL命令命令數(shù)據(jù)定義數(shù)據(jù)定義 CREATE，DROP，ALTER數(shù)據(jù)更新數(shù)據(jù)更新 INSERT，UPDATE，DELETE數(shù)據(jù)查詢數(shù)據(jù)查詢 SELECT數(shù)據(jù)控

14、制數(shù)據(jù)控制 GRANE，REVOKE5.2 5.2 關(guān)系模型關(guān)系模型 數(shù)據(jù)操作數(shù)據(jù)操作第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)21SELECT * FROM students WHERE Department=計算機(jī)計算機(jī) S_no S_name S_gender Department Age Place 95001 李勇李勇 男男 計算機(jī)計算機(jī) 20 江蘇江蘇 95004 張立張立 男男 計算機(jī)計算機(jī) 19 北京北京 95700 楊曉冬楊曉冬 男男 計算機(jī)計算機(jī) 21 山西山西 UPDATE students SET Age=20 WHERE S_no =95004INSERT INTO stud

15、ents VALUES(95060, 王英王英,女女 ,物物理理, 19,浙江浙江)5.2 5.2 關(guān)系模型關(guān)系模型 數(shù)據(jù)操作示例數(shù)據(jù)操作示例第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)225.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 產(chǎn)生背景產(chǎn)生背景1 1 數(shù)據(jù)庫系統(tǒng)作為數(shù)據(jù)管理手段，主要用于事務(wù)處理數(shù)據(jù)庫系統(tǒng)作為數(shù)據(jù)管理手段，主要用于事務(wù)處理 盡管數(shù)據(jù)庫在事務(wù)處理方面的應(yīng)用獲得了巨大的成功，盡管數(shù)據(jù)庫在事務(wù)處理方面的應(yīng)用獲得了巨大的成功，但它對分析處理但它對分析處理 的支持一直不能令人滿意的支持一直不能令人滿意 OLTP面對的是操作人員和低層管理人員，面對的是操作人員和低層管理人員，OLAP 面對面對的

16、是決策人員和高層管理人員，因而數(shù)據(jù)的特點和處的是決策人員和高層管理人員，因而數(shù)據(jù)的特點和處理明顯不同理明顯不同 事務(wù)處理與分析處理具有極不相同的性質(zhì)，直接使用事務(wù)處理與分析處理具有極不相同的性質(zhì)，直接使用事務(wù)處理環(huán)境來支持事務(wù)處理環(huán)境來支持OLAP是極困難的是極困難的第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)235.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 聯(lián)機(jī)分析處理聯(lián)機(jī)分析處理 數(shù)據(jù)倉庫僅是進(jìn)行分析決策的基礎(chǔ)，還必須由強(qiáng)有力數(shù)據(jù)倉庫僅是進(jìn)行分析決策的基礎(chǔ)，還必須由強(qiáng)有力的工具進(jìn)行分析和決策才能體現(xiàn)其在管理和決策方面的工具進(jìn)行分析和決策才能體現(xiàn)其在管理和決策方面的價值。的價值。 OLAP(On-Line

17、 Analytical Processing )是一門軟件技術(shù)，是一門軟件技術(shù)，專門設(shè)計用于支持復(fù)雜分析操作、側(cè)重對決策人員和專門設(shè)計用于支持復(fù)雜分析操作、側(cè)重對決策人員和高層管理人員的決策支持，可以應(yīng)分析人員要求快速、高層管理人員的決策支持，可以應(yīng)分析人員要求快速、靈活地進(jìn)行大數(shù)據(jù)量的復(fù)雜查詢處理，并以直觀的形靈活地進(jìn)行大數(shù)據(jù)量的復(fù)雜查詢處理，并以直觀的形式提供查詢結(jié)果。式提供查詢結(jié)果。 定義：用來傳送和存儲數(shù)據(jù)倉庫信息的程序的集合。定義：用來傳送和存儲數(shù)據(jù)倉庫信息的程序的集合。通過對信息的多種可能的分析和觀察形式進(jìn)行快速、通過對信息的多種可能的分析和觀察形式進(jìn)行快速、穩(wěn)定一致和交互性的存取

18、，使管理決策人員獲取潛在穩(wěn)定一致和交互性的存取，使管理決策人員獲取潛在信息。信息。 OLAP能滿足管理者從多方面能滿足管理者從多方面多維分析業(yè)務(wù)數(shù)據(jù)多維分析業(yè)務(wù)數(shù)據(jù)（產(chǎn)品、時間、地理、銷售人員等）（產(chǎn)品、時間、地理、銷售人員等）第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)24OLTP進(jìn)出倉登錄進(jìn)出倉登錄與記賬與記賬增加一條新的生產(chǎn)線，增加一條新的生產(chǎn)線，更改產(chǎn)品單價更改產(chǎn)品單價更改顧客信用更改顧客信用銷售訂單錄入銷售訂單錄入產(chǎn)品數(shù)據(jù)庫存數(shù)據(jù)銷售數(shù)據(jù)數(shù)據(jù)庫：面向業(yè)數(shù)據(jù)庫：面向業(yè)務(wù)的數(shù)據(jù)組織務(wù)的數(shù)據(jù)組織事事務(wù)務(wù)處處理理OLAP產(chǎn)品數(shù)據(jù)顧客數(shù)據(jù)供應(yīng)商數(shù)據(jù)數(shù)據(jù)倉庫：面向數(shù)據(jù)倉庫：面向主題的數(shù)據(jù)組織主題的數(shù)據(jù)組織

19、每種物料保持多少每種物料保持多少安全庫存最佳？安全庫存最佳？上個月有多少產(chǎn)品的上個月有多少產(chǎn)品的銷售額超過銷售額超過10000元？元？決決策策支支持持5.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 產(chǎn)生背景產(chǎn)生背景2 2第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)25 OLTP數(shù)據(jù)數(shù)據(jù) OLAP數(shù)據(jù)數(shù)據(jù)原始數(shù)據(jù)原始數(shù)據(jù) 導(dǎo)出數(shù)據(jù)導(dǎo)出數(shù)據(jù)細(xì)節(jié)數(shù)據(jù)細(xì)節(jié)數(shù)據(jù) 綜合性或提煉性數(shù)據(jù)綜合性或提煉性數(shù)據(jù)當(dāng)前數(shù)據(jù)當(dāng)前數(shù)據(jù) 歷史數(shù)據(jù)歷史數(shù)據(jù)可更新可更新 不可更新，但周期性刷新不可更新，但周期性刷新一次處理的數(shù)據(jù)量小一次處理的數(shù)據(jù)量小 一次處理的數(shù)據(jù)量大一次處理的數(shù)據(jù)量大面向應(yīng)用，事務(wù)驅(qū)動面向應(yīng)用，事務(wù)驅(qū)動 面向分析，分析驅(qū)動面

20、向分析，分析驅(qū)動面向操作人員，支持日常操作面向操作人員，支持日常操作 面向決策人員，面向決策人員， 支持管理需要支持管理需要 OLAP與與OLTP數(shù)據(jù)比較數(shù)據(jù)比較5.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 產(chǎn)生背景產(chǎn)生背景3 3第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)26 數(shù)據(jù)倉庫：數(shù)據(jù)倉庫：是一個用于更好地支持企業(yè)或組織的決策是一個用于更好地支持企業(yè)或組織的決策分析處理、面向主題的、集成的、不可更新的、隨時間分析處理、面向主題的、集成的、不可更新的、隨時間不斷變化的數(shù)據(jù)的集合不斷變化的數(shù)據(jù)的集合 主題：主題：是一個抽象的概念，在邏輯意義上它是對應(yīng)企業(yè)是一個抽象的概念，在邏輯意義上它是對應(yīng)企業(yè)中某一宏

21、觀分析領(lǐng)域所涉及的分析對象中某一宏觀分析領(lǐng)域所涉及的分析對象 面向主題的數(shù)據(jù)組織方式：面向主題的數(shù)據(jù)組織方式：是在較高層次上對分析是在較高層次上對分析對象所涉及的企業(yè)的各項數(shù)據(jù)，以及數(shù)據(jù)之間的聯(lián)系對象所涉及的企業(yè)的各項數(shù)據(jù)，以及數(shù)據(jù)之間的聯(lián)系5.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 數(shù)據(jù)倉庫定義數(shù)據(jù)倉庫定義第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)27外部數(shù)據(jù)外部數(shù)據(jù)經(jīng)營數(shù)據(jù)經(jīng)營數(shù)據(jù)經(jīng)營數(shù)據(jù)經(jīng)營數(shù)據(jù)外部數(shù)據(jù)外部數(shù)據(jù)加加載載管管理理器器查查詢詢管管理理器器倉庫管理器倉庫管理器抽取抽取裝載裝載引導(dǎo)引導(dǎo)搜索搜索整理整理 轉(zhuǎn)換轉(zhuǎn)換 備份備份數(shù)據(jù)數(shù)據(jù)信息信息分析決策分析決策事實數(shù)據(jù)事實數(shù)據(jù)維度數(shù)據(jù)維度數(shù)據(jù)集合數(shù)

22、據(jù)集合數(shù)據(jù)元數(shù)據(jù)元數(shù)據(jù)數(shù)據(jù)倉庫概念圖數(shù)據(jù)倉庫概念圖5.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 數(shù)據(jù)倉庫概念數(shù)據(jù)倉庫概念第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)28元元數(shù)數(shù)據(jù)據(jù)早期細(xì)節(jié)級早期細(xì)節(jié)級當(dāng)前細(xì)節(jié)級當(dāng)前細(xì)節(jié)級輕度綜合級輕度綜合級高度綜合級高度綜合級源數(shù)據(jù)經(jīng)過綜源數(shù)據(jù)經(jīng)過綜合后首先進(jìn)入合后首先進(jìn)入當(dāng)前細(xì)節(jié)級供當(dāng)前細(xì)節(jié)級供OLAP用的數(shù)據(jù)用的數(shù)據(jù)當(dāng)前細(xì)節(jié)級當(dāng)前細(xì)節(jié)級 數(shù)據(jù)進(jìn)行數(shù)據(jù)進(jìn)行的綜合進(jìn)入輕度綜合的綜合進(jìn)入輕度綜合級部門級應(yīng)用級部門級應(yīng)用輕度綜合級數(shù)據(jù)進(jìn)一步綜合輕度綜合級數(shù)據(jù)進(jìn)一步綜合進(jìn)入高度綜合級進(jìn)入高度綜合級,全局級應(yīng)用全局級應(yīng)用老化的數(shù)據(jù)進(jìn)入早期細(xì)節(jié)老化的數(shù)據(jù)進(jìn)入早期細(xì)節(jié)級通常是備用的、批

23、量存級通常是備用的、批量存儲過期的數(shù)據(jù)儲過期的數(shù)據(jù)關(guān)于數(shù)據(jù)關(guān)于數(shù)據(jù)的數(shù)據(jù)的數(shù)據(jù)5.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 數(shù)據(jù)組織數(shù)據(jù)組織第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)29 數(shù)據(jù)集市是相當(dāng)于部門級數(shù)據(jù)倉庫的、小型的、面向部數(shù)據(jù)集市是相當(dāng)于部門級數(shù)據(jù)倉庫的、小型的、面向部門或工作組的數(shù)據(jù)倉庫門或工作組的數(shù)據(jù)倉庫 不同的數(shù)據(jù)集市可以按業(yè)務(wù)來組織，也可以按照數(shù)據(jù)倉不同的數(shù)據(jù)集市可以按業(yè)務(wù)來組織，也可以按照數(shù)據(jù)倉庫的主題或數(shù)據(jù)的地理分布來組織庫的主題或數(shù)據(jù)的地理分布來組織 數(shù)據(jù)集市中一般包含有關(guān)某一特定業(yè)務(wù)領(lǐng)域的數(shù)據(jù)，如數(shù)據(jù)集市中一般包含有關(guān)某一特定業(yè)務(wù)領(lǐng)域的數(shù)據(jù)，如人力資源、財務(wù)、銷售、市場等人力

24、資源、財務(wù)、銷售、市場等 不同的數(shù)據(jù)集市可以分布在不同的物理平臺上，也可以不同的數(shù)據(jù)集市可以分布在不同的物理平臺上，也可以邏輯的分布于統(tǒng)一物理平臺上邏輯的分布于統(tǒng)一物理平臺上5.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 數(shù)據(jù)集市數(shù)據(jù)集市1 1第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)30全局?jǐn)?shù)據(jù)倉庫全局?jǐn)?shù)據(jù)倉庫數(shù)據(jù)再抽取與集成數(shù)據(jù)再抽取與集成采購系統(tǒng)采購系統(tǒng)銷售系統(tǒng)銷售系統(tǒng)庫存系統(tǒng)庫存系統(tǒng)人事系統(tǒng)人事系統(tǒng)財務(wù)系統(tǒng)財務(wù)系統(tǒng)數(shù)據(jù)抽取數(shù)據(jù)抽取數(shù)據(jù)集市數(shù)據(jù)集市5.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 數(shù)據(jù)集市數(shù)據(jù)集市2 2第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)31 與數(shù)據(jù)倉庫密切相關(guān)的是與數(shù)據(jù)倉庫密切相關(guān)的是商務(wù)智能

25、商務(wù)智能或商業(yè)智能?；蛏虡I(yè)智能。Business Intelligent，BI 商務(wù)智能技術(shù)將商業(yè)活動數(shù)據(jù)轉(zhuǎn)化為有用信息，商務(wù)智能技術(shù)將商業(yè)活動數(shù)據(jù)轉(zhuǎn)化為有用信息， 進(jìn)而提煉知識，支持商業(yè)活動分析決策。進(jìn)而提煉知識，支持商業(yè)活動分析決策。 商務(wù)智能主要有：商務(wù)智能主要有： 數(shù)據(jù)挖掘技術(shù)：數(shù)據(jù)挖掘技術(shù)： 根據(jù)數(shù)據(jù)的相似性找出數(shù)據(jù)相關(guān)性的技術(shù)。根據(jù)數(shù)據(jù)的相似性找出數(shù)據(jù)相關(guān)性的技術(shù)。 在線分析技術(shù)：在線分析技術(shù)： 對歷史數(shù)據(jù)動態(tài)分類和統(tǒng)計而產(chǎn)生信息。對歷史數(shù)據(jù)動態(tài)分類和統(tǒng)計而產(chǎn)生信息。5.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 商務(wù)智能商務(wù)智能1 1第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)32商務(wù)智能的主要

26、作用有三個方面：商務(wù)智能的主要作用有三個方面： 規(guī)律探索：規(guī)律探索：在以往事實數(shù)據(jù)中獲取知識，如：在以往事實數(shù)據(jù)中獲取知識，如： 找出不同客戶群對產(chǎn)品喜好的變化規(guī)律。找出不同客戶群對產(chǎn)品喜好的變化規(guī)律。 機(jī)會發(fā)現(xiàn)：機(jī)會發(fā)現(xiàn)：對數(shù)據(jù)做掃描式分析和預(yù)測，如：對數(shù)據(jù)做掃描式分析和預(yù)測，如： 發(fā)現(xiàn)目前不起眼但將看好的某類產(chǎn)品或服務(wù)。發(fā)現(xiàn)目前不起眼但將看好的某類產(chǎn)品或服務(wù)。 問題識別：問題識別：使使企業(yè)及時采取對策避免損失企業(yè)及時采取對策避免損失， 識別客戶或交易風(fēng)險、成本上升的征兆。識別客戶或交易風(fēng)險、成本上升的征兆。5.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 商務(wù)智能商務(wù)智能2 2第五章第五章 數(shù)據(jù)庫

27、技術(shù)數(shù)據(jù)庫技術(shù)33已婚已婚未婚未婚年收入年收入1515萬萬金卡金卡7676人，人，82%82%銀卡銀卡8 8人，人，10%10%銅卡銅卡4 4人，人，5%5%普通普通2 2人，人，3%3%對客戶消費行為的分析。對客戶消費行為的分析。金卡大都由年收入金卡大都由年收入1515萬以上的已婚者所持有萬以上的已婚者所持有Microsoft Analysis Server5.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 商務(wù)智能商務(wù)智能3 3第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)34 找出客戶流失的規(guī)律（或關(guān)鍵影響因素）。找出客戶流失的規(guī)律（或關(guān)鍵影響因素）。 從小客戶中找出有潛在增值價值的客戶。從小客戶中找出有潛在

28、增值價值的客戶。 從交易記錄中找出利潤高需求大的款式。從交易記錄中找出利潤高需求大的款式。 發(fā)現(xiàn)某大客戶的透資過于嚴(yán)重和不正常。發(fā)現(xiàn)某大客戶的透資過于嚴(yán)重和不正常。 預(yù)測某服務(wù)的需求趨勢。預(yù)測某服務(wù)的需求趨勢。 特別注意：針對某客戶的分析涉及個人隱私。特別注意：針對某客戶的分析涉及個人隱私。5.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 商務(wù)智能商務(wù)智能4 4第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)355.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 數(shù)據(jù)挖掘數(shù)據(jù)挖掘 數(shù)據(jù)挖掘技術(shù)數(shù)據(jù)挖掘技術(shù)(Data Mining)(Data Mining) 數(shù)據(jù)挖掘數(shù)據(jù)挖掘(Data Mining)(Data Mining)

29、是從數(shù)據(jù)集中識是從數(shù)據(jù)集中識別出有效的、新穎的、別出有效的、新穎的、潛在有價值潛在有價值的以的以及最終可理解模式的高級處理過程。也及最終可理解模式的高級處理過程。也就是說，從大量的、不完全的、有噪聲就是說，從大量的、不完全的、有噪聲的、模糊的、隨機(jī)的數(shù)據(jù)中的、模糊的、隨機(jī)的數(shù)據(jù)中, ,提取隱含在提取隱含在其中的、人們事先不知道的、但又是潛其中的、人們事先不知道的、但又是潛在有用的信息和知識的過程。在有用的信息和知識的過程。第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)365.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 數(shù)據(jù)挖掘數(shù)據(jù)挖掘數(shù)據(jù)挖掘理論基礎(chǔ)數(shù)據(jù)挖掘理論基礎(chǔ) 數(shù)理統(tǒng)計數(shù)理統(tǒng)計 多元統(tǒng)計多元統(tǒng)計 趨勢預(yù)測

30、趨勢預(yù)測 運籌學(xué)運籌學(xué) 數(shù)學(xué)規(guī)劃數(shù)學(xué)規(guī)劃 人工智能與專家系統(tǒng)人工智能與專家系統(tǒng)第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)375.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 數(shù)據(jù)挖掘數(shù)據(jù)挖掘數(shù)據(jù)挖掘的步驟數(shù)據(jù)挖掘的步驟（1 1）數(shù)據(jù)準(zhǔn)備）數(shù)據(jù)準(zhǔn)備 數(shù)據(jù)集成：從數(shù)據(jù)集成：從OLTPOLTP數(shù)據(jù)庫中提取并集成數(shù)據(jù)解決數(shù)據(jù)庫中提取并集成數(shù)據(jù)解決數(shù)據(jù)語義二義性問題，清除臟數(shù)據(jù)數(shù)據(jù)語義二義性問題，清除臟數(shù)據(jù) 數(shù)據(jù)選擇和預(yù)分析：縮小數(shù)據(jù)范圍，提高數(shù)據(jù)挖數(shù)據(jù)選擇和預(yù)分析：縮小數(shù)據(jù)范圍，提高數(shù)據(jù)挖掘質(zhì)量掘質(zhì)量（2 2）挖掘）挖掘: :利用前述的方法分析數(shù)據(jù)倉庫中的數(shù)據(jù)利用前述的方法分析數(shù)據(jù)倉庫中的數(shù)據(jù)（3 3）表述：將挖掘數(shù)

31、據(jù)得到的信息以用戶易于理解的）表述：將挖掘數(shù)據(jù)得到的信息以用戶易于理解的方式反饋給用戶。充分利用可視化工具。方式反饋給用戶。充分利用可視化工具。（4 4）評價遞歸執(zhí)行以上三步驟，直到用戶滿意）評價遞歸執(zhí)行以上三步驟，直到用戶滿意第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)38數(shù)據(jù)挖掘的步驟數(shù)據(jù)挖掘的步驟消除噪聲或消除噪聲或數(shù)據(jù)不一致數(shù)據(jù)不一致將多種數(shù)據(jù)源有機(jī)將多種數(shù)據(jù)源有機(jī)地組合在一起地組合在一起從數(shù)據(jù)庫中檢索與分從數(shù)據(jù)庫中檢索與分析任務(wù)相關(guān)的數(shù)據(jù)析任務(wù)相關(guān)的數(shù)據(jù)通過匯總或聚集操作，變通過匯總或聚集操作，變換數(shù)據(jù)形式以便挖掘換數(shù)據(jù)形式以便挖掘使用智能方法使用智能方法提取數(shù)據(jù)模式提取數(shù)據(jù)模式識別表示識別表

32、示知識的模式知識的模式使用可視化技術(shù)使用可視化技術(shù)提供挖掘的知識提供挖掘的知識清理與集成清理與集成選擇與變換選擇與變換數(shù)據(jù)挖掘數(shù)據(jù)挖掘評估與表示評估與表示知識知識模式模式5.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 數(shù)據(jù)挖掘數(shù)據(jù)挖掘第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)395.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 數(shù)據(jù)挖掘數(shù)據(jù)挖掘數(shù)據(jù)挖掘的應(yīng)用數(shù)據(jù)挖掘的應(yīng)用（1）DM應(yīng)用于金融業(yè)保險業(yè)應(yīng)用于金融業(yè)保險業(yè) 對客戶進(jìn)行信用等級評價對客戶進(jìn)行信用等級評價 對金融市場預(yù)測和分析對金融市場預(yù)測和分析 信用卡模式、用戶分析信用卡模式、用戶分析 確定不同行業(yè)、不同年齡、處于不同社會確定不同行業(yè)、不同年齡、處于不同社

33、會層次的人的保險金層次的人的保險金 險種關(guān)聯(lián)分析險種關(guān)聯(lián)分析 預(yù)測新險種的客戶群預(yù)測新險種的客戶群 第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)405.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 數(shù)據(jù)挖掘數(shù)據(jù)挖掘（2）DM應(yīng)用于商業(yè)應(yīng)用于商業(yè)顧客購買習(xí)慣分析（尿布與啤酒）顧客購買習(xí)慣分析（尿布與啤酒）銷售商品構(gòu)成分析（市場定位、商品定價）銷售商品構(gòu)成分析（市場定位、商品定價）商品銷售預(yù)測、零售店選擇等等商品銷售預(yù)測、零售店選擇等等（3）DM應(yīng)用于通信服務(wù)業(yè)應(yīng)用于通信服務(wù)業(yè) 用戶細(xì)分用戶細(xì)分 網(wǎng)絡(luò)規(guī)劃的用戶預(yù)測網(wǎng)絡(luò)規(guī)劃的用戶預(yù)測 資費分析、新業(yè)務(wù)發(fā)展預(yù)測資費分析、新業(yè)務(wù)發(fā)展預(yù)測 客戶信用分析及反欺詐等等客戶信用

34、分析及反欺詐等等第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)415.5.3 3 數(shù)據(jù)倉庫技術(shù)數(shù)據(jù)倉庫技術(shù) 數(shù)據(jù)挖掘數(shù)據(jù)挖掘（4）應(yīng)用于制造業(yè)）應(yīng)用于制造業(yè)企業(yè)故障診斷企業(yè)故障診斷供應(yīng)鏈管理及供應(yīng)鏈優(yōu)化供應(yīng)鏈管理及供應(yīng)鏈優(yōu)化新產(chǎn)品開發(fā)預(yù)測等等新產(chǎn)品開發(fā)預(yù)測等等（5）應(yīng)用于醫(yī)療衛(wèi)生）應(yīng)用于醫(yī)療衛(wèi)生用于病例、病人行為特征分析用于病例、病人行為特征分析安排治療方案、判斷藥方的有效性等等安排治療方案、判斷藥方的有效性等等（6）應(yīng)用于司法、公安部門）應(yīng)用于司法、公安部門犯罪行為分析、案例分析、犯罪監(jiān)控犯罪行為分析、案例分析、犯罪監(jiān)控預(yù)防犯罪分析預(yù)防犯罪分析第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)42 駕照中有個人的生日、

35、姓名、住址、身份證號、駕照中有個人的生日、姓名、住址、身份證號、駕駛年限、性別、照片。駕駛年限、性別、照片。 美國最大的信用報告公司之一美國最大的信用報告公司之一ExperianExperian，從，從5151個州的汽車監(jiān)理處收集車輛數(shù)據(jù)。個州的汽車監(jiān)理處收集車輛數(shù)據(jù)。 ExperianExperian建立了建立了6565萬億字節(jié)的數(shù)據(jù)庫，涵蓋美萬億字節(jié)的數(shù)據(jù)庫，涵蓋美國國3.353.35億輛車。億輛車。 只要付只要付10.9910.99美元，就可以提供一筆任何車輛美元，就可以提供一筆任何車輛的所有權(quán)歷史資料。的所有權(quán)歷史資料。Kenneth C. Laudon，Management Info

36、rmation Systems(Eighth Edition), ppt,2004,Prentice Hall 案例：出售公用數(shù)據(jù)庫案例：出售公用數(shù)據(jù)庫- -企業(yè)受益企業(yè)受益/ /隱私權(quán)威脅隱私權(quán)威脅1 1第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)43 ExperianExperian的數(shù)據(jù)庫每月處理的數(shù)據(jù)庫每月處理1.751.75億筆交易。億筆交易。 隱私權(quán)捍衛(wèi)者擔(dān)憂對公用數(shù)據(jù)庫無管制的使用，隱私權(quán)捍衛(wèi)者擔(dān)憂對公用數(shù)據(jù)庫無管制的使用，會使個人信息未經(jīng)當(dāng)事人許可的而被使用。會使個人信息未經(jīng)當(dāng)事人許可的而被使用。 19941994年美國國會通過了駕駛?cè)穗[私權(quán)保護(hù)法案。年美國國會通過了駕駛?cè)穗[私權(quán)保護(hù)法案。 但此法令并沒有管制企業(yè)使用駕照和車輛數(shù)據(jù)建但此法令并沒有管制企業(yè)使用駕照和車輛數(shù)據(jù)建立自己的數(shù)據(jù)庫。立自己的數(shù)據(jù)庫。案例案例5.15.1出售公用數(shù)據(jù)庫出售公用數(shù)據(jù)庫- -企業(yè)受益企業(yè)受益/ /隱私權(quán)威脅隱私權(quán)威脅2 2第五章第五章 數(shù)據(jù)庫技術(shù)數(shù)據(jù)庫技術(shù)44 近年來許多軟件公司推出了數(shù)據(jù)倉庫系統(tǒng)。近年來許多軟件公司推出了數(shù)據(jù)倉庫系統(tǒng)。 在具有大量業(yè)務(wù)數(shù)據(jù)的金融業(yè)和通信業(yè)等企業(yè)在具有大量業(yè)務(wù)數(shù)據(jù)的金融業(yè)和通信業(yè)等企業(yè)中得到較多的使用。中得到較多的使用。 但數(shù)據(jù)倉庫投資大，技術(shù)復(fù)雜，建成后還