數(shù)據(jù)倉庫培訓(xùn)教程

1、數(shù)據(jù)倉庫培訓(xùn)教程日程安排第一天OLAP技術(shù)以及產(chǎn)品介紹Oracle 數(shù)據(jù)倉庫和商務(wù)智能整體解決方案介紹Oracle Warehouse Builder 產(chǎn)品整體介紹安裝OWB產(chǎn)品，創(chuàng)建設(shè)計(jì)和運(yùn)行資料庫定義數(shù)據(jù)倉庫目標(biāo)模型多維模型設(shè)計(jì)維度設(shè)計(jì)，立方體設(shè)計(jì)數(shù)據(jù)源定義創(chuàng)建文本數(shù)據(jù)源，創(chuàng)建Oracle數(shù)據(jù)源日程安排第二天ETL設(shè)計(jì)數(shù)據(jù)流和映射的設(shè)計(jì)部署管理過程設(shè)計(jì)過程設(shè)計(jì)和編輯元數(shù)據(jù)瀏覽設(shè)計(jì)瀏覽器和運(yùn)行審計(jì)器DW工程中ETL的實(shí)現(xiàn)Hypersion實(shí)現(xiàn)BI前端展示Oracle Warehouse BuilderOWB工作過程關(guān)系性數(shù)據(jù)平面文件應(yīng)用主機(jī)Oracle 8i or Oracle 9i抽取和轉(zhuǎn)

2、換數(shù)據(jù)6生成代碼4設(shè)計(jì)目標(biāo)數(shù)據(jù)倉庫模型1映射源數(shù)據(jù)3部署數(shù)據(jù)倉庫5OWBrepository源數(shù)據(jù)目標(biāo)數(shù)據(jù)倉庫OWB Client2定義源數(shù)據(jù)3. 源到目標(biāo)的映射避免手工編碼和維護(hù)復(fù)雜的程序文檔化表示 ETL 的流程和業(yè)務(wù)規(guī)則避免大量的培訓(xùn)工作Business Challenge!3. 源到目標(biāo)的映射 Key Lookup Name/Address Set Joiner Filter Splitter Aggregator Deduplicator Sorter Sequence Expression Transformation Pre- and Post-Mapping ProcessMa

3、pping Editor (Iconic View)3.源到目標(biāo)的映射: 轉(zhuǎn)換利用 Oracle9i 作為轉(zhuǎn)換引擎超過 80 個打包的函數(shù)和存儲過程標(biāo)準(zhǔn)Oracle SQL 函數(shù)超過40多種的 Warehouse Builder 函數(shù)和存儲過程WB_DISABLE_ALL_CONSTRAINTSWB_TRUNCATE_TABLEWB.LOOKUP_NUM可以使用用戶自定義的PL/SQL轉(zhuǎn)換函數(shù)和過程內(nèi)嵌的表達(dá)式編輯器Expression Builder 內(nèi)置的校驗(yàn)功能可以在全局中共享和重用3.源到目標(biāo)的映射: 表達(dá)式編輯器語法檢驗(yàn)3.源到目標(biāo)的映射: 增量代碼生成3.源到目標(biāo)的映射: 驗(yàn)證有效

4、性探測數(shù)據(jù)類型的錯誤匹配漏失的參數(shù)未完成的匹配無效的對象無效的參照3.源到目標(biāo)的映射易于使用和基于導(dǎo)向的設(shè)計(jì)Mapping designer 包含了完整的設(shè)計(jì)能力中間的和完整的代碼生成和校驗(yàn)OWB工作過程關(guān)系性數(shù)據(jù)平面文件應(yīng)用主機(jī)Oracle 8i or Oracle 9i抽取和轉(zhuǎn)換數(shù)據(jù)6生成代碼4設(shè)計(jì)目標(biāo)數(shù)據(jù)倉庫模型1映射源數(shù)據(jù)3部署數(shù)據(jù)倉庫5OWBrepository源數(shù)據(jù)目標(biāo)數(shù)據(jù)倉庫OWB Client2定義源數(shù)據(jù)4. 代碼生成你得到了性能良好的代碼嗎?Business Challenge!4. 代碼生成針對Oracle數(shù)據(jù)庫優(yōu)化的代碼可對Oracle9i 目標(biāo)使用MERGE語言Set-

5、based或者row-basedPL/SQL 批量處理外鍵約束處理通過inline views實(shí)現(xiàn)遠(yuǎn)端表的快速抽取分區(qū)抽取4. 代碼生成針對目標(biāo)特性的代碼為數(shù)據(jù)倉庫創(chuàng)建的SQL DDL 為關(guān)系型數(shù)據(jù)源的PL/SQL 對應(yīng)文本數(shù)據(jù)源的SQL*Loader control files對應(yīng)SAP R/3 sources的ABAP為OEM注冊的教本日程安排第二天ETL設(shè)計(jì)數(shù)據(jù)流和映射的設(shè)計(jì)部署管理過程設(shè)計(jì)過程設(shè)計(jì)和編輯元數(shù)據(jù)管理設(shè)計(jì)瀏覽器和運(yùn)行審計(jì)器映射調(diào)試和版本控制OWB工作過程關(guān)系性數(shù)據(jù)平面文件應(yīng)用主機(jī)Oracle 8i or Oracle 9i抽取和轉(zhuǎn)換數(shù)據(jù)6生成代碼4設(shè)計(jì)目標(biāo)數(shù)據(jù)倉庫模型1映射

6、源數(shù)據(jù)3部署數(shù)據(jù)倉庫5OWBrepository源數(shù)據(jù)目標(biāo)數(shù)據(jù)倉庫OWB Client2定義源數(shù)據(jù)5. 部署數(shù)據(jù)倉庫我如何管理我的數(shù)據(jù)倉庫和數(shù)據(jù)集市?你提供了統(tǒng)一的控制方式嗎?Business Challenge!5. 部署數(shù)據(jù)倉庫：部署管理器對象位置的顯式辨識配置狀態(tài)Never deployedPreviously deployedSuccessful FailedWarning缺省活動: Create or Update配置歷史配置日期, 狀態(tài), 錯誤信息5. 部署數(shù)據(jù)倉庫：部署管理器5. 部署數(shù)據(jù)倉庫：部署管理器OWB工作過程關(guān)系性數(shù)據(jù)平面文件應(yīng)用主機(jī)Oracle 8i or Oracl

7、e 9i抽取和轉(zhuǎn)換數(shù)據(jù)6生成代碼4設(shè)計(jì)目標(biāo)數(shù)據(jù)倉庫模型1映射源數(shù)據(jù)3部署數(shù)據(jù)倉庫5OWBrepository源數(shù)據(jù)目標(biāo)數(shù)據(jù)倉庫OWB Client2定義源數(shù)據(jù)6. 抽取和轉(zhuǎn)換數(shù)據(jù)任務(wù)運(yùn)行在下班時間有限的資源用來監(jiān)控和通報任務(wù)之間的相互依賴關(guān)系如果一個過程失敗, 需要告警和通知Business Challenge!6. 抽取和轉(zhuǎn)換數(shù)據(jù)處理流程-Process Flow Editor在處理流程建立過程中定義 智能地控制映射和其它 OWB 對象基于集中的 repository 管理任務(wù)監(jiān)控, 審計(jì)和通告任務(wù)狀態(tài)消滅手工勞動, 減少錯誤6. 抽取和轉(zhuǎn)換數(shù)據(jù)File ExistsFTPForkAndSu

8、b-processEmailUser-definedOrTransformMap6. 抽取和轉(zhuǎn)換數(shù)據(jù)Process Flow Modeler6. 抽取和轉(zhuǎn)換數(shù)據(jù)ETL任務(wù)排序和安排在OWB中直接執(zhí)行完成ETL過程在Oracle Enterprise Manager安排這些任務(wù)在Oracle Workflow中注冊,定義執(zhí)行順序和附加的相關(guān)操作OWBOEMOracleWorkflowOracle Workflow元數(shù)據(jù)管理如果開發(fā)過程中源數(shù)據(jù)結(jié)果發(fā)生變化？如果開發(fā)結(jié)束一段時間后，有新的需求產(chǎn)生？如果其他部門的技術(shù)人員需要改變和系統(tǒng)相關(guān)的數(shù)據(jù)結(jié)果？是否是開發(fā)的架構(gòu)？Business Challen

9、ge!元數(shù)據(jù)管理多用戶元數(shù)據(jù)單用戶更新，多用戶讀取對象鎖機(jī)制同步版本管理影響分析開放: 編程訪問元數(shù)據(jù)集成OMG CWM (Common Warehouse Model )開放的標(biāo)準(zhǔn)使用XML元數(shù)據(jù)互換XML Metadata Interchange (XMI)強(qiáng)大的對象模型相關(guān)ETL和分析的元數(shù)據(jù)OWB 橋 (Oracle Warehouse Builder Bridges)Oracle DiscovererOracle ExpressOracle Designer (via the OWB Oracle Integrator)CA ERwinSybase PowerDesignerOMG

10、CWM元數(shù)據(jù)集成把OWB 源數(shù)據(jù)傳輸?shù)絆racle Discoverer元數(shù)據(jù)報告元數(shù)據(jù)報表 影響分析總結(jié)Oracle完整集成的數(shù)據(jù)倉庫解決方案Oracle Warehouse Builder總結(jié)：Oracle 數(shù)據(jù)倉庫解決方案總結(jié)：OWBOWB 是一個針對數(shù)據(jù)倉庫應(yīng)用的工具設(shè)計(jì)和部署數(shù)據(jù)倉庫數(shù)據(jù)中心以及源數(shù)據(jù)和目標(biāo)數(shù)據(jù)的匹配充分利用Oracle數(shù)據(jù)庫技術(shù)和投資元數(shù)據(jù)共享和報表在 Oracle Developer Suite套件中Design user(s) schema-Design metadataRepository AssistantDesign user(s)Run-time owner schema-Audit tables-Run-time and deployment statistics-Physical location infoTarget schema(s)- Tables- Dimensions, cubes- Mappings- Packages,Connect As user schema-intermediary user for securityRuntime AssistantConnect userRuntime owner