數(shù)據(jù)倉庫Hive應(yīng)用實戰(zhàn) 教案53-56課時-管理分區(qū)表_第1頁
數(shù)據(jù)倉庫Hive應(yīng)用實戰(zhàn) 教案53-56課時-管理分區(qū)表_第2頁
數(shù)據(jù)倉庫Hive應(yīng)用實戰(zhàn) 教案53-56課時-管理分區(qū)表_第3頁
數(shù)據(jù)倉庫Hive應(yīng)用實戰(zhàn) 教案53-56課時-管理分區(qū)表_第4頁
全文預(yù)覽已結(jié)束

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)

文檔簡介

湖南汽車工程職業(yè)學(xué)院教師授課教案第7周第5-8課時累計56課時課程名稱大數(shù)據(jù)倉庫HIVE授課課題管理分區(qū)表中的數(shù)據(jù)授課專業(yè)班級大數(shù)據(jù)2101、大數(shù)據(jù)2102、大數(shù)據(jù)2103教學(xué)目標1.重命名分區(qū)2.移動分區(qū)3.刪除分區(qū)教學(xué)要點教學(xué)重點管理分區(qū)表教學(xué)難點移動分區(qū)課型一體化授課教法與學(xué)法(教具)示范演示法、任務(wù)驅(qū)動教學(xué)法、分組合作教學(xué)法課后作業(yè)完成智課堂作業(yè)、看視頻熟練操作教學(xué)后記(教師課后填寫)授課教師王海霞、黃史記【課前復(fù)習(xí)】Hive表中數(shù)據(jù)導(dǎo)入的基本語法是什么?【作業(yè)點評】展示智課堂學(xué)生作業(yè)完成情況,并做點評?!緦W(xué)習(xí)目標】能熟練使用多種方式將表中數(shù)據(jù)導(dǎo)出到Hive表中;【課程導(dǎo)入】根據(jù)業(yè)務(wù)情況可以將大多數(shù)數(shù)據(jù)集分解成小的數(shù)據(jù)集,如以年為單位分解過去每屆奧林匹克運動會的選手數(shù)據(jù)及獲獎數(shù)據(jù),以月為單位分解某企業(yè)的所有銷售數(shù)據(jù),以及以日為單位分解某快遞公司的快遞數(shù)據(jù)等。為分解的大數(shù)據(jù)集創(chuàng)建分區(qū)表以映射到HDFS底層分解的小數(shù)據(jù)是本次的任務(wù)目標。【新課講授】1.設(shè)置分區(qū)COMMENT字符編碼在創(chuàng)建分區(qū)表時,分區(qū)COMMENT字段包含中文,在分區(qū)表創(chuàng)建成功后,使用DESC命令查看時分區(qū)COMMENT的中文說明會顯示亂碼。登錄MySQL,對指定的元數(shù)據(jù)庫hivedb中的相關(guān)表做字符編碼修改。元數(shù)據(jù)庫hivedb中的PARTITION_KEYS表用于存儲各分區(qū)表的COMMENT的元數(shù)據(jù)信息,其中的PKEY_COMMENT字段用于存儲各分區(qū)表的分區(qū)字段注釋,因此修改其字符集編碼可以讓COMMENT中文注釋正常顯示。MariaDB[hivedb]>ALTERTABLEPARTITION_KEYSMODIFYcolumnPKEY_COMMENTVARCHAR(4000)charactersetutf8;2.創(chuàng)建分區(qū)表ods_site數(shù)據(jù)倉庫中包括4個分區(qū)表,分別是基站常住人口表ods_resident_pop、基站流動人口表ods_floating_pop、消費信息表ods_consumption和銀行App明細表ods_bank_app。創(chuàng)建分區(qū)表時表字段分割符統(tǒng)一為'\u0001',通過NULLDEFINEDAS''語句設(shè)置NULL為空,以TEXTFILE格式存儲。根據(jù)3.1.7節(jié)的表3-7中的字段定義信息,創(chuàng)建基站常住人口表ods_resident_pop,分區(qū)字段為month,代碼如下所示。CREATETABLEods_site.ods_resident_pop(bts_idSTRINGCOMMENT'基站編碼',resident_numINTCOMMENT'常住人口數(shù)')COMMENT'基站常住人口表'PARTITIONEDBY(monthSTRINGCOMMENT'月分區(qū)')ROWFORMATDELIMITEDFIELDSTERMINATEDBY'\u0001'NULLDEFINEDAS''STOREDASTEXTFILE;根據(jù)3.1.7節(jié)的表3-8中的字段定義信息,創(chuàng)建基站流動人口表ods_floating_pop,分區(qū)字段為month,代碼如下所示。CREATETABLEods_site.ods_floating_pop(bts_idSTRINGCOMMENT'基站編碼',floating_numINTCOMMENT'流動人口數(shù)')COMMENT'基站流動人口表'PARTITIONEDBY(monthSTRINGCOMMENT'月分區(qū)')ROWFORMATDELIMITEDFIELDSTERMINATEDBY'\u0001'NULLDEFINEDAS''STOREDASTEXTFILE;根據(jù)3.1.7節(jié)的表3-9中的字段定義信息,創(chuàng)建消費信息表ods_consumption,分區(qū)字段為month,代碼如下所示。CREATETABLEods_site.ods_consumption(bts_idSTRINGCOMMENT'基站編碼',high_numINTCOMMENT'高消費人口數(shù)量',mid_numINTCOMMENT'中消費人口數(shù)量',low_numINTCOMMENT'低消費人口數(shù)量')COMMENT'消費信息表'PARTITIONEDBY(monthSTRINGCOMMENT'月分區(qū)')ROWFORMATDELIMITEDFIELDSTERMINATEDBY'\u0001'NULLDEFINEDAS''STOREDASTEXTFILE;根據(jù)3.1.7節(jié)的表3-10中的字段定義信息,創(chuàng)建銀行App明細表ods_bank_app,分區(qū)字段為month,代碼如下所示。CREATETABLEods_site.ods_bank_app(bts_idSTRINGCOMMENT'基站編碼',resident_app_numINTCOMMENT'常住人口使用App數(shù)量',floating_app_numINTCOMMENT'流動人口使用App數(shù)量')COMMENT'銀行App明細表'PARTITIONEDBY(monthSTRINGCOMMENT'月分區(qū)')ROWFORMATDELIMITEDFIELDSTERMINATEDBY'\u0001'NULLDEFINEDAS''STOREDASTEXTFILE;3.查看分區(qū)信息查看基站常住人口表ods_resident_pop的

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論