《大數(shù)據技術實戰(zhàn)案例教程》-授課計劃

《大數(shù)據技術實戰(zhàn)案例教程ISBN978-7-5606-6679-2》授課計劃編寫者：徐魯輝******教師授課計劃20**—20**學年第*學期課程名稱：大數(shù)據技術原理及應用課程性質：************編寫教師：******職稱：******總學時：48其中理論學時：32實驗學時：16其它學時：0考核方式：考試教材名稱：大數(shù)據技術實戰(zhàn)案例教程主編：徐魯輝出版社：西安電子科技大學出版社適用專業(yè)、年級：******專業(yè)****級要求：1.授課計劃由教研室主任（團隊負責人）召集相關主講教師集體研究后編寫；2.每個授課單元（2學時）的內容占一格，表格不夠可另加附頁；3.任課教師須嚴格按授課計劃教學，進度提前或推遲超過4學時視為教學事故；4.“講課”、“實驗”、“其它”的填寫，應在相應欄畫“√”，如果有其它教學內容必須在備注欄進一步說明；“課程性質”填寫公共必修課程、公共選修課程、數(shù)學與自然科學類課程、工程基礎類課程、專業(yè)基礎類課程、專業(yè)必修課程、專業(yè)方向課程、專業(yè)選修課程、專業(yè)實踐環(huán)節(jié)等。5.授課計劃經審核后使用，報院系教務科備案，授課教師人手一份。教研室主任簽字:學院(中心)負責人簽字:教學單位蓋章序號周周課次講課實驗其它教學內容備注（如課堂討論、習題等）章節(jié)（章節(jié)名稱、教學內容提要、實驗的名稱、課堂討論的題目）111√11.1-1.3開學第一課1.自我介紹2.課程地位、先修及后續(xù)課程3.教學目標及知識圖譜4.課時分配（理論+實驗）及進度、教材、參考資料、上機軟件5.考核方式：平時+實驗+期末6.學堂云、雨課堂使用方法第1章部署全分布模式Hadoop集群1.1初識Hadoop1.2Hadoop生態(tài)系統(tǒng)1.3Hadoop體系架構頭腦風暴，問卷調查，在線測試Linux、Java、Python、數(shù)據庫等先修知識212√11.4第1章部署全分布模式Hadoop集群1.4Hadoop部署要點1.4.1Hadoop運行環(huán)境1.4.2Hadoop運行模式1.4.3Hadoop配置文件章節(jié)測試1預習實驗1指導書，自行實踐部署Hadoop集群321√11.5實驗1部署全分布模式Hadoop集群實驗報告1431√22.1-2.3第2章實戰(zhàn)HDFS2.1初識HDFS2.2HDFS體系架構2.3HDFS文件存儲原理2.3.1數(shù)據塊Block2.3.2副本存放策略2.3.3數(shù)據讀取2.3.4數(shù)據寫入532√22.4-2.5第2章HDFS實戰(zhàn)2.4HDFS接口2.4.1HDFSWebUI2.4.2HDFSShell2.4.3HDFSJavaAPI2.5HDFS高可靠性機制2.5.1HDFSNameNodeHA高可用機制2.5.2HDFSNameNodeFederation聯(lián)邦機制章節(jié)測試2641√22.6實驗2HDFS實戰(zhàn)實驗報告2751√33.1-3.3第3章MapReduce編程3.1初識MapReduce3.2MapReduce作業(yè)執(zhí)行流程3.3MapReduce入門案例WordCount剖析3.3.1TokenizerMapper類3.3.2IntSumReducer類3.3.3main()函數(shù)3.3.4向Hadoop集群提交并運行WordCount852√33.4-3.5第3章MapReduce編程3.4MapReduce數(shù)據類型3.5MapReduce接口3.5.1MapReduceWebUI3.5.2MapReduceShell3.5.3MapReduceJavaAPI章節(jié)測試3961√33.6實驗3MapReduce編程實驗報告31071√44.1-4.3第4章部署ZooKeeper集群和ZooKeeper實戰(zhàn)4.1初識ZooKeeper4.2ZooKeeper工作原理4.3ZooKeeper數(shù)據模型1172√44.4-4.5第4章部署ZooKeeper集群和ZooKeeper實戰(zhàn)4.4ZooKeeper部署要點4.4.1ZooKeeper運行環(huán)境4.4.2ZooKeeper運行模式4.4.3ZooKeeper配置文件4.5ZooKeeper接口4.5.1ZooKeeper四字命令4.5.2ZooKeeperShell4.5.3ZooKeeperJavaAPI章節(jié)測試41281√44.6實驗4部署ZooKeeper集群和ZooKeeper實戰(zhàn)實驗報告41391√55.1-5.5第5章部署本地模式Hive和Hive實戰(zhàn)5.1初識Hive5.2Hive體系架構5.3Hive數(shù)據類型5.4Hive數(shù)據模型5.5Hive函數(shù)1492√55.6-5.7第5章部署本地模式Hive和Hive實戰(zhàn)5.6Hive部署要點5.6.1Hive運行環(huán)境5.6.2Hive部署模式5.6.3Hive配置文件5.7Hive接口5.7.1HiveShell5.7.2HiveWebInterface（HWI）5.7.3HiveAPI章節(jié)測試515101√55.8實驗5部署本地模式Hive和Hive實戰(zhàn)實驗報告516111√66.1-6.3第6章Flume實戰(zhàn)6.1初識Flume6.2Flume體系架構6.3Flume部署要點6.3.1Flume運行環(huán)境6.3.2Flume運行模式6.3.3Flume配置文件17112√66.4第6章Flume實戰(zhàn)6.4FlumeShell常用命令章節(jié)測試618121√66.5實驗6Flume實戰(zhàn)實驗報告619131√77.1-7.3第7章Kafka實戰(zhàn)7.1初識Kafka7.2Kafka體系架構7.3Kafka部署要點7.3.1Kafka運行環(huán)境7.3.2Kafka運行模式7.3.3Kafka配置文件20132√77.4第7章Kafka實戰(zhàn)7.4KafkaShell常用命令章節(jié)測試721141√77.5實驗7Kafka實戰(zhàn)實驗報告722151√88.1-8.4第8章Spark集群部署和基本編程8.1初識Spark8.1.1Spark簡介8.1.2Spark對比HadoopMapReduce8.2Spark生態(tài)系統(tǒng)8.3Spark運行架構8.4RDD的設計與操作8.4.1RDD簡介8.4.2RDD數(shù)據存儲模型8.4.3RDD創(chuàng)建8.4.4RDD操作23152√88.5-8.6第8章Spark集群部署和基本編程8.5Spark部署要點8.5.1Sp