hadoop大數(shù)據(jù)技術(shù) 課程教學(xué)大綱

字體、字號請參考范例注意：首字母大寫植物拉丁學(xué)名斜體《字體、字號請參考范例注意：首字母大寫植物拉丁學(xué)名斜體一、課程簡介課程中文名Hadoop大數(shù)據(jù)技術(shù)課程英文名HadoopBigDataTechnology雙語授課￡是否課程代碼10114084課程學(xué)分2.5總學(xué)時數(shù)60課程類別□專業(yè)基礎(chǔ)課程專業(yè)核心課程□專業(yè)選修課程□其他課程性質(zhì)必修□選修￡其他課程形態(tài)□線上線下□線上線下混合式□社會實踐□虛擬仿真實驗教學(xué)考核方式□閉卷□開卷□課程論文課程作品□匯報展示￡報告課堂表現(xiàn)階段性測試平時作業(yè)□其他（可多選）開課學(xué)院大數(shù)據(jù)與智能工程學(xué)院開課系(教研室)數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)面向?qū)I(yè)數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)開課學(xué)期第4學(xué)期先修課程Java程序設(shè)計后續(xù)課程無選用教材林子雨.大數(shù)據(jù)技術(shù)原理與應(yīng)用:概念、存儲、處理、分析與應(yīng)用(第3版)[M].北京：人民郵電出版社,2021年.參考書目1.TomWhite等.Hadoop權(quán)威指南:大數(shù)據(jù)的存儲與分析（第4版）[M].北京：清華大學(xué)出版社,2017年2.楊治明,許桂秋.Hadoop大數(shù)據(jù)技術(shù)與應(yīng)用[M].北京：人民郵電出版社,2019年.課程資源大數(shù)據(jù)技術(shù)原理與應(yīng)用.中國大學(xué)MOOC（廈門大學(xué)）.課程簡介Hadoop大數(shù)據(jù)技術(shù)課程是一門綜合實踐性課程，旨在讓學(xué)生掌握Hadoop這一主流的大數(shù)據(jù)技術(shù)和工具，具備處理大規(guī)模數(shù)據(jù)的能力。課程內(nèi)容包括Hadoop分布式文件系統(tǒng)、MapReduce、HBase、Hive、Pig等，同時還涉及大數(shù)據(jù)分析和處理的實踐技能。通過該課程學(xué)習(xí)，讓學(xué)生掌握Hadoop的安裝、配置和使用，以及如何處理不同類型的數(shù)據(jù)、進(jìn)行大數(shù)據(jù)分析和處理。二、課程目標(biāo)表1課程目標(biāo)序號具體課程目標(biāo)課程目標(biāo)1掌握Hadoop大數(shù)據(jù)處理基本原理，能夠理解和應(yīng)用Hadoop生態(tài)系統(tǒng)中的多個組件，包括Hadoop分布式文件系統(tǒng)、MapReduce、Hive、Pig等，掌握Hadoop的安裝、配置和使用，根據(jù)不同項目要求設(shè)計目標(biāo)，采集和處理不同數(shù)據(jù)。課程目標(biāo)2能夠設(shè)計和實現(xiàn)基于Hadoop的大數(shù)據(jù)解決方案，以滿足實際應(yīng)用的需求。能夠利用Hadoop技術(shù)原理進(jìn)行案例分析和討論，將所學(xué)知識應(yīng)用于解決實際問題的實踐中，培養(yǎng)創(chuàng)新思維和團(tuán)隊協(xié)作能力。課程目標(biāo)3能夠理解和遵守職業(yè)道德規(guī)范，以負(fù)責(zé)任的態(tài)度應(yīng)用技術(shù)，尊重并保護(hù)個人和團(tuán)隊的知識產(chǎn)權(quán)，并能夠適應(yīng)技術(shù)和行業(yè)的快速發(fā)展。表2課程目標(biāo)與畢業(yè)要求對應(yīng)關(guān)系畢業(yè)要求指標(biāo)點課程目標(biāo)畢業(yè)要求3：設(shè)計/開發(fā)解決方案：能夠針對計算機(jī)復(fù)雜工程問題的解決方案，設(shè)計并實現(xiàn)滿足特定需求的軟件系統(tǒng)，并能夠在設(shè)計和實現(xiàn)環(huán)節(jié)中體現(xiàn)創(chuàng)新意識，考慮社會、健康、安全、法律、文化以及環(huán)境等因素?！綧】3.1能夠歸納描述用戶的需求，確定設(shè)計目標(biāo)，并能選擇正確的計算機(jī)軟件系統(tǒng)設(shè)計開發(fā)方法?！?畢業(yè)要求4：研究：能夠基于科學(xué)原理并采用科學(xué)方法對計算機(jī)復(fù)雜工程問題進(jìn)行研究，設(shè)計實驗、分析與解釋數(shù)據(jù)，并能通過信息綜合得到合理有效結(jié)論。【H】4.2能夠根據(jù)實驗設(shè)計的目標(biāo)，有效地提取和搜索實驗數(shù)據(jù)，保證數(shù)據(jù)的真實性和完整性。1畢業(yè)要求6：工程與社會：能夠基于工程背景知識進(jìn)行合理分析，評價計算機(jī)工程實踐和復(fù)雜工程問題解決方案對社會、健康、安全、法律以及文化的影響，并理解應(yīng)承擔(dān)的責(zé)任?！綥】6.2能夠綜合評價計算機(jī)軟件、硬件、網(wǎng)絡(luò)和相應(yīng)的復(fù)雜工程問題對社會、健康、安全、法律、文化等方面的影響，明確自己的社會責(zé)任。3三、課程教學(xué)內(nèi)容與方法表3課程目標(biāo)、教學(xué)內(nèi)容和方法對應(yīng)關(guān)系序號項目名稱項目來源教學(xué)目標(biāo)（觀測點、重難點）學(xué)時數(shù)項目類型要求每組人數(shù)教學(xué)方法課程目標(biāo)1實驗1：初識Hadoop大數(shù)據(jù)技術(shù)實驗教材1.理解熟悉大數(shù)據(jù)理論6驗證性必做1講授法課程目標(biāo)12.掌握大數(shù)據(jù)相關(guān)問題的解決方法（重點）3.掌握Hadoop技術(shù)原理（難點）4.完成Hadoop應(yīng)用案例課程目標(biāo)32實驗2：Hadoop環(huán)境的安裝與偽分布式配置實驗教材1.掌握Hadoop三種模式：單機(jī)、偽分布式和完全分布式6驗證性必做1講授法實驗指導(dǎo)課程目標(biāo)32.掌握Hadoop偽分布式安裝原理，并完成相關(guān)步驟（重點）3實驗3：分布式文件系統(tǒng)HDFS實驗教材1.理解HDFS組成與架構(gòu)14設(shè)計研究必做1講授法案例教學(xué)實驗指導(dǎo)課程目標(biāo)12.掌握HDFS工作機(jī)制（重點）3.掌握并熟練應(yīng)用HDFS操作命令（重點）課程目標(biāo)24.理解熟悉HDFS高級功能（難點）4實驗4:YARN組件實驗教材1.理解YARN組件架構(gòu)4驗證性必做1講授法課程目標(biāo)22.熟悉YARN調(diào)度組件（難點）5實驗5：MapRecue原理及編程實驗教材1.理解MapReduce編程模型理論14設(shè)計研究必做1講授法案例教學(xué)實驗指導(dǎo)課程目標(biāo)12.掌握MapReduce工作機(jī)制（重點）3.完成MapReduce編程案例（難點）課程目標(biāo)34.熟悉MapReduce編程進(jìn)階6實驗6：HBase基本原理與編程實驗教材1.掌握HBase基本知識14設(shè)計研究必做1講授法案例教學(xué)實驗指導(dǎo)課程目標(biāo)12.掌握HBase的環(huán)境搭建步驟3.掌握HBaseShell基本操作4.掌握HBase客戶端API應(yīng)用開發(fā)課程目標(biāo)25.掌握基于HBase的MapReduce項目開發(fā)

四、課程考核（一）考核內(nèi)容與考核方式表4-1課程目標(biāo)、考核內(nèi)容與考核方式對應(yīng)關(guān)系課程目標(biāo)考核內(nèi)容所屬學(xué)習(xí)項目考核占比考核方式課程目標(biāo)1大數(shù)據(jù)相關(guān)概念理論和相關(guān)問題的解決方法項目152%課堂表現(xiàn)、實驗作業(yè)、階段測試、課程設(shè)計Hadoop技術(shù)原理HDFS組成和架構(gòu)及其工作機(jī)制項目3MapReduce編程模型理論及其工作機(jī)制項目5HBase基本原理、環(huán)境搭建及其shell基本操作項目6課程目標(biāo)2HDFS的常用操作命令及部分高級功能項目340%課堂表現(xiàn)、實驗作業(yè)、階段測試、課程設(shè)計YARN組件構(gòu)架及其調(diào)度原理項目4HBase客戶端API應(yīng)用開發(fā)項目6基于HBase的MapReduce項目開發(fā)課程目標(biāo)3Hadoop應(yīng)用領(lǐng)域及其相關(guān)案例的實現(xiàn)項目18%課堂表現(xiàn)、課程設(shè)計Hadoop偽分布式原理及其實現(xiàn)項目2MapReduceAPI編程案例實現(xiàn)及其進(jìn)階項目5表4-2課程目標(biāo)與考核方式矩陣關(guān)系課程目標(biāo)考核方式考核占比課程設(shè)計成績比例60%課堂表現(xiàn)成績比例10%實驗作業(yè)成績比例20%階段性測驗成績比例10%課程目標(biāo)150%40%50%80%52%課程目標(biāo)240%40%50%20%40%課程目標(biāo)310%20%0%0%8%（二）成績評定1.平時成績評定（1）課堂表現(xiàn)（25%）：通過學(xué)生在課堂上發(fā)言、回答提問情況，評價學(xué)生的課程參與能力。（2）實驗作業(yè)完成情況（50%）：圍繞課程的學(xué)習(xí)目標(biāo)進(jìn)行作業(yè)的設(shè)計。如讓學(xué)生簡述大數(shù)據(jù)的認(rèn)識，考核學(xué)生對于大數(shù)據(jù)相關(guān)概念的理解情況，幫助學(xué)生將定義轉(zhuǎn)化為自己的理解。（3）階段性測驗（25%）：學(xué)生在平時測試、測驗中掌握課程的情況。2.期末成績評定期末考試主要考察學(xué)生對Hadoop框架HDFS、MapReduce、HBase、Hive、Pig、Flume、Sqoop等組件的原理、特點及使用方法掌握程度。方式為實驗設(shè)計+實驗報告。3.總成績評定總成績應(yīng)由平時考核成績和期末考核成績構(gòu)成總成績（100%）=平時成績（40%）+期末成績（60%）（三）評分標(biāo)準(zhǔn)表5評分標(biāo)準(zhǔn)（非試卷考核項目）考核項目評分標(biāo)準(zhǔn)優(yōu)秀(100>x≥90)良好(90>x≥80)中等(80>x≥70)及格(70>x≥60)不及格(x<60)課堂表現(xiàn)課上嚴(yán)格遵守課堂紀(jì)律，按要求完成課堂練習(xí)且正確率高，積極參與課堂討論，討論觀點有新意，有見解，實驗課不遲到早退，與老師積極互動。課上嚴(yán)格遵守課堂紀(jì)律，按要求完成課堂練習(xí)且正確率較高，積極參與課堂討論，討論觀點有一定新意和見解，實驗課不遲到早退，與老師積極互動。課上嚴(yán)格遵守課堂紀(jì)律，按要求完成課堂練習(xí)且有一定正確率，參與課堂討論，討論觀點有一定新意和見解，實驗課不遲到早退，與老師互動。課上嚴(yán)格遵守課堂紀(jì)律，按要求完成課堂練習(xí)且基本正確率，參與課堂討論，討論觀點基本的新意和見解，實驗課不遲到早退，與老師偶爾互動。課上不遵守課堂紀(jì)律，不參與課堂討論，未按要求完成課堂練習(xí)或正確率低。實驗課缺課。實驗作業(yè)實驗作業(yè)按照實驗?zāi)繕?biāo)完成，步驟完整、數(shù)據(jù)詳實、有深刻的實驗反思，并按時提交。實驗作業(yè)基本按照實驗?zāi)繕?biāo)完成，步驟完整、數(shù)據(jù)詳實，有實驗反思，并按時提交。實驗作業(yè)基本按照實驗?zāi)繕?biāo)完成，步驟完整，缺乏數(shù)據(jù)支撐，有實驗反思，并按時提交。實驗作業(yè)基本按照實驗?zāi)繕?biāo)完成，步驟描述不完整，缺乏數(shù)據(jù)支撐，缺乏實驗反思，并按時提交。實驗作業(yè)未按照實驗?zāi)繕?biāo)完成，缺乏實驗步驟、數(shù)據(jù)支撐和實驗反思，未按時提交。階段性測驗掌握物Hadoop分布式文件系、MapReduce、Hive、Pig等相關(guān)知識，能熟練使用相關(guān)知識并解決問題。掌握物Hadoop分布式文件系、MapReduce、Hive、Pig等相關(guān)知識，能使用相關(guān)知識并解決問題。掌握物Hadoop分布式文件系、MapReduce、Hive、Pig等相關(guān)知識，能在一定程度上使用相關(guān)知識并解決問題?；菊莆瘴颒adoop分布式文件系、MapReduce、Hive、Pig等相關(guān)知識，能部分使用相關(guān)知識并解決問題。未掌握物Hadoop分布式文件系、MapReduce、Hive、Pig等相關(guān)知識，無法使用相關(guān)知識并解決問題。課程設(shè)計（1）課程設(shè)計符合課程性質(zhì)，選題范圍適中，具有較高的研究價值和意義，表現(xiàn)出很強(qiáng)的問題意識。（2）課程設(shè)計思路清晰且具有創(chuàng)新性。（3）理解課程設(shè)計原理，且代碼能夠正常運行（4）課程報告結(jié)構(gòu)合理，組織嚴(yán)密，連貫一致。語言表達(dá)準(zhǔn)確，敘述清楚，符合專業(yè)術(shù)語規(guī)范。（5）課程報告符合學(xué)術(shù)規(guī)范。（1）課程設(shè)計選題恰當(dāng)合理，具有較高的研究價值和意義，表現(xiàn)出較強(qiáng)的問題意識。（2）課程設(shè)計思路較為清晰且具有一定創(chuàng)新性。（3）基本理解課程設(shè)計原理，且代碼能夠正常運行（4）課程報告結(jié)構(gòu)較為合理，語言表達(dá)較為準(zhǔn)確，敘述清楚，所使用的專業(yè)術(shù)語較為規(guī)范。（5）課程報告基本符合學(xué)術(shù)規(guī)范，無明顯錯誤。（1）課程設(shè)計選題較為合理，具有一定的研究價值和意義，表現(xiàn)出一定的問題意識。（2）課程設(shè)計思路基本清晰且具有一定創(chuàng)新性（3）在一定程度上理解課程設(shè)計原理，且代碼能夠正常運行（4）課程報告結(jié)構(gòu)較為合理，語言表達(dá)較為準(zhǔn)確，敘述清楚，所使用的專業(yè)術(shù)語較為規(guī)范。（5）課程報告基本符合學(xué)術(shù)規(guī)范，無明顯錯誤。（1）課程設(shè)計選題具有一定的研究價值和意義，但凝練不夠，問題意識欠佳。（2）課程設(shè)計思路基本清晰，但創(chuàng)新性不足（3）在一定程度上理解課程設(shè)計原理，且代碼能夠正常運行（4）課程報告結(jié)構(gòu)基本合理，語言表達(dá)基本清楚，所使用的教育專業(yè)術(shù)語基本規(guī)范。（5）課程報告基本符合學(xué)術(shù)規(guī)范