《網(wǎng)絡(luò)爬蟲與數(shù)據(jù)收集項目實訓(xùn)》教學(xué)大綱

《網(wǎng)絡(luò)爬蟲與數(shù)據(jù)收集項目實訓(xùn)》教學(xué)大綱課程編號：13220514英文名稱：ProjectTrainingforWebCrawlerandDataAcquisition學(xué)分：3學(xué)時：獨立實踐環(huán)節(jié)總學(xué)時3周，其中實踐3周先修課程：Python編程技術(shù)課程類別：專業(yè)方向課程授課對象：數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)學(xué)生教學(xué)單位：機械與電氣工程學(xué)院修讀學(xué)期：第5學(xué)期一、課程描述和目標(biāo)網(wǎng)絡(luò)爬蟲與數(shù)據(jù)收集項目實訓(xùn)主要針對數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)、計算機科學(xué)與技術(shù)等專業(yè)學(xué)生，主要通過項目實訓(xùn)的形式熟練互聯(lián)網(wǎng)大數(shù)據(jù)采集技術(shù)及各種典型爬蟲的技術(shù)，并結(jié)合相關(guān)的開源包使用Python進行實踐，以加深學(xué)生對所學(xué)內(nèi)容的理解。通過本課程教學(xué)，使學(xué)生對互聯(lián)網(wǎng)大數(shù)據(jù)采集技術(shù)有一個全面的了解，掌握基本的信息內(nèi)容采集、提取和分析方法，并且具備一定的針對具體信息采集需求的實際運用和解決能力。課程目標(biāo)1：熟練掌握各種典型爬蟲技術(shù)原理、技術(shù)框架、實現(xiàn)方法、主要開源包的使用，增強邏輯思維能力與動手能力。課程目標(biāo)2：能夠通過實訓(xùn)將所學(xué)知識和技術(shù)運用到大數(shù)據(jù)相關(guān)項目的設(shè)計和開發(fā)中，達到理論和實踐相結(jié)合，從而提升學(xué)生的知識的綜合運用能力、分析問題和解決實際問題的能力。課程目標(biāo)3：能夠理解項目團隊中互相協(xié)調(diào)、遵守紀律的必要性；能以團隊合作形式完成網(wǎng)絡(luò)爬蟲與數(shù)據(jù)收集項目的設(shè)計和開發(fā)。二、課程目標(biāo)對畢業(yè)要求的支撐關(guān)系畢業(yè)要求指標(biāo)點課程目標(biāo)權(quán)重指標(biāo)點4-2：能夠融合大數(shù)據(jù)專業(yè)知識結(jié)構(gòu)，就復(fù)雜工程問題中涉及的領(lǐng)域性功能或性能問題進行研究，設(shè)計相關(guān)的實驗方案，并對結(jié)果或數(shù)據(jù)進行分析與總結(jié)。課程目標(biāo)1H指標(biāo)點5-1：能夠針對大數(shù)據(jù)工程問題，為構(gòu)建復(fù)雜工程問題的模擬環(huán)境選擇和使用合適的現(xiàn)代工程工具和信息技術(shù)工具，并能理解其局限性。課程目標(biāo)2H指標(biāo)點9-2：具備良好的團隊意識、團隊合作與溝通、團隊協(xié)調(diào)或組織能力，能夠在多學(xué)科背景下的項目組織中根據(jù)需要承擔(dān)成員或負責(zé)人的角色。課程目標(biāo)3M指標(biāo)點12-2：能夠具有了解和緊跟計算機技術(shù)發(fā)展、保持和增強自我競爭力、適應(yīng)個人持續(xù)發(fā)展所需要的自主學(xué)習(xí)能力。課程目標(biāo)3M三、教學(xué)內(nèi)容、基本要求與學(xué)時分配序號教學(xué)內(nèi)容基本要求及重、難點（含德育要求）學(xué)時教學(xué)方式對應(yīng)課程目標(biāo)1實訓(xùn)任務(wù)、目的、要求及考核方式布置和講解項目實訓(xùn)題目學(xué)生分組，指定組長，按組選定題目理解項目實訓(xùn)的規(guī)范要求，理解項目實訓(xùn)題目。完成分組，4至5位同學(xué)為一個小組。德育：積極向上、自主學(xué)習(xí)、團隊合作、探索創(chuàng)新。1天講授課程目標(biāo)1課程目標(biāo)2課程目標(biāo)32網(wǎng)絡(luò)爬蟲與數(shù)據(jù)收集項目需求分析、功能模塊設(shè)定完成功能模塊設(shè)計，內(nèi)容體現(xiàn)在項目實訓(xùn)設(shè)計報告中。德育：積極向上、自主學(xué)習(xí)、團隊合作、探索創(chuàng)新。2天分組討論課程目標(biāo)1課程目標(biāo)2課程目標(biāo)33網(wǎng)絡(luò)爬蟲與數(shù)據(jù)收集項目代碼編寫完成存儲、查詢和可視化分析。成果體現(xiàn)在應(yīng)用系統(tǒng)開發(fā)源代碼中。德育：積極向上、自主學(xué)習(xí)、團隊合作、探索創(chuàng)新。8天分組討論課程目標(biāo)1課程目標(biāo)2課程目標(biāo)34網(wǎng)絡(luò)爬蟲與數(shù)據(jù)收集項目程序測試網(wǎng)絡(luò)爬蟲與數(shù)據(jù)收集項目部署與發(fā)布項目實訓(xùn)設(shè)計報告完成項目考核要求所涉及的各種功能，完成項目實訓(xùn)設(shè)計報告。德育：積極向上、自主學(xué)習(xí)、團隊合作、探索創(chuàng)新。2天分組討論課程目標(biāo)1課程目標(biāo)2課程目標(biāo)35提交項目代碼和項目實訓(xùn)設(shè)計報告匯報答辯以小組形式匯報答辯。德育：積極向上、自主學(xué)習(xí)、團隊合作、探索創(chuàng)新。2天演示答辯課程目標(biāo)1課程目標(biāo)2課程目標(biāo)3合計：15天四、課程教學(xué)方法采用集中講授、小組討論等教學(xué)方式五、學(xué)業(yè)評價和課程考核推行多元評價，對本課程所采用的評價和考核方式作具體說明，若采用多種考核方法請分別列出考核評價的方法、內(nèi)容、考核標(biāo)準、成績占比等，考核方法、內(nèi)容應(yīng)突出“學(xué)生中心、產(chǎn)出導(dǎo)向”。（一）考核方式及具體要求1.課程成績構(gòu)成與要求課程考核注重形成性和終結(jié)性評價相結(jié)合，考核內(nèi)容主要由平時考勤、階段實驗成績、項目綜合大作業(yè)組成，均按百分制計分，其中項目綜合大作業(yè)成績占80%、階段實驗成績占10%、平時考勤成績占10%。2.課程目標(biāo)達成考核與評價序號教學(xué)環(huán)節(jié)課程目標(biāo)1（分值）課程目標(biāo)2（分值）課程目標(biāo)3（分值）合計1平時考勤343102項目作品151515453項目文檔4106204演示答辯465155團隊協(xié)作22610課程目標(biāo)對應(yīng)分值283735100（二）考核與評價標(biāo)準1.項目綜合大作業(yè)考核與評價標(biāo)準分值觀測點90-100分70-89分60-69分0-59分項目綜合大作業(yè)大作業(yè)規(guī)范，符合課程論文寫作要求；內(nèi)容主題明確，符合課程教學(xué)內(nèi)容，有明確的綜合分析論點。敘述清楚，理論正確，結(jié)論嚴謹合理；文字規(guī)范。結(jié)果正確、完整，分析準確，有條理，截圖清晰?？偨Y(jié)不空洞，具體、有內(nèi)涵，體現(xiàn)出深入的思考過程。大作業(yè)格式符合課程論文寫作要求；主題明確，符合課程教學(xué)內(nèi)容，具有較好的綜合分析論點。敘述描述良好，理論正確，結(jié)論合理；文字較規(guī)范。結(jié)果正確、比較完整，分析比較準確，條理一般，截圖清晰?？偨Y(jié)不空洞，具體、有內(nèi)涵，較好地體現(xiàn)出思考過程。大作業(yè)格式符合課程論文寫作要求；主題基本明確，較符合課程教學(xué)內(nèi)容，具有較好的綜合分析論點。敘述清楚，理論正確，結(jié)論基本合理；文字一般。結(jié)果正確、比較完整，分析、條理一般，截圖不清晰。總結(jié)不空洞，具體、有內(nèi)涵，基本體現(xiàn)出思考過程。大作業(yè)格式不符合課程論文要求，僅能反映部分主題內(nèi)容，論文結(jié)構(gòu)不完整，論點分析不清晰。敘述不清楚，理論不正確，結(jié)論不合理；文字不通順。結(jié)果不正確，分析條理不清楚，截圖不清晰?？偨Y(jié)空洞，不具體；缺乏思考過程。六、教材與參考書（一）推薦教材1．《Python爬蟲大數(shù)據(jù)采集與挖掘》，曾劍平主編，清華大