2021年全省職業(yè)院校學(xué)生技能大賽高職組“大數(shù)據(jù)技術(shù)與應(yīng)用”賽項(xiàng)競(jìng)賽規(guī)程

2021年甘肅省高職院校技能大賽（高職組）

“大數(shù)據(jù)技術(shù)與應(yīng)用”賽項(xiàng)競(jìng)賽規(guī)程

一、賽項(xiàng)名稱

賽項(xiàng)名稱：大數(shù)據(jù)技術(shù)與應(yīng)用

賽項(xiàng)組別：高職組

競(jìng)賽形式：團(tuán)體賽

賽項(xiàng)專業(yè)大類：電子信息

二、競(jìng)賽目的

為適應(yīng)大數(shù)據(jù)產(chǎn)業(yè)對(duì)高素質(zhì)技術(shù)技能型人才的職業(yè)需求，賽項(xiàng)以

大數(shù)據(jù)技術(shù)與應(yīng)用為核心內(nèi)容和工作基礎(chǔ)，重點(diǎn)考查參賽選手基于

Hadoop平臺(tái)環(huán)境下，充分利用Hadoop技術(shù)生態(tài)組件的特點(diǎn)，綜合軟

件開發(fā)相關(guān)技術(shù)，解決實(shí)際問(wèn)題的能力，激發(fā)學(xué)生對(duì)大數(shù)據(jù)相關(guān)知識(shí)

和技術(shù)的學(xué)習(xí)興趣，提升學(xué)生職業(yè)素養(yǎng)和職業(yè)技能，努力為中國(guó)大數(shù)

據(jù)產(chǎn)業(yè)的發(fā)展儲(chǔ)備及輸送新鮮血液。

通過(guò)舉辦本賽項(xiàng)，可以搭建校企合作的平臺(tái)，提升大數(shù)據(jù)技術(shù)與

應(yīng)用專業(yè)及其他相關(guān)專業(yè)畢業(yè)生能力素質(zhì)，滿足企業(yè)用人需求，促進(jìn)

校企合作協(xié)同育人，對(duì)接產(chǎn)業(yè)發(fā)展，實(shí)現(xiàn)行業(yè)資源、企業(yè)資源與教學(xué)

資源的有機(jī)融合，使高職院校在專業(yè)建設(shè)、課程建設(shè)、人才培養(yǎng)方案

和人才培養(yǎng)模式等方面，跟蹤社會(huì)發(fā)展的最新需要，縮小人才培養(yǎng)與

行業(yè)需求差距，引領(lǐng)職業(yè)院校專業(yè)建設(shè)與課程改革。

三、競(jìng)賽內(nèi)容

賽項(xiàng)以大數(shù)據(jù)技術(shù)與應(yīng)用為核心內(nèi)容，重點(diǎn)考查參賽選手基于

-1-

Hadoop平臺(tái)環(huán)境下，利用Hadoop技術(shù)生態(tài)組件，綜合軟件開發(fā)相關(guān)

技術(shù)，解決實(shí)際問(wèn)題的能力，具體包括：

1.掌握按照項(xiàng)目需求配置管理Hadoop大數(shù)據(jù)平臺(tái)及相關(guān)生態(tài)組

件；

2.掌握網(wǎng)絡(luò)爬蟲的相關(guān)技術(shù)，完成指定數(shù)據(jù)的采集及處理能力；

3.綜合利用Spark技術(shù)、數(shù)據(jù)倉(cāng)庫(kù)Hive工具完成數(shù)據(jù)清洗、分

析及數(shù)據(jù)推送等一系列大數(shù)據(jù)操作；

4.綜合運(yùn)用HTML、Python等開發(fā)語(yǔ)言，對(duì)數(shù)據(jù)進(jìn)行可視化呈現(xiàn)；

5.根據(jù)數(shù)據(jù)可視化結(jié)果，完成數(shù)據(jù)分析報(bào)告的編寫；

6.根據(jù)競(jìng)賽任務(wù)要求，參賽隊(duì)伍在4小時(shí)競(jìng)賽時(shí)間內(nèi)須按順序

完成競(jìng)賽任務(wù)，但每項(xiàng)任務(wù)用時(shí)可自行掌握。

表1：競(jìng)賽內(nèi)容構(gòu)成

考核環(huán)節(jié)考核知識(shí)點(diǎn)和技能點(diǎn)描述

Hadoop平臺(tái)安裝部署和基本配置考察Hadoop平臺(tái)及組

件的部署能力，掌握常

Hadoop平臺(tái)及組Hadoop集群節(jié)點(diǎn)的動(dòng)態(tài)增加與刪除

用的基本配置和命令，

件的部署管理

Hadoop平臺(tái)相關(guān)組件部署與管理能夠部署和管理

Hadoop平臺(tái)的高可用Hadoop高可用集群。

使用開發(fā)者工具查看網(wǎng)頁(yè)源碼，分析網(wǎng)

頁(yè)結(jié)構(gòu)，明確數(shù)據(jù)采集對(duì)象

構(gòu)建數(shù)據(jù)采集請(qǐng)求，抓取網(wǎng)絡(luò)數(shù)據(jù)

考察學(xué)生多維度數(shù)據(jù)

利用網(wǎng)絡(luò)爬蟲相關(guān)組件實(shí)現(xiàn)網(wǎng)絡(luò)數(shù)據(jù)爬采集能力，包括對(duì)關(guān)系

數(shù)據(jù)采集取型數(shù)據(jù)庫(kù)、非關(guān)系型數(shù)

規(guī)則文件數(shù)據(jù)和關(guān)系型數(shù)據(jù)庫(kù)數(shù)據(jù)抓取據(jù)庫(kù)和網(wǎng)絡(luò)爬蟲技術(shù)

以及數(shù)據(jù)同步的應(yīng)用。

非關(guān)系型數(shù)據(jù)庫(kù)數(shù)據(jù)抓取以及數(shù)據(jù)同步

數(shù)據(jù)采集結(jié)果導(dǎo)出及數(shù)據(jù)庫(kù)推送

基于Hadoop平臺(tái)架構(gòu)組件和多維度的數(shù)考察對(duì)分布式計(jì)算、分

數(shù)據(jù)清洗與分析據(jù)采集，實(shí)現(xiàn)數(shù)據(jù)一致性檢查、無(wú)效值布式存儲(chǔ)系統(tǒng)、數(shù)據(jù)倉(cāng)

和缺省值的處理庫(kù)等綜合應(yīng)用能力，使

-2-

多表數(shù)據(jù)合并和離群值處理用Spark技術(shù)、數(shù)據(jù)倉(cāng)

庫(kù)Hive工具完成數(shù)據(jù)

通過(guò)常見的數(shù)據(jù)分析算法，對(duì)數(shù)據(jù)進(jìn)行清洗、分析及數(shù)據(jù)推送

標(biāo)準(zhǔn)化、離散化和多元化分析等一系列大數(shù)據(jù)操作

掌握數(shù)據(jù)倉(cāng)庫(kù)導(dǎo)入、導(dǎo)出，利用數(shù)據(jù)倉(cāng)

庫(kù)相關(guān)命令或代碼實(shí)現(xiàn)數(shù)據(jù)多維度、多

層次的分析

對(duì)數(shù)據(jù)的查詢、整理和計(jì)算。進(jìn)行編譯、

打包、發(fā)布，執(zhí)行程序，完成數(shù)據(jù)處理、

清洗。

實(shí)現(xiàn)不同數(shù)據(jù)庫(kù)間的文件傳輸及轉(zhuǎn)換

數(shù)據(jù)預(yù)測(cè)分析

通過(guò)常見的數(shù)據(jù)可視

編寫后臺(tái)代碼實(shí)現(xiàn)數(shù)據(jù)庫(kù)訪問(wèn)和數(shù)據(jù)整化方法，將數(shù)據(jù)分析結(jié)

理果以圖表的形式進(jìn)行

數(shù)據(jù)可視化

呈現(xiàn)，使用Python編

編寫Web前端代碼，對(duì)數(shù)據(jù)分析結(jié)果進(jìn)程語(yǔ)言，實(shí)現(xiàn)數(shù)據(jù)源分

行呈現(xiàn)析結(jié)果展現(xiàn)

考察學(xué)生對(duì)大數(shù)據(jù)技

通過(guò)知識(shí)技能，根據(jù)數(shù)據(jù)分析、預(yù)測(cè)及

綜合分析術(shù)與分析的綜合操作

可視化結(jié)果進(jìn)行分析，做出分析報(bào)告。

能力和業(yè)務(wù)分析能力

四、競(jìng)賽方式

最終以省上下發(fā)文件為準(zhǔn)執(zhí)行。

五、競(jìng)賽試題

本賽項(xiàng)樣題詳見《附件一》。

六、競(jìng)賽環(huán)境

競(jìng)賽現(xiàn)場(chǎng)設(shè)置場(chǎng)內(nèi)競(jìng)賽區(qū)、現(xiàn)場(chǎng)裁判工作區(qū)、技術(shù)支持區(qū)等。

監(jiān)考人員協(xié)助裁判長(zhǎng)和現(xiàn)場(chǎng)裁判做好負(fù)責(zé)工位范圍內(nèi)的秩序維

持，監(jiān)考人員不得在考場(chǎng)內(nèi)隨意走動(dòng)。

技術(shù)支持保障人員在技術(shù)支持服務(wù)區(qū)候場(chǎng)，有需要時(shí)在現(xiàn)場(chǎng)裁判

-3-

的帶領(lǐng)下到相關(guān)的工位進(jìn)行賽場(chǎng)技術(shù)支持保障，在條件具備時(shí)，技術(shù)

支持區(qū)可不設(shè)置在考場(chǎng)內(nèi)。

場(chǎng)內(nèi)競(jìng)賽區(qū)為參賽隊(duì)提供統(tǒng)一的競(jìng)賽設(shè)備；無(wú)需選手自帶任何工

具及附件。

競(jìng)賽現(xiàn)場(chǎng)符合消防安全規(guī)定，現(xiàn)場(chǎng)消防器材和消防栓合格有效，

應(yīng)急照明設(shè)施狀態(tài)合格，賽場(chǎng)明顯位置張貼緊急疏散圖，賽場(chǎng)地面張

貼熒光疏散指示箭頭，賽場(chǎng)出入口專人負(fù)責(zé)，隨時(shí)保證安全通道的暢

通無(wú)阻。

各工位分區(qū)供電，強(qiáng)電弱電分開布線，現(xiàn)場(chǎng)臨時(shí)用電滿足《施工

現(xiàn)場(chǎng)臨時(shí)用電安全技術(shù)規(guī)范》JGJ46-2005的要求。競(jìng)賽現(xiàn)場(chǎng)通風(fēng)良

好、照明需符合教室采光規(guī)范。

七、技術(shù)規(guī)范

本賽項(xiàng)的技術(shù)規(guī)范將包括：相關(guān)專業(yè)的教育教學(xué)要求、行業(yè)、職

業(yè)技術(shù)標(biāo)準(zhǔn)，以及根據(jù)高職目錄修訂后的大數(shù)據(jù)技術(shù)與應(yīng)用相關(guān)專業(yè)

人才培養(yǎng)標(biāo)準(zhǔn)和規(guī)范，適時(shí)地修訂本賽項(xiàng)遵循的技術(shù)規(guī)范。

表2：基礎(chǔ)標(biāo)準(zhǔn)

標(biāo)準(zhǔn)內(nèi)容

GB/T11457-2006信息技術(shù)、軟件工程術(shù)語(yǔ)

GB8566-88計(jì)算機(jī)軟件開發(fā)規(guī)范

GB/T12991-2008信息技術(shù)數(shù)據(jù)庫(kù)語(yǔ)言SQL第1部分：框架

GB/T21025-2007XML使用指南

GB/T20009-2005信息安全技術(shù)數(shù)據(jù)庫(kù)管理系統(tǒng)安全評(píng)估準(zhǔn)則已發(fā)布

GB/T20273-2006信息安全技術(shù)數(shù)據(jù)庫(kù)管理系統(tǒng)安全技術(shù)要求

20100383-T-469信息技術(shù)安全技術(shù)信息安全管理體系實(shí)施指南

表3：軟件開發(fā)標(biāo)準(zhǔn)

標(biāo)準(zhǔn)內(nèi)容

GB/T8566-2001信息技術(shù)軟件生存周期過(guò)程

-4-

GB/T15853-1995軟件支持環(huán)境

GB/T14079-1993軟件維護(hù)指南

GB/T17544-1998信息技術(shù)軟件包質(zhì)量要求和測(cè)試

八、技術(shù)平臺(tái)

表4：競(jìng)賽設(shè)備

設(shè)備類別數(shù)量設(shè)備用途基本配置

1、CPU模塊：2*Intel

5118(2.3GHz/12核

/16.5MB/105W)

2、內(nèi)存模塊：8*32GB2Rx4

DDR4-2666P-R

3、硬盤模塊：6*600GB12G

支撐大數(shù)據(jù)競(jìng)賽管

SAS10K2.5inEP512n

理系統(tǒng)運(yùn)行使用。內(nèi)

4臺(tái)。4、RAID卡：1*12Gb2端口

嵌虛擬化資源管理

競(jìng)賽服務(wù)采用集群管理SASRAID卡(帶2GB緩存,支

控制端，作為虛擬化

器方式；持8個(gè)SAS口,PCIe,不含超

資源管理系統(tǒng)的計(jì)

1臺(tái)備用級(jí)電容)

算資源、網(wǎng)絡(luò)資源和

5、網(wǎng)口：4端口千兆電接口

存儲(chǔ)資源的源節(jié)點(diǎn)。

網(wǎng)卡-360T-B26、電源模

塊：550W交流電源模塊(白

金)

7、超級(jí)電容模塊：LSIG3

超級(jí)電容模塊(適配2U機(jī)

型)

系統(tǒng)基于kvm構(gòu)建，可模擬

大數(shù)據(jù)環(huán)境搭建、大數(shù)據(jù)采

集、大數(shù)據(jù)預(yù)處理、大數(shù)據(jù)

存儲(chǔ)及管理、大數(shù)據(jù)分析及

挖掘、大數(shù)據(jù)展現(xiàn)和應(yīng)用等

貫穿大數(shù)據(jù)技術(shù)的相關(guān)知識(shí)

點(diǎn)，提供大數(shù)據(jù)競(jìng)賽管理系

大數(shù)據(jù)競(jìng)支撐大數(shù)據(jù)競(jìng)賽實(shí)

1統(tǒng)所需的虛擬服務(wù)器，結(jié)構(gòu)

賽平臺(tái)操考試

化、半結(jié)構(gòu)化及非結(jié)構(gòu)化數(shù)

據(jù)的數(shù)據(jù)庫(kù)等基礎(chǔ)支撐環(huán)

境；涵蓋分布式虛擬存儲(chǔ)技

術(shù)，大數(shù)據(jù)獲取、存儲(chǔ)、組

織、分析和決策操作的可視

化技術(shù)。具體包括：Hadoop、

HDFS、Hbase、Hive、

-5-

MapReduce、Kafka、Spark、

Storm、Mahout、MySQL、

Echarts等，所涉及開發(fā)語(yǔ)

言包括Java、Python、Scala、

HTML、Javascript等。

每支參賽隊(duì)伍

性能相當(dāng)于i5處理器，8G

3臺(tái)。

以上內(nèi)存，SSD200G以上硬

客戶端根據(jù)參賽團(tuán)隊(duì)競(jìng)賽選手比賽使用。

盤，顯示器要求1024*768以

數(shù)量，配備10%

上。

的備份機(jī)器。

表5：軟件環(huán)境

設(shè)備類型軟件類別軟件名稱、版本號(hào)

大數(shù)據(jù)集群操作系統(tǒng)CentOS7.4

Hadoop2.6.0

Yarn2.6.0

Zookeeper3.4.5

服務(wù)器集群大數(shù)據(jù)分析平臺(tái)組件Flume1.6.0

Sqoop1.4

kafka1.0

Spark2.0

數(shù)據(jù)庫(kù)MySQL5.7

PC操作系統(tǒng)Windows1064位

瀏覽器Chrome

Python3.664bit

開發(fā)語(yǔ)言

Scala2.11

Pycharm2019

開發(fā)客戶端（CommunityEdition）

開發(fā)工具

IDEA2019

（CommunityEdition）

數(shù)據(jù)采集組件Scrapy

ECharts

數(shù)據(jù)可視化組件

Flask

-6-

Jinja2

文檔編輯器MSOffice2016

輸入法拼音輸入法

九、成績(jī)?cè)u(píng)定

（一）評(píng)分方法

選手在完成任務(wù)之后，將任務(wù)完成結(jié)果拷貝至U盤中，由參賽選

手隊(duì)長(zhǎng)簽字確認(rèn)（簽工位號(hào)）。

評(píng)分采取分步得分、錯(cuò)誤不傳遞、累計(jì)總分的計(jì)分方式，只記錄

參賽隊(duì)整體成績(jī)。

參賽隊(duì)提交比賽任務(wù)結(jié)束請(qǐng)求或者在比賽時(shí)間終止后，不得再進(jìn)

行任何操作。否則，視為比賽作弊，給參賽隊(duì)記警告一次。

在競(jìng)賽過(guò)程中，選手如有不服從裁判判決、擾亂賽場(chǎng)秩序、舞弊

等不文明行為，由裁判按照規(guī)定扣減相應(yīng)分?jǐn)?shù)并且給予警告，情節(jié)嚴(yán)

重的取消競(jìng)賽資格，競(jìng)賽成績(jī)記0分，隊(duì)員退出比賽現(xiàn)場(chǎng)。

（二）評(píng)分標(biāo)準(zhǔn)

表6：考核要點(diǎn)和評(píng)分標(biāo)準(zhǔn)

考查分值

任務(wù)描述評(píng)分標(biāo)準(zhǔn)

點(diǎn)（分）

按照Hadoop大數(shù)據(jù)平臺(tái)部署要求主要評(píng)分點(diǎn)包括Linux系

Hadoop

完成平臺(tái)安裝部署和基本配置，按統(tǒng)基本操作、Hadoop平臺(tái)

平臺(tái)及組件、

要求完成平臺(tái)相關(guān)組件的部署與管安裝、相關(guān)配置文件修

組件的配置、15

理，以及集群節(jié)點(diǎn)的動(dòng)態(tài)增刪和高改、平臺(tái)相關(guān)組件部署、

部署管管理

可用部署。檢查平臺(tái)進(jìn)程運(yùn)行狀態(tài)，集群節(jié)點(diǎn)的動(dòng)態(tài)增刪、平

理

確定配置正確。臺(tái)高可用部署。

數(shù)據(jù)按照要求完成數(shù)據(jù)采集代碼的編主要評(píng)分點(diǎn)包括數(shù)據(jù)采

數(shù)據(jù)采集寫，使得數(shù)據(jù)采集程序能夠正常運(yùn)集請(qǐng)求構(gòu)建、數(shù)據(jù)解析、

20

采集代碼行，將采集到的數(shù)據(jù)保存在指定格數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)文件操

編寫式的路徑下。作。

-7-

完成對(duì)數(shù)據(jù)的查詢、整理和計(jì)算。

數(shù)據(jù)進(jìn)行編譯、打包、發(fā)布，并在服務(wù)主要評(píng)分點(diǎn)包括數(shù)據(jù)處

清洗器上執(zhí)行程序完成數(shù)據(jù)清洗工作，理代碼編寫、

數(shù)據(jù)清

與分將清洗后的數(shù)據(jù)放置在指定路徑數(shù)據(jù)文件解析、構(gòu)建數(shù)據(jù)

洗與分下。輸出格式、打包發(fā)布、數(shù)25

析代

析將清洗后的數(shù)據(jù)加載到數(shù)據(jù)倉(cāng)庫(kù)據(jù)清洗執(zhí)行。

碼編后，根據(jù)項(xiàng)目需求使用命令或代碼，數(shù)據(jù)倉(cāng)庫(kù)建庫(kù)、建表、查

寫完成數(shù)據(jù)分析查詢，并將查詢結(jié)果詢等處理。

導(dǎo)出為數(shù)據(jù)文件。

數(shù)據(jù)

通過(guò)編寫后臺(tái)數(shù)據(jù)訪問(wèn)代碼完成數(shù)

可視主要評(píng)分點(diǎn)包括可視化

數(shù)據(jù)可據(jù)可視化后臺(tái)開發(fā)，編寫前端Web

化代后臺(tái)代碼開發(fā)、可視化前20

視化界面實(shí)現(xiàn)數(shù)據(jù)分析結(jié)果可視化呈

碼編端代碼開發(fā)、前端展示。

現(xiàn)。

寫

主要評(píng)分點(diǎn)包括能夠按

綜合文檔根據(jù)項(xiàng)目要求，以數(shù)據(jù)可視化結(jié)果照賽項(xiàng)要求編寫結(jié)論，能

為依據(jù)，得出數(shù)據(jù)分析結(jié)論，生成15

分析編寫夠按照要求提出正確的

分析報(bào)告并提交。

建議。

主要評(píng)分點(diǎn)包括：競(jìng)賽團(tuán)

職業(yè)職業(yè)團(tuán)隊(duì)分工明確合理、操作規(guī)范、文

隊(duì)分工明確合理、操作規(guī)5

素養(yǎng)素養(yǎng)明競(jìng)賽

范、文明競(jìng)賽。

（三）成績(jī)審核及公布方法

最終以省上下發(fā)文件為準(zhǔn)執(zhí)行。

十、申訴與仲裁

最終以省上下發(fā)文件為準(zhǔn)執(zhí)行。

十一、競(jìng)賽觀摩

由于賽項(xiàng)特點(diǎn)及賽場(chǎng)條件限制，本賽項(xiàng)不設(shè)置現(xiàn)場(chǎng)觀摩環(huán)節(jié)。

-8-

十二、競(jìng)賽視頻

賽場(chǎng)內(nèi)部署無(wú)盲點(diǎn)錄像設(shè)備，能實(shí)時(shí)錄制賽場(chǎng)情況。

十三、競(jìng)賽須知

（一）參賽隊(duì)須知

1．參賽隊(duì)按照大賽賽程安排，憑賽項(xiàng)執(zhí)委會(huì)頒發(fā)的參賽證和有

效身份證件參加比賽及相關(guān)活動(dòng)。

2．賽項(xiàng)執(zhí)委會(huì)統(tǒng)一安排各參賽隊(duì)在比賽前一天進(jìn)入賽場(chǎng)熟悉環(huán)

境和設(shè)施情況。

3．參賽隊(duì)選手、領(lǐng)隊(duì)和指導(dǎo)教師要有良好的職業(yè)道德，嚴(yán)格遵

守比賽規(guī)則和比賽紀(jì)律，服從裁判，尊重裁判和賽場(chǎng)工作人員，自覺

維護(hù)賽場(chǎng)秩序。

4．領(lǐng)隊(duì)?wèi)?yīng)負(fù)責(zé)賽事活動(dòng)期間本隊(duì)所有選手的人身及財(cái)產(chǎn)安全，

如發(fā)現(xiàn)意外事故，應(yīng)及時(shí)向賽項(xiàng)執(zhí)委會(huì)報(bào)告。

5．各學(xué)校組織代表隊(duì)時(shí)，須為參賽選手購(gòu)買大賽期間的人身意

外傷害保險(xiǎn)。

（二）領(lǐng)隊(duì)和指導(dǎo)教師須知

1．嚴(yán)格遵守賽場(chǎng)的各項(xiàng)規(guī)定，服從裁判，文明競(jìng)賽。如發(fā)現(xiàn)弄

虛作假者，取消參賽資格，名次無(wú)效。

2．領(lǐng)隊(duì)和指導(dǎo)教師務(wù)必帶好有效身份證件，在活動(dòng)過(guò)程中佩戴

“指導(dǎo)教師證”參加競(jìng)賽相關(guān)活動(dòng)。

3．各代表隊(duì)領(lǐng)隊(duì)要堅(jiān)決執(zhí)行競(jìng)賽的各項(xiàng)規(guī)定，加強(qiáng)對(duì)參賽人員

的管理，做好賽前準(zhǔn)備工作，督促選手帶好證件等競(jìng)賽相關(guān)材料。

4．在比賽期間要嚴(yán)格遵守比賽規(guī)則，不得私自接觸裁判人員。

5．競(jìng)賽過(guò)程中，未經(jīng)裁判許可，領(lǐng)隊(duì)、指導(dǎo)教師及其他人員一

-9-

律不得進(jìn)入競(jìng)賽現(xiàn)場(chǎng)。

6．領(lǐng)隊(duì)和指導(dǎo)老師應(yīng)及時(shí)查看有關(guān)賽項(xiàng)的通知和內(nèi)容，認(rèn)真研

究和掌握本賽項(xiàng)競(jìng)賽的規(guī)程、技術(shù)規(guī)范和賽場(chǎng)要求，指導(dǎo)選手做好賽

前的一切技術(shù)準(zhǔn)備和競(jìng)賽準(zhǔn)備。

（三）參賽選手須知

1．參賽選手應(yīng)嚴(yán)格遵守賽場(chǎng)規(guī)章、操作規(guī)程和工藝準(zhǔn)則，保證

人身及設(shè)備安全，接受裁判員的監(jiān)督和警示，文明競(jìng)賽。

2．參賽選手應(yīng)按照規(guī)定時(shí)間抵達(dá)賽場(chǎng)，憑身份證、統(tǒng)一發(fā)放的

參賽證（兩證必須齊全），完成入場(chǎng)檢錄、抽簽確定競(jìng)賽工位號(hào)，不

得遲到早退。

3．參賽選手憑競(jìng)賽工位號(hào)進(jìn)入賽場(chǎng)，不允許攜帶任何電子設(shè)備

及其他資料、用品。

4．參賽選手應(yīng)在規(guī)定的時(shí)間段進(jìn)入賽場(chǎng)，認(rèn)真核對(duì)競(jìng)賽工位號(hào)，

在指定位置就座。

5．參賽選手入場(chǎng)后，迅速確認(rèn)競(jìng)賽設(shè)備狀況，填寫相關(guān)確認(rèn)文

件，并確認(rèn)簽字（競(jìng)賽工位號(hào)）。

6．參賽選手在收到開賽信號(hào)前不得啟動(dòng)操作。在競(jìng)賽過(guò)程中，

確因計(jì)算機(jī)軟件或硬件故障，致使操作無(wú)法繼續(xù)的，經(jīng)項(xiàng)目裁判長(zhǎng)確

認(rèn)，予以啟用備用計(jì)算機(jī)。

7．賽項(xiàng)任務(wù)書及相關(guān)資料，均保存在競(jìng)賽環(huán)境的“大賽資料”

中。參賽選手應(yīng)在競(jìng)賽規(guī)定時(shí)間內(nèi)完成任務(wù)書內(nèi)容，并按照要求，將

相應(yīng)文檔上拷貝到U盤。

8．參賽選手需及時(shí)保存工作記錄。對(duì)于因各種原因造成的數(shù)據(jù)

丟失，由參賽選手自行負(fù)責(zé)。

9．參賽隊(duì)所提交的答卷采用競(jìng)賽工位號(hào)進(jìn)行標(biāo)識(shí)，不得出現(xiàn)地

-10-

名、校名、姓名、參賽證編號(hào)等信息，否則取消競(jìng)賽成績(jī)。

10．競(jìng)賽過(guò)程中，因嚴(yán)重操作失誤或安全事故不能進(jìn)行比賽的（例

如因操作原因發(fā)生短路導(dǎo)致賽場(chǎng)斷電的、造成設(shè)備不能正常工作的），

現(xiàn)場(chǎng)裁判員有權(quán)中止該隊(duì)比賽。

11．在比賽中如遇非人為因素造成的設(shè)備故障，經(jīng)裁判確認(rèn)后，

可向裁判長(zhǎng)申請(qǐng)補(bǔ)足排除故障的時(shí)間。

12．參賽選手不得因各種原因提前結(jié)束比賽。如確因不可抗因素

需要離開賽場(chǎng)的，須向現(xiàn)場(chǎng)裁判員舉手示意，經(jīng)裁判員許可并完成記

錄后，方可離開。凡在競(jìng)賽期間內(nèi)提前離開的選手，不得返回賽場(chǎng)。

13．競(jìng)賽操作結(jié)束后，參賽選手需要根據(jù)任務(wù)書要求，將相關(guān)成

果文件拷貝至U盤，填寫結(jié)束比賽相關(guān)確認(rèn)文件，并簽字確認(rèn)（競(jìng)賽

工位號(hào)）。因參賽選手未能按要求，將相應(yīng)的文檔等拷貝至U盤的，

競(jìng)賽成績(jī)計(jì)為零分。

14．競(jìng)賽時(shí)間結(jié)束，選手應(yīng)全體起立，停止操作。將資料和工具

整齊擺放在操作平臺(tái)上，經(jīng)工作人員清點(diǎn)后可離開賽場(chǎng)，離開賽場(chǎng)時(shí)

不得帶走任何資料。

15．在競(jìng)賽期間，未經(jīng)執(zhí)委會(huì)批準(zhǔn)，參賽選手不得接受其他單位

和個(gè)人進(jìn)行的與競(jìng)賽內(nèi)容相關(guān)的采訪。參賽選手不得將競(jìng)賽的相關(guān)信

息私自公布。

16．符合下列情形之一的參賽選手，經(jīng)裁判組裁定后中止其競(jìng)賽:

（1）不服從裁判員/監(jiān)考員管理、擾亂賽場(chǎng)秩序、干擾其他參賽

選手比賽，裁判員應(yīng)提出警告，二次警告后無(wú)效，或情節(jié)特別嚴(yán)重，

造成競(jìng)賽中止的，經(jīng)裁判長(zhǎng)確認(rèn)，中止比賽，并取消競(jìng)賽資格和競(jìng)賽

成績(jī)。

（2）競(jìng)賽過(guò)程中，由于選手人為造成計(jì)算機(jī)、儀器設(shè)備及工具

-11-

等嚴(yán)重?fù)p壞，負(fù)責(zé)賠償其損失，并由裁判組裁定其競(jìng)賽結(jié)束與否、是

否保留競(jìng)賽資格、是否累計(jì)其有效競(jìng)賽成績(jī)。

（3）競(jìng)賽過(guò)程中，產(chǎn)生重大安全事故、或有產(chǎn)生重大安全事故

隱患，經(jīng)裁判員提示沒有采取措施的，裁判員可暫停其競(jìng)賽，并由裁

判組裁定其競(jìng)賽結(jié)束與否、是否保留競(jìng)賽資格、是否累計(jì)其有效競(jìng)賽

成績(jī)。

（四）工作人員須知

1．賽場(chǎng)工作人員由賽項(xiàng)執(zhí)委會(huì)統(tǒng)一聘用并進(jìn)行工作分工，進(jìn)入

競(jìng)賽現(xiàn)場(chǎng)須佩戴賽項(xiàng)執(zhí)委會(huì)統(tǒng)一提供的胸牌。

2．賽場(chǎng)工作人員需服從賽項(xiàng)執(zhí)委會(huì)的管理，嚴(yán)格執(zhí)行賽項(xiàng)各項(xiàng)

比賽規(guī)則，執(zhí)行各項(xiàng)工作安排，積極維護(hù)好賽場(chǎng)秩序，堅(jiān)守崗位，為

賽場(chǎng)提供有序的服務(wù)。

3．賽場(chǎng)工作人員進(jìn)入現(xiàn)場(chǎng)，不得攜帶任何通訊工具或與競(jìng)賽無(wú)

關(guān)的物品。

4．參賽隊(duì)進(jìn)入賽場(chǎng)，現(xiàn)場(chǎng)裁判應(yīng)按規(guī)定審查參賽選手帶入賽場(chǎng)

的物品，如發(fā)現(xiàn)不允許帶入賽場(chǎng)的物品，交由參賽隊(duì)隨行人員保管，

賽場(chǎng)不提供保管服務(wù)。

5．賽場(chǎng)工作人員在競(jìng)賽過(guò)程中不回答選手提出的任何有關(guān)比賽

技術(shù)問(wèn)題，如遇爭(zhēng)議問(wèn)題，應(yīng)及時(shí)報(bào)告裁判長(zhǎng)。

-12-

附件一：大數(shù)據(jù)技術(shù)與應(yīng)用賽項(xiàng)競(jìng)賽試題（樣卷）

近年來(lái)隨著IT產(chǎn)業(yè)的加速發(fā)展，全國(guó)各地對(duì)IT類的人才需求也

越來(lái)越多“ABC公司”為了明確今后IT產(chǎn)業(yè)人才培養(yǎng)方向，在多地

進(jìn)行IT公司崗位情況調(diào)研分析。你所在的小組將承擔(dān)模擬調(diào)研分析

的任務(wù)，通過(guò)在招聘網(wǎng)站進(jìn)行招聘信息的爬取，獲取到公司名稱、工

作地點(diǎn)、崗位名稱、招聘要求、招聘人數(shù)等信息，并通過(guò)對(duì)數(shù)據(jù)的清

洗和分析，得出各地域招聘人數(shù)，“大數(shù)據(jù)”相關(guān)職位招聘數(shù)量，以

繪制雷達(dá)圖展示各地平均薪資情況。

為完成該項(xiàng)任務(wù)，你所在的小組計(jì)劃選用在業(yè)界廣泛應(yīng)用的

“Python和JAVA”語(yǔ)言，作為整個(gè)項(xiàng)目的基礎(chǔ)語(yǔ)言，并綜合利用

requests模塊、MapReduce、MySQL、Flask開源框架、Jinja2模板

引擎和ECharts組件提高開發(fā)效率并實(shí)現(xiàn)項(xiàng)目要求，由于本次為模擬

任務(wù)，總數(shù)據(jù)量不會(huì)過(guò)大，項(xiàng)目組計(jì)劃使用分布式節(jié)點(diǎn)Hadoop模式，

本次項(xiàng)目環(huán)境搭建采用服務(wù)器集群方式，配置了小規(guī)模的技術(shù)演示環(huán)

境，通過(guò)在招聘網(wǎng)站上爬取到的相關(guān)信息，使用requests模塊、Hive、

Python、JAVA等手段對(duì)數(shù)據(jù)進(jìn)行爬取、清洗、整理、計(jì)算、表達(dá)、

分析，力求實(shí)現(xiàn)對(duì)IT人才就業(yè)信息擁有更清晰的掌握。

請(qǐng)按照下面步驟完成本次技術(shù)展示任務(wù)，并提交技術(shù)報(bào)告。

任務(wù)一：Hadoop相關(guān)組件安裝部署（15分）

當(dāng)前環(huán)境中已安裝