河北省2023年職業(yè)院校學(xué)生技能大賽“大數(shù)據(jù)技術(shù)與應(yīng)用”（高職組）賽項(xiàng)規(guī)程

一、賽項(xiàng)名稱

賽項(xiàng)名稱：大數(shù)據(jù)技術(shù)與應(yīng)用

賽項(xiàng)組別：高職

賽項(xiàng)歸屬：電子與信息大類

二、競(jìng)賽目的

"十四五"時(shí)期，大數(shù)據(jù)產(chǎn)業(yè)對(duì)經(jīng)濟(jì)社會(huì)高質(zhì)量發(fā)展的賦能作用更加

突顯，大數(shù)據(jù)已成為催生新業(yè)態(tài)、激發(fā)新模式、促進(jìn)新發(fā)展的技術(shù)引擎。

習(xí)近平總書記指出“大數(shù)據(jù)是信息化發(fā)展的新階段”，“加快數(shù)字化發(fā)展，

建設(shè)數(shù)字中國(guó)”成為《中華人民共和國(guó)國(guó)民經(jīng)濟(jì)和社會(huì)發(fā)展第十四個(gè)五

年規(guī)劃和2035年遠(yuǎn)景目標(biāo)綱要》的重要篇章。大數(shù)據(jù)持續(xù)激發(fā)商業(yè)模

式創(chuàng)新，不斷催生新業(yè)態(tài)，已成為互聯(lián)網(wǎng)等新興領(lǐng)域促進(jìn)業(yè)務(wù)創(chuàng)新增值、

提升企業(yè)核心價(jià)值的重要驅(qū)動(dòng)力。

本賽項(xiàng)旨在落實(shí)國(guó)家“建設(shè)數(shù)字中國(guó)”戰(zhàn)略，深化產(chǎn)教融合，協(xié)同

推動(dòng)大數(shù)據(jù)產(chǎn)業(yè)創(chuàng)新與發(fā)展，大力推進(jìn)大數(shù)據(jù)專業(yè)技術(shù)技能人才培養(yǎng)，

賦能經(jīng)濟(jì)社會(huì)和現(xiàn)代職業(yè)教育高質(zhì)量發(fā)展。結(jié)合當(dāng)前大數(shù)據(jù)產(chǎn)業(yè)中的新

技術(shù)、新要求，通過大賽讓參賽選手熟悉一個(gè)真實(shí)企業(yè)級(jí)大數(shù)據(jù)項(xiàng)目中

各個(gè)環(huán)節(jié)的實(shí)現(xiàn)過程。通過競(jìng)賽來檢驗(yàn)教學(xué)水平，引領(lǐng)和促進(jìn)職業(yè)教育

教學(xué)改革，促進(jìn)與產(chǎn)業(yè)主流技術(shù)技能接軌，營(yíng)造崇尚技能的社會(huì)氛圍。

通過大賽培養(yǎng)參賽選手在企業(yè)真實(shí)項(xiàng)目環(huán)境下進(jìn)行大數(shù)據(jù)平臺(tái)搭建

(容器環(huán)境)、離線數(shù)據(jù)處理、數(shù)據(jù)挖掘、數(shù)據(jù)采集與實(shí)時(shí)計(jì)算、數(shù)據(jù)

1

可視化以及綜合分析等方面的能力；同時(shí)培養(yǎng)選手的理解力、溝通力、

抗壓力、6S規(guī)范等職業(yè)素質(zhì)；激發(fā)學(xué)生自主學(xué)習(xí)能力和解決問題的能力，

達(dá)到“以賽促教、以賽促學(xué)、以賽促改、賽課融通、賽訓(xùn)結(jié)合”目的。

賽項(xiàng)圍繞大數(shù)據(jù)產(chǎn)業(yè)相關(guān)崗位的實(shí)際需求和要求進(jìn)行設(shè)計(jì)，通過

大賽搭建校企合作的平臺(tái)，深化產(chǎn)教融合，推進(jìn)產(chǎn)教融合人才培養(yǎng)模

式，提升大數(shù)據(jù)技術(shù)與應(yīng)用專業(yè)及其他相關(guān)專業(yè)畢業(yè)生的就業(yè)競(jìng)爭(zhēng)能

力，同時(shí)強(qiáng)化競(jìng)賽成果轉(zhuǎn)化，促進(jìn)相關(guān)教材、資源、師資、認(rèn)證、實(shí)

習(xí)就業(yè)等全面建設(shè)，推動(dòng)院校和企業(yè)聯(lián)合培養(yǎng)大數(shù)據(jù)人才，加強(qiáng)學(xué)校

教育與產(chǎn)業(yè)發(fā)展的有效銜接，促進(jìn)職業(yè)院校電子與信息大類相關(guān)專業(yè)

共同發(fā)展，為國(guó)家戰(zhàn)略規(guī)劃提供大數(shù)據(jù)領(lǐng)域高素質(zhì)技能型人才。

三、競(jìng)賽內(nèi)容

（一）選手需具備能力

本賽項(xiàng)基于企業(yè)真實(shí)項(xiàng)目和工作模塊，結(jié)合高職大數(shù)據(jù)技術(shù)與應(yīng)

用專業(yè)教學(xué)標(biāo)準(zhǔn)，充分考量企業(yè)崗位對(duì)學(xué)生職業(yè)技能的最新需求，在

規(guī)定的時(shí)間內(nèi)完成指定大數(shù)據(jù)模塊。其中，主要考核參賽選手在大數(shù)

據(jù)平臺(tái)搭建(容器環(huán)境)、離線數(shù)據(jù)處理、數(shù)據(jù)挖掘、數(shù)據(jù)采集與實(shí)

時(shí)計(jì)算、數(shù)據(jù)可視化以及綜合分析等方面的技能。此外，競(jìng)賽同時(shí)考

核參賽選手工作組織和團(tuán)隊(duì)協(xié)作能力、溝通和人際交往能力、解決問

題能力以及致力于緊跟行業(yè)發(fā)展步伐的自我學(xué)習(xí)能力。

本項(xiàng)目競(jìng)賽內(nèi)容通過對(duì)技能實(shí)操表現(xiàn)來評(píng)估知識(shí)理解以及技能掌

握的熟練程度，將不再另外舉行知識(shí)及理解性質(zhì)的理論測(cè)試。

（二）競(jìng)賽模塊

1.競(jìng)賽時(shí)間

競(jìng)賽總時(shí)長(zhǎng)為8小時(shí)。各參賽隊(duì)在規(guī)定的時(shí)間內(nèi)，獨(dú)立完成“競(jìng)賽內(nèi)

容”規(guī)定的競(jìng)賽模塊。

2

2.競(jìng)賽內(nèi)容

本競(jìng)賽結(jié)合國(guó)內(nèi)行業(yè)、企業(yè)的實(shí)際業(yè)務(wù)模型；本競(jìng)賽只考核技能

部分，不涉及理論。本競(jìng)賽進(jìn)行的技能實(shí)操考核，涉及大數(shù)據(jù)平臺(tái)

搭建(容器環(huán)境)、離線數(shù)據(jù)處理、數(shù)據(jù)挖掘、數(shù)據(jù)采集與實(shí)時(shí)計(jì)算、

數(shù)據(jù)可視化、綜合分析。

表3-1競(jìng)賽內(nèi)容

大數(shù)據(jù)平臺(tái)搭建選手在容器環(huán)境下對(duì)大數(shù)據(jù)平臺(tái)及相關(guān)組

115%

(容器環(huán)境)件的安裝、配置、可用性驗(yàn)證等內(nèi)容

選手對(duì)Hadoop平臺(tái)、Spark平臺(tái)、Hive

數(shù)據(jù)倉庫等的綜合應(yīng)用能力，使用Java、

2離線數(shù)據(jù)處理25%Scala等開發(fā)語言，完成離線數(shù)據(jù)抽取、

數(shù)據(jù)清洗、數(shù)據(jù)指標(biāo)統(tǒng)計(jì)等操作

選手運(yùn)用常用的機(jī)器學(xué)習(xí)方法對(duì)數(shù)據(jù)進(jìn)行

3數(shù)據(jù)挖掘10%

數(shù)據(jù)挖掘分析

選手對(duì)Flink平臺(tái)、Flume組件、Kafka

組件等的綜合應(yīng)用能力，基于Flume和

數(shù)據(jù)采集與實(shí)時(shí)計(jì)Kafka進(jìn)行實(shí)時(shí)數(shù)據(jù)采集，使用Scala開發(fā)

4算20%語言，完成實(shí)時(shí)數(shù)據(jù)流相關(guān)數(shù)據(jù)指標(biāo)的分

析、計(jì)算等操作，并存入Redis中

選手基于前端框架Vue.js和后端REST風(fēng)

格的數(shù)據(jù)接口，使用JavaScript語言將

5數(shù)據(jù)可視化15%數(shù)據(jù)分析結(jié)果以圖表的形式進(jìn)行呈現(xiàn)、統(tǒng)

計(jì)

選手對(duì)大數(shù)據(jù)技術(shù)與分析的綜合操作和業(yè)

6綜合分析10%

務(wù)分析及報(bào)告撰寫能力

7職業(yè)素養(yǎng)5%團(tuán)隊(duì)分工明確合理、操作規(guī)范、文明競(jìng)賽

1.各任務(wù)模塊的分值比例參考上表，各任務(wù)模塊包含的子任務(wù)分值

由專家組命題時(shí)確定。

3

2.關(guān)于最終賽題將由專家組討論決定。其中，各模塊的詳細(xì)內(nèi)容描

述如下：

（1）大數(shù)據(jù)平臺(tái)搭建(容器環(huán)境)

依據(jù)大數(shù)據(jù)平臺(tái)的技術(shù)特點(diǎn)獨(dú)立解壓、安裝、配置。對(duì)不同的組

件進(jìn)行文件參數(shù)配置，日志查看、狀態(tài)查看、服務(wù)啟動(dòng)、組件部署等。

參賽選手需要掌握以下并不僅限于以下技能：

Docker容器基礎(chǔ)操作；

Hadoop偽分布式安裝配置；

Hadoop完全分布式安裝配置；

Spark安裝配置(Standalone模式)；

SparkonYarn安裝配置；

FlinkonYarn安裝配置；

Hive安裝配置；

Flume安裝配置；

ZooKeeper安裝配置；

Kafka安裝配置；

Sqoop安裝配置。

（2）離線數(shù)據(jù)處理

利用Java、Scala開發(fā)語言，對(duì)關(guān)系型數(shù)據(jù)庫中的離線存量數(shù)據(jù)進(jìn)

行全量數(shù)據(jù)抽取、增量數(shù)據(jù)抽取，將數(shù)據(jù)存入Hive數(shù)據(jù)倉庫，完成數(shù)

據(jù)清洗、數(shù)據(jù)轉(zhuǎn)化以及相關(guān)的數(shù)據(jù)指標(biāo)計(jì)算等工作。

參賽選手需要掌握以下并不僅限于以下技能:

Java項(xiàng)目工程創(chuàng)建與配置；

Java應(yīng)用開發(fā)；

Scala項(xiàng)目工程創(chuàng)建與配置；

4

Scala應(yīng)用開發(fā)；

Pom文件配置；

Maven本地倉庫配置使用；

基于MapReduce的數(shù)據(jù)清洗處理方法；

基于Spark的數(shù)據(jù)清洗處理方法；

基于Hive的數(shù)據(jù)清洗處理方法；

數(shù)據(jù)倉庫基本架構(gòu)及概念;

數(shù)據(jù)倉庫星型模型；

數(shù)據(jù)倉庫雪花模型。

（3）數(shù)據(jù)挖掘

利用Scala開發(fā)語言，基于SparkML機(jī)器學(xué)習(xí)庫，根據(jù)既有數(shù)據(jù)

完成數(shù)據(jù)處理建立數(shù)據(jù)模型完成數(shù)據(jù)分析、數(shù)據(jù)挖掘操作。

參賽選手需要掌握以下并不僅限于以下技能：

Scala應(yīng)用開發(fā)；

特征工程應(yīng)用；

SparkML機(jī)器學(xué)習(xí)庫應(yīng)用開發(fā)；

推薦算法的召回和排序；

回歸模型應(yīng)用；

聚類模型應(yīng)用；

決策樹模型應(yīng)用；

隨機(jī)森林模型應(yīng)用。

（4）數(shù)據(jù)采集與實(shí)時(shí)計(jì)算

基于Flume、Kafka組件對(duì)實(shí)時(shí)數(shù)據(jù)進(jìn)行采集傳輸，利用Scala開

發(fā)語言，使用Flink消費(fèi)實(shí)時(shí)數(shù)據(jù)進(jìn)行相關(guān)的數(shù)據(jù)指標(biāo)計(jì)算等工作。

參賽選手需要掌握以下并不僅限于以下技能:

5

Scala項(xiàng)目工程創(chuàng)建；

Scala應(yīng)用開發(fā)；

Pom文件配置；

Maven本地倉庫配置使用；

Redis基本操作；

基于Flume及Kafka的數(shù)據(jù)采集方法；

基于Flink的實(shí)時(shí)數(shù)據(jù)處理方法。

（5）數(shù)據(jù)可視化

對(duì)數(shù)據(jù)進(jìn)行可視化展示，結(jié)合后端REST風(fēng)格的數(shù)據(jù)接口，利用前

端框架Vue.js以及數(shù)據(jù)可視化圖表組件ECharts，將數(shù)據(jù)分析結(jié)果以柱

狀圖、餅圖、條形圖等圖表進(jìn)行展示。

參賽選手需要掌握以下并不僅限于以下技能：

Vue.js項(xiàng)目工程創(chuàng)建；

Vue.js框架應(yīng)用開發(fā)；

ECharts組件應(yīng)用開發(fā)；

根據(jù)需求使用ECharts繪制柱狀圖；

根據(jù)需求使用ECharts繪制折線圖；

根據(jù)需求使用ECharts繪制折柱混合圖；

根據(jù)需求使用ECharts繪制玫瑰圖；

根據(jù)需求使用ECharts繪制氣泡圖；

根據(jù)需求使用ECharts繪制餅狀圖；

根據(jù)需求使用ECharts繪制條形圖；

根據(jù)需求使用ECharts繪制雷達(dá)圖；

根據(jù)需求使用ECharts繪制散點(diǎn)圖；

（6）綜合分析

6

依據(jù)數(shù)據(jù)挖掘分析結(jié)果，在綜合理解業(yè)務(wù)數(shù)據(jù)的基礎(chǔ)上，根據(jù)題目

要求進(jìn)行分析，并編寫輸出分析報(bào)告。

參賽選手需要掌握以下并不僅限于以下技能：

根據(jù)要求結(jié)合回歸算法結(jié)果，說明回歸對(duì)業(yè)務(wù)發(fā)展的用途及經(jīng)

營(yíng)策略影響；

根據(jù)要求結(jié)合聚類算法結(jié)果，說明聚類對(duì)業(yè)務(wù)發(fā)展的用途及經(jīng)

營(yíng)策略影響；

根據(jù)要求結(jié)合決策樹算法結(jié)果，說明決策樹對(duì)業(yè)務(wù)發(fā)展的用途

及經(jīng)營(yíng)策略影響；

根據(jù)要求結(jié)合隨機(jī)森林算法結(jié)果，說明隨機(jī)森林對(duì)業(yè)務(wù)發(fā)展的

用途及經(jīng)營(yíng)策略影響；

根據(jù)要求結(jié)合競(jìng)賽過程，對(duì)過程中的相關(guān)問題提出合理化建議

及解決方案。

四、競(jìng)賽方式

1.比賽以團(tuán)隊(duì)方式進(jìn)行，不得跨校組隊(duì)，同一學(xué)校的報(bào)名參賽隊(duì)伍

不超過2支。

2.每支參賽隊(duì)由3名選手組成。團(tuán)體賽參賽隊(duì)可配指導(dǎo)教師，指導(dǎo)

教師須為本校專兼職教師，每隊(duì)限報(bào)最多2名指導(dǎo)教師，競(jìng)賽期間不允

許指導(dǎo)教師進(jìn)入賽場(chǎng)進(jìn)行現(xiàn)場(chǎng)指導(dǎo)。參賽選手和指導(dǎo)教師報(bào)名獲得確認(rèn)

后不得隨意更換；

3.本賽項(xiàng)設(shè)單一場(chǎng)次，所有參賽隊(duì)在現(xiàn)場(chǎng)根據(jù)給定的項(xiàng)目模塊，

在8小時(shí)內(nèi)相互配合，采用小組合作的形式完成賽項(xiàng)模塊，最后以提交

的截圖和文檔作為最終評(píng)分依據(jù)；

4.不計(jì)參賽選手的個(gè)人成績(jī)，統(tǒng)計(jì)競(jìng)賽隊(duì)的總成績(jī)進(jìn)行排序。

五、競(jìng)賽流程

7

（一）競(jìng)賽流程圖

圖5-1競(jìng)賽流程圖

（二）競(jìng)賽時(shí)間表

表5-1競(jìng)賽時(shí)間表

日期時(shí)間內(nèi)容

9:00—15:00各參賽隊(duì)報(bào)到

4月14日15:00—15:30選手熟悉賽場(chǎng)

15:30—16:30賽前領(lǐng)隊(duì)會(huì)

07:00—08:00參賽隊(duì)集合前往比賽現(xiàn)場(chǎng)

08:00—08:10賽場(chǎng)檢錄

08:10—08:30一次加密：參賽隊(duì)抽取參賽編號(hào)

08:30—08:45二次加密：參賽隊(duì)抽取賽位號(hào)

4月15日參賽隊(duì)進(jìn)入比賽賽位，進(jìn)行賽前軟、硬件檢查、題

08:45—09:00

目發(fā)放

09:00—17:00比賽

17:00—17:20收取各參賽隊(duì)賽題及比賽結(jié)果文檔

17:00—19:00申訴受理

8

19:30—23:00成績(jī)?cè)u(píng)定與復(fù)核

23:00—23:30加密信息解密

23:30—24:00成績(jī)匯總，報(bào)送及公布

六、競(jìng)賽賽卷

技能大賽的命題工作由賽項(xiàng)執(zhí)委會(huì)指定的命題專家組負(fù)責(zé)。本賽項(xiàng)

制定樣題五套，并與本規(guī)程同步發(fā)布。具體詳見附件2。

七、競(jìng)賽規(guī)則

1.參賽選手須為高等職業(yè)學(xué)校?？啤⒏叩嚷殬I(yè)學(xué)校本科全日制在

籍學(xué)生，五年制高職四、五年級(jí)學(xué)生也可報(bào)名參賽。

2.比賽工位通過抽簽決定，比賽期間參賽選手原則上不得離開比賽

場(chǎng)地。參賽選手按規(guī)定時(shí)間到達(dá)指定地點(diǎn)，憑參賽相關(guān)憑據(jù)進(jìn)入賽場(chǎng)。

選手遲到10分鐘取消比賽資格。

3.競(jìng)賽所需的硬件、軟件和輔助工具統(tǒng)一提供，選手不得私自攜

帶任何移動(dòng)存儲(chǔ)、輔助工具、移動(dòng)通信等設(shè)備進(jìn)入賽場(chǎng)。

4.參賽選手在賽前15分鐘進(jìn)入比賽工位，并由隊(duì)長(zhǎng)領(lǐng)取比賽信息。

比賽正式開始后方可進(jìn)行相關(guān)操作。如出現(xiàn)較嚴(yán)重的違規(guī)、違紀(jì)、舞

弊等現(xiàn)象，經(jīng)裁判組裁定取消比賽成績(jī)。

5.在比賽過程中，參賽選手如有疑問，應(yīng)舉手示意，現(xiàn)場(chǎng)裁判應(yīng)

按要求及時(shí)予以答疑。如遇設(shè)備或軟件等故障，參賽選手應(yīng)舉手示意，

現(xiàn)場(chǎng)裁判、技術(shù)人員等應(yīng)及時(shí)予以解決。確因計(jì)算機(jī)軟件或硬件故障，

致使操作無法繼續(xù)，經(jīng)裁判長(zhǎng)確認(rèn)，予以啟用備用設(shè)備。

參賽選手不得因各種原因提前結(jié)束比賽。如確因不可抗因素需要

離開賽場(chǎng)的，須向現(xiàn)場(chǎng)裁判員舉手示意，經(jīng)裁判員許可并完成記錄后，

方可離開。凡在競(jìng)賽期間內(nèi)提前離開的選手，不得返回賽場(chǎng)。

9

6.比賽時(shí)間結(jié)束，選手應(yīng)全體起立，結(jié)束操作。經(jīng)工作人員查收

清點(diǎn)所有文檔后方可離開賽場(chǎng)，離開賽場(chǎng)時(shí)不得帶走任何資料。

7.賽項(xiàng)裁判應(yīng)嚴(yán)格遵守賽項(xiàng)各項(xiàng)規(guī)章制度，確保比賽公平、公正、

公開。比賽當(dāng)天8:00起，賽項(xiàng)裁判應(yīng)上交所有通信設(shè)備，由賽項(xiàng)執(zhí)委

會(huì)統(tǒng)一保管，并安排賽項(xiàng)裁判在指定區(qū)域休息或工作，直至賽項(xiàng)成績(jī)

評(píng)定結(jié)束。

8.本賽項(xiàng)各參賽隊(duì)最終成績(jī)，由承辦單位信息員在監(jiān)督仲裁組監(jiān)

督下錄入賽務(wù)管理系統(tǒng)。承辦單位信息員對(duì)成績(jī)數(shù)據(jù)審核后，將賽務(wù)

系統(tǒng)中錄入的成績(jī)導(dǎo)出打印，經(jīng)賽項(xiàng)裁判長(zhǎng)審核無誤后，簽字。承辦

單位信息員將裁判長(zhǎng)確認(rèn)的電子版賽項(xiàng)成績(jī)上傳賽務(wù)管理系統(tǒng)；同時(shí)，

將裁判長(zhǎng)簽字的紙質(zhì)打印成績(jī)單報(bào)送大賽執(zhí)委會(huì)。

9.賽項(xiàng)中每個(gè)比賽環(huán)節(jié)裁判判分的原始材料和最終成績(jī)等結(jié)果性

材料，經(jīng)監(jiān)督仲裁組人員和裁判長(zhǎng)簽字后，裝袋密封留檔；并由賽項(xiàng)

承辦院校封存，委派專人妥善保管。

10.其它未盡事宜，將在賽前向各領(lǐng)隊(duì)做詳細(xì)說明。

八、競(jìng)賽環(huán)境

1.競(jìng)賽場(chǎng)地。競(jìng)賽場(chǎng)地分為：競(jìng)賽現(xiàn)場(chǎng)、裁判休息區(qū)、指導(dǎo)老師

休息區(qū)、服務(wù)區(qū)。其中，競(jìng)賽現(xiàn)場(chǎng)又劃分為：檢錄區(qū)、場(chǎng)內(nèi)競(jìng)賽區(qū)、

技術(shù)支持區(qū)。

2.競(jìng)賽設(shè)備。場(chǎng)內(nèi)競(jìng)賽區(qū)按照參賽隊(duì)數(shù)量準(zhǔn)備比賽所需的軟硬件

平臺(tái)，為參賽隊(duì)提供統(tǒng)一競(jìng)賽設(shè)備和備用設(shè)備。選手無需自帶任何工

具及附件。

3.競(jìng)賽工位。競(jìng)賽現(xiàn)場(chǎng)各個(gè)工作區(qū)配備單相220V/3A以上交流

電源。每個(gè)比賽工位上標(biāo)明編號(hào)。

4.技術(shù)支持區(qū)。為技術(shù)支持人員提供固定工位、電源保障。

九、技術(shù)平臺(tái)

10

（一）競(jìng)賽設(shè)備

技術(shù)平臺(tái)軟硬件設(shè)備組成如表9-1所示。

表9-1競(jìng)賽硬件設(shè)備

設(shè)備類別數(shù)量設(shè)備用途基本配置

性能相當(dāng)于i5處理器，

每支參賽隊(duì)伍1臺(tái)。

32GB以上內(nèi)存，1TB以上硬

競(jìng)賽服務(wù)器根據(jù)參賽團(tuán)隊(duì)數(shù)量，配構(gòu)建大數(shù)據(jù)平臺(tái)集群

盤，網(wǎng)卡（千兆），顯示

備10%的備份機(jī)器。

器要求1024*768以上。

性能相當(dāng)于i5處理器，8GB

每支參賽隊(duì)伍3臺(tái)。

以上內(nèi)存，1TB以上硬盤，

競(jìng)賽客戶機(jī)根據(jù)參賽團(tuán)隊(duì)數(shù)量，配競(jìng)賽選手比賽使用

顯示器要求1024*768以上

備10%的備份機(jī)器。

。

（二）軟件環(huán)境

采用四合天地大數(shù)據(jù)實(shí)訓(xùn)管理系統(tǒng)（北京四合天地科技有限公司

研發(fā)）。

表9-2競(jìng)賽軟件環(huán)境

大數(shù)據(jù)集群操作系統(tǒng)CentOS7

容器環(huán)境Docker-CE20.10

Hadoop2.7.7

Yarn2.7.7

ZooKeeper3.4.6

Hive2.3.4

JDK1.8

服務(wù)器

大數(shù)據(jù)分析平臺(tái)組件Flume1.7.0

Sqoop1.4.2

Kafka2.0.0

Spark2.1.1

Flink1.10.2

Redis4.0.1

11

關(guān)系型數(shù)據(jù)庫MySQL5.7

PC操作系統(tǒng)Ubuntu18.0464位

瀏覽器Chrome

開發(fā)語言Scala2.11

Java8

IDEA2021

開發(fā)工具(CommunityEdition)

VisualStudioCode1.58

PC機(jī)

SSH工具Asbru-cm或UbuntuSSH客戶端

數(shù)據(jù)庫連接工具M(jìn)ySQLWorkbench

數(shù)據(jù)可視化框架及組件Vue.js3.0

ECharts5.1

截圖工具Ubuntu系統(tǒng)自帶

文檔編輯器WPSLinux版

輸入法搜狗拼音輸入法Linux版

十、成績(jī)?cè)u(píng)定

（一）獎(jiǎng)項(xiàng)設(shè)定

競(jìng)賽設(shè)參賽選手團(tuán)體獎(jiǎng)。獎(jiǎng)項(xiàng)設(shè)置按參賽隊(duì)數(shù)量確定，其中一等獎(jiǎng)

10%，二等獎(jiǎng)20%，三等獎(jiǎng)30%。獲得一等獎(jiǎng)代表隊(duì)第一順位的指導(dǎo)教師

可以獲得優(yōu)秀指導(dǎo)教師獎(jiǎng)。

（二）評(píng)分標(biāo)準(zhǔn)制定原則

競(jìng)賽評(píng)分制定嚴(yán)格遵守公平、公正的原則，大數(shù)據(jù)技術(shù)與應(yīng)用賽項(xiàng)

評(píng)分采用賽項(xiàng)結(jié)果評(píng)分方法，始終貫徹落實(shí)競(jìng)賽一貫堅(jiān)持的公平、公正

和公開原則。

參與競(jìng)賽成績(jī)管理的組織機(jī)構(gòu)包括裁判組、監(jiān)督組和仲裁組等。裁

判組實(shí)行“裁判長(zhǎng)負(fù)責(zé)制”，設(shè)裁判長(zhǎng)1名，全面負(fù)責(zé)競(jìng)賽的裁判與管

理工作。

12

裁判員根據(jù)競(jìng)賽工作需要分為檢錄裁判、加密裁判、現(xiàn)場(chǎng)裁判和評(píng)

分裁判。檢錄裁判負(fù)責(zé)對(duì)參賽隊(duì)伍（選手）進(jìn)行點(diǎn)名登記、身份核對(duì)等

工作；加密裁判負(fù)責(zé)組織參賽隊(duì)伍（選手）抽簽并對(duì)參賽隊(duì)伍（選手）

的信息進(jìn)行加密、解密；現(xiàn)場(chǎng)裁判按規(guī)定做好賽場(chǎng)記錄，維護(hù)賽場(chǎng)紀(jì)律；

評(píng)分裁判負(fù)責(zé)對(duì)參賽隊(duì)伍（選手）的技能展示、操作規(guī)范和競(jìng)賽成果等

按賽項(xiàng)評(píng)分標(biāo)準(zhǔn)進(jìn)行評(píng)定。

監(jiān)督組對(duì)裁判組的工作進(jìn)行全程監(jiān)督，并對(duì)競(jìng)賽成績(jī)抽檢復(fù)核。

仲裁組負(fù)責(zé)接受由參賽隊(duì)領(lǐng)隊(duì)提出的對(duì)裁判結(jié)果的申訴，組織復(fù)議

并及時(shí)反饋復(fù)議結(jié)果。

（三）評(píng)分方法

選手在完成任務(wù)之后，將任務(wù)完成結(jié)果拷貝至U盤中，由參賽選手

隊(duì)長(zhǎng)簽字確認(rèn)（簽工位號(hào)）。

評(píng)分采取分步得分、累計(jì)總分的計(jì)分方式。

不計(jì)參賽選手的個(gè)人得分，只記錄團(tuán)體得分。

參賽隊(duì)提交比賽任務(wù)結(jié)束請(qǐng)求或者在比賽時(shí)間終止后，不得再進(jìn)行

任何操作。否則，視為比賽作弊，給參賽隊(duì)記警告一次。

在競(jìng)賽過程中，選手如有不服從裁判判決、擾亂賽場(chǎng)秩序、舞弊等

不文明行為，由裁判長(zhǎng)按照規(guī)定扣減相應(yīng)分?jǐn)?shù)并且給予警告，情節(jié)嚴(yán)重

的取消競(jìng)賽資格，競(jìng)賽成績(jī)記0分，隊(duì)員退出比賽現(xiàn)場(chǎng)。

（四）評(píng)分標(biāo)準(zhǔn)

任務(wù)一：HadoopHadoop完全分布式下的JDK的解壓安裝、JD

模塊A:大

完全分布式安裝K環(huán)境變量配置、節(jié)點(diǎn)配置、Hadoop配置文7

數(shù)據(jù)平臺(tái)搭

配置件修改、運(yùn)行測(cè)試等

建(容器環(huán)

任務(wù)二：SparkoSpark的解壓安裝、環(huán)境變量配置、onYarn4

境)

nYarn安裝配置配置、運(yùn)行測(cè)試等

13

任務(wù)三：FlinkoFlink的解壓安裝、環(huán)境變量配置、運(yùn)行測(cè)4

nYarn安裝配置試等

小計(jì)15

任務(wù)一：數(shù)據(jù)抽從MySQL中進(jìn)行離線數(shù)據(jù)抽取，包括全量數(shù)10

取據(jù)抽取和增量數(shù)據(jù)抽取操作

任務(wù)二：數(shù)據(jù)清從ods到dwd的數(shù)據(jù)清洗，包括數(shù)據(jù)排序、8

模塊B:離

洗去重、數(shù)據(jù)類型轉(zhuǎn)換等操作

線數(shù)據(jù)處理

任務(wù)三：指標(biāo)計(jì)在dwd層對(duì)數(shù)據(jù)進(jìn)行相關(guān)數(shù)據(jù)指標(biāo)的統(tǒng)計(jì)、

算計(jì)算等操作7

小計(jì)25

任務(wù)一：特征工對(duì)推薦系統(tǒng)的數(shù)據(jù)集進(jìn)行特征提取及數(shù)據(jù)預(yù)5

程處理等操作

模塊C:數(shù)

任務(wù)二：推薦系基于用戶的推薦系統(tǒng)設(shè)計(jì)開發(fā)操作5

據(jù)挖掘

統(tǒng)

小計(jì)10

任務(wù)一：實(shí)時(shí)數(shù)基于Flume和Kafka的實(shí)時(shí)數(shù)據(jù)采集，包括8

據(jù)采集Flume采集配置、數(shù)據(jù)注入Kafka等操作

模塊D:數(shù)

任務(wù)二：使用Fl使用Flink消費(fèi)Kafka中的數(shù)據(jù)進(jìn)行實(shí)時(shí)計(jì)12

據(jù)采集與實(shí)

ink處理Kafka算，包括實(shí)時(shí)數(shù)據(jù)統(tǒng)計(jì)計(jì)算、Redis基本操

時(shí)計(jì)算

中的數(shù)據(jù)作、Kafka基本操作等

小計(jì)20

任務(wù)一：用柱狀正確使用Vue.js框架，結(jié)合Echarts繪制

圖展示消費(fèi)額最柱狀圖2

高的國(guó)家

任務(wù)二：用餅狀正確使用Vue.js框架，結(jié)合Echarts繪制

模塊E：數(shù)圖展示各地區(qū)消餅狀圖3

據(jù)可視化費(fèi)能力

任務(wù)三：用折線正確使用Vue.js框架，結(jié)合Echarts繪制3

展示總消費(fèi)額變折線圖

化

任務(wù)四：用條形正確使用Vue.js框架，結(jié)合Echarts繪制3

14

圖展示平均消費(fèi)條形圖

額最高的國(guó)家

任務(wù)五：用折柱4

混合圖展示地區(qū)正確使用Vue.js框架，結(jié)合Echarts繪制

平均消費(fèi)額和國(guó)折柱混合圖

家平均消費(fèi)額

小計(jì)15

任務(wù)一：如何解

決Job運(yùn)行效率正確分析如何解決Job運(yùn)行效率低的問題4

低的問題

任務(wù)二：對(duì)于數(shù)

據(jù)挖掘模塊中的正確分析數(shù)據(jù)挖掘模塊中的用戶推薦并提供3

模塊F:綜

用戶推薦有什么合理化建議

合分析

好的建議

任務(wù)三：簡(jiǎn)要描

述任務(wù)過程中的合理描述任務(wù)過程中的問題并進(jìn)行總結(jié)3

問題并進(jìn)行總結(jié)

小計(jì)10

考察職業(yè)素養(yǎng)競(jìng)賽團(tuán)隊(duì)分工明確合理、操作規(guī)范、文明競(jìng)5

模塊G:職

賽

業(yè)素養(yǎng)

小計(jì)5

總分100

（五）成績(jī)審核方法

競(jìng)賽結(jié)束后，由裁判長(zhǎng)向裁判員核實(shí)競(jìng)賽過程中有無異常。如無異

常，成績(jī)單由裁判長(zhǎng)簽字確認(rèn)并封存直至公布成績(jī)時(shí)開啟。

如有異常，在裁判長(zhǎng)主持下，由專家組成員、裁判員、仲裁員和監(jiān)

督員共同處理。

（六）成績(jī)公布方法

15

競(jìng)賽成績(jī)經(jīng)復(fù)核無誤后，經(jīng)裁判長(zhǎng)、監(jiān)督人員審核簽字后，加密裁

判在監(jiān)督人員監(jiān)督下進(jìn)行兩層解密：競(jìng)賽結(jié)果編號(hào)到工位號(hào)解密；工位

號(hào)到參賽隊(duì)名稱解密。以賽項(xiàng)組委會(huì)最終公布結(jié)果為準(zhǔn)。

十一、競(jìng)賽須知

（一）參賽隊(duì)須知

1.參賽隊(duì)名稱：統(tǒng)一使用規(guī)定的學(xué)校代表隊(duì)名稱，不使用其他組織、

團(tuán)體的名稱；

2.參賽隊(duì)組成：每支參賽隊(duì)由3名參賽選手組成，須為同校在籍學(xué)

生，其中隊(duì)長(zhǎng)1名。每支參賽隊(duì)可配1-2名指導(dǎo)教師，指導(dǎo)教師須為本校

專兼職教師。不接受跨校組隊(duì)，同一學(xué)校的報(bào)名參賽隊(duì)伍不超過2支；

3.各參賽院校應(yīng)指定1名負(fù)責(zé)人任賽項(xiàng)領(lǐng)隊(duì)，全權(quán)負(fù)責(zé)該校參賽事

務(wù)的組織、協(xié)調(diào)和領(lǐng)導(dǎo)工作。

4.參賽選手及指導(dǎo)教師在報(bào)名獲得確認(rèn)后，原則上不再更換。如在

籌備過程中，參賽選手和指導(dǎo)教師因故不能參賽，須由其所在學(xué)校供職

部門于賽項(xiàng)開賽前10個(gè)工作日之前出具書面說明，經(jīng)賽項(xiàng)執(zhí)委會(huì)辦公室

核實(shí)后予以更換。允許隊(duì)員缺席比賽；允許指導(dǎo)教師缺席比賽。

5.參賽隊(duì)按照賽項(xiàng)競(jìng)賽規(guī)程安排，憑賽項(xiàng)執(zhí)委會(huì)頒發(fā)的參賽證和有

效身份證件參加比賽及相關(guān)活動(dòng)。

6.賽項(xiàng)執(zhí)委會(huì)統(tǒng)一安排各參賽隊(duì)在比賽前一天進(jìn)入賽場(chǎng)熟悉環(huán)境和

設(shè)施情況。

7.參賽隊(duì)選手、領(lǐng)隊(duì)和指導(dǎo)教師要有良好的職業(yè)道德，嚴(yán)格遵守比

賽規(guī)則和比賽紀(jì)律，服從裁判，尊重裁判和賽場(chǎng)工作人員，自覺維護(hù)賽

場(chǎng)秩序。

8.領(lǐng)隊(duì)?wèi)?yīng)負(fù)責(zé)賽事活動(dòng)期間本隊(duì)所有選手的人身及財(cái)產(chǎn)安全，如發(fā)

現(xiàn)意外事故，應(yīng)及時(shí)向賽項(xiàng)執(zhí)委會(huì)報(bào)告。

（二）領(lǐng)隊(duì)和指導(dǎo)教師須知

16

1.嚴(yán)格遵守賽場(chǎng)的各項(xiàng)規(guī)定，服從裁判，文明競(jìng)賽。如發(fā)現(xiàn)弄虛作

假者，取消參賽資格，名次無效。

2.領(lǐng)隊(duì)和指導(dǎo)教師務(wù)必帶好有效身份證件，在活動(dòng)過程中佩戴“指

導(dǎo)教師證”參加競(jìng)賽相關(guān)活動(dòng)。

3.各代表隊(duì)領(lǐng)隊(duì)要堅(jiān)決執(zhí)行競(jìng)賽的各項(xiàng)規(guī)定，加強(qiáng)對(duì)參賽人員的管

理，做好賽前準(zhǔn)備工作，督促選手帶好證件等競(jìng)賽相關(guān)材料。

4.在比賽期間要嚴(yán)格遵守比賽規(guī)則，不得私自接觸裁判人員。

5.競(jìng)賽過程中，未經(jīng)裁判許可，領(lǐng)隊(duì)、指導(dǎo)教師及其他人員一律不

得進(jìn)入競(jìng)賽現(xiàn)場(chǎng)。

6.如對(duì)競(jìng)賽過程有疑議，由領(lǐng)隊(duì)和指導(dǎo)教師負(fù)責(zé)以書面形式向賽項(xiàng)

仲裁委員會(huì)反映，但不得影響競(jìng)賽進(jìn)行。

7.對(duì)申訴的仲裁結(jié)果，領(lǐng)隊(duì)要帶頭服從和執(zhí)行，并做好選手工作。

參賽選手不得因申訴或?qū)μ幚硪庖姴环Ｖ垢?jìng)賽，否則以棄權(quán)處理。

8.領(lǐng)隊(duì)和指導(dǎo)老師應(yīng)及時(shí)查看有關(guān)賽項(xiàng)的通知和內(nèi)容，認(rèn)真研究和

掌握本賽項(xiàng)競(jìng)賽的規(guī)程、技術(shù)規(guī)范和賽場(chǎng)要求，指導(dǎo)選手做好賽前的一

切技術(shù)準(zhǔn)備和競(jìng)賽準(zhǔn)備。

（三）參賽選手須知

1.參賽選手應(yīng)嚴(yán)格遵守賽場(chǎng)規(guī)章、操作規(guī)程和工藝準(zhǔn)則，保證人身

及設(shè)備安全，接受裁判員的監(jiān)督和警示，文明競(jìng)賽。

2.參賽選手應(yīng)按照規(guī)定時(shí)間抵達(dá)賽場(chǎng)，憑身份證、學(xué)生證，以及統(tǒng)

一發(fā)放的參賽證，完成入場(chǎng)檢錄、抽簽確定競(jìng)賽工位號(hào)，不得遲到早退。

3.參賽選手憑競(jìng)賽工位號(hào)進(jìn)入賽場(chǎng)，不允許攜帶任何電子設(shè)備及其

他資料、用品。

4.參賽選手應(yīng)在規(guī)定的時(shí)間段進(jìn)入賽場(chǎng)，認(rèn)真核對(duì)競(jìng)賽工位號(hào)，在

指定位置就座。

17

5.參賽選手入場(chǎng)后，迅速確認(rèn)競(jìng)賽設(shè)備狀況，填寫相關(guān)確認(rèn)文件，

并由參賽隊(duì)長(zhǎng)確認(rèn)簽字（競(jìng)賽工位號(hào)）。

6.參賽選手在收到開賽信號(hào)前不得啟動(dòng)操作。在競(jìng)賽過程中，確因

計(jì)算機(jī)軟件或硬件故障，致使操作無法繼續(xù)的，經(jīng)裁判長(zhǎng)確認(rèn)，予以啟

用備用計(jì)算機(jī)。

7.參賽選手應(yīng)在競(jìng)賽規(guī)定時(shí)間內(nèi)完成任務(wù)書內(nèi)容，并按照要求，將

相應(yīng)文檔拷貝到U盤。

8.參賽選手需及時(shí)保存工作記錄。對(duì)于因各種原因造成的數(shù)據(jù)丟失，

由參賽選手自行負(fù)責(zé)。

9.參賽隊(duì)所提交的答卷采用競(jìng)賽工位號(hào)進(jìn)行標(biāo)識(shí)，不得出現(xiàn)地名、

校名、姓名、參賽證編號(hào)等信息，否則取消競(jìng)賽成績(jī)。

10.競(jìng)賽過程中，因嚴(yán)重操作失誤或安全事故不能進(jìn)行比賽的（例

如因操作原因發(fā)生短路導(dǎo)致賽場(chǎng)斷電的、造成設(shè)備不能正常工作的），

現(xiàn)場(chǎng)裁判有權(quán)中止該隊(duì)比賽。

11.在比賽中如遇非人為因素造成的設(shè)備故障，經(jīng)裁判確認(rèn)后，可

向裁判長(zhǎng)申請(qǐng)補(bǔ)足排除故障的時(shí)間。

12.參賽選手