2024年高職師生同賽大數(shù)據(jù)應(yīng)用開發(fā)賽項(xiàng)競賽規(guī)程_第1頁
2024年高職師生同賽大數(shù)據(jù)應(yīng)用開發(fā)賽項(xiàng)競賽規(guī)程_第2頁
2024年高職師生同賽大數(shù)據(jù)應(yīng)用開發(fā)賽項(xiàng)競賽規(guī)程_第3頁
2024年高職師生同賽大數(shù)據(jù)應(yīng)用開發(fā)賽項(xiàng)競賽規(guī)程_第4頁
2024年高職師生同賽大數(shù)據(jù)應(yīng)用開發(fā)賽項(xiàng)競賽規(guī)程_第5頁
已閱讀5頁,還剩14頁未讀 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡介

2024年甘肅省職業(yè)院校技能大賽

高職組電子與信息類“大數(shù)據(jù)應(yīng)用開發(fā)”賽項(xiàng)規(guī)程

一、賽項(xiàng)名稱

賽項(xiàng)名稱:大數(shù)據(jù)應(yīng)用開發(fā)

賽項(xiàng)組別:高職組(師生同賽)

賽項(xiàng)歸屬產(chǎn)業(yè):電子與信息大類

二、競賽目的

為適應(yīng)大數(shù)據(jù)產(chǎn)業(yè)對高素質(zhì)技術(shù)技能型人才的職業(yè)需求,賽項(xiàng)以大數(shù)據(jù)應(yīng)用開發(fā)為

核心內(nèi)容和工作基礎(chǔ),重點(diǎn)考查參賽選手基于Hadoop、Spark、Flink平臺環(huán)境下,充

分利用SparkCore、SparkSQL、Flume、Kafka、Flink、Hive、HBase、Redis、Maxwell、

ClickHouse、MySQL等相關(guān)技術(shù)的特點(diǎn),基于Scala、Java、JavaScript等開發(fā)語言,

綜合軟件開發(fā)相關(guān)技術(shù),解決實(shí)際問題的能力,激發(fā)學(xué)生對大數(shù)據(jù)相關(guān)知識和技術(shù)的學(xué)

習(xí)興趣,提升學(xué)生職業(yè)素養(yǎng)和職業(yè)技能,努力為中國大數(shù)據(jù)產(chǎn)業(yè)的發(fā)展儲(chǔ)備及輸送新鮮

血液。

通過舉辦本賽項(xiàng),可以搭建校企合作的平臺,提升大數(shù)據(jù)專業(yè)及其他相關(guān)專業(yè)畢業(yè)

生能力素質(zhì),滿足企業(yè)用人需求,促進(jìn)校企合作協(xié)同育人,對接產(chǎn)業(yè)發(fā)展,實(shí)現(xiàn)行業(yè)資

源、企業(yè)資源與教學(xué)資源的有機(jī)融合,使高職院校在專業(yè)建設(shè)、課程建設(shè)、人才培養(yǎng)方

案和人才培養(yǎng)模式等方面,跟蹤社會(huì)發(fā)展的最新需要,縮小人才培養(yǎng)與行業(yè)需求差距,

引領(lǐng)職業(yè)院校專業(yè)建設(shè)與課程改革。

三、競賽內(nèi)容

賽項(xiàng)以大數(shù)據(jù)應(yīng)用開發(fā)為核心內(nèi)容和工作基礎(chǔ),重點(diǎn)考查參賽選手基于Hadoop、

Spark、Flink平臺環(huán)境下,充分利用SparkCore、SparkSQL、Flume、Kafka、Flink、

Hive、HBase、Redis、Maxwell、ClickHouse、MySQL等技術(shù)的特點(diǎn),綜合軟件開發(fā)相關(guān)

技術(shù),解決實(shí)際問題的能力,具體包括:

1.掌握Hadoop平臺、基于Spark的離線分析平臺、基于Flink的實(shí)時(shí)分析平臺,

-1-

在容器環(huán)境下,按照項(xiàng)目需求安裝相關(guān)技術(shù)組件并按照需求進(jìn)行合理配置;

2.掌握基于Spark的離線數(shù)據(jù)采集方式方法,完成指定數(shù)據(jù)的抽取并寫入Hive分

區(qū)表中。掌握基于Flume、Maxwell的實(shí)時(shí)數(shù)據(jù)采集,將數(shù)據(jù)寫入Kafka中;

3.綜合利用Flink、Kafka、Hive、Redis、HBase、ClickHouse等技術(shù),使用Java

開發(fā)語言,完成某電商系統(tǒng)的實(shí)時(shí)數(shù)據(jù)處理,包括使用Flink處理Kafka中的數(shù)據(jù)、實(shí)

時(shí)數(shù)據(jù)倉庫、將數(shù)據(jù)備份至HBase中、建立Hive外表、將數(shù)據(jù)處理結(jié)果存入Redis、

ClickHouse中等操作;

4.綜合利用Spark、Hive、MySQL、HBase、ClickHouse等相關(guān)技術(shù),使用Scala開

發(fā)語言,完成某電商系統(tǒng)的離線數(shù)據(jù)處理,包括Hive數(shù)據(jù)倉庫、使用Spark處理離線

數(shù)據(jù)、數(shù)據(jù)合并、去重、排序、數(shù)據(jù)類型轉(zhuǎn)換、將數(shù)據(jù)處理結(jié)果存入MySQL、HBase、

ClickHouse中等操作;

5.綜合運(yùn)用HTML、CSS、JavaScript等開發(fā)語言,Vue.js前端技術(shù),結(jié)合ECharts

數(shù)據(jù)可視化組件,利用后端數(shù)據(jù)接口完成數(shù)據(jù)可視化;

6.根據(jù)競賽過程,完成綜合分析報(bào)告的編寫;

7.競賽時(shí)間6小時(shí),競賽連續(xù)進(jìn)行。

競賽內(nèi)容構(gòu)成如下:

考核環(huán)節(jié)考核知識點(diǎn)和技能點(diǎn)

Docker基本操作

Hadoop完全分布式安裝配置

Spark安裝配置

大數(shù)據(jù)平臺環(huán)境搭建

Flink安裝配置

Hive安裝配置

Kafka安裝配置

-2-

Flume安裝配置

ClickHouse安裝配置

HBase安裝配置

使用Spark抽取MySQL指定數(shù)據(jù)表中的增量數(shù)據(jù)到ods層的指

定的分區(qū)表中

使用Flume采集某端口的實(shí)時(shí)數(shù)據(jù)流并存入Kafka指定的Topic

數(shù)據(jù)采集

使用Maxwell采集MySQL的binlog日志并存入Kafka指定的

Topic中

使用Flink消費(fèi)Kafka中的數(shù)據(jù)并將數(shù)據(jù)分發(fā)至Kafka的dwd

層中

使用Flink消費(fèi)Kafka中的數(shù)據(jù)的同時(shí)能夠?qū)?shù)據(jù)備份至HBase

中,同時(shí)建立Hive外表

實(shí)時(shí)數(shù)據(jù)處理

使用Flink對實(shí)時(shí)數(shù)據(jù)進(jìn)行處理并將處理計(jì)算結(jié)果存入Redis

使用Flink對實(shí)時(shí)數(shù)據(jù)進(jìn)行處理并將處理計(jì)算結(jié)果存入

ClickHouse中

使用Spark對ods層中的離線數(shù)據(jù)進(jìn)行清洗,包括數(shù)據(jù)合并、

去重、排序、數(shù)據(jù)類型轉(zhuǎn)換等操作

將清洗完的數(shù)據(jù)存入dwd層中

根據(jù)dwd層的數(shù)據(jù)使用Spark對數(shù)據(jù)進(jìn)行處理計(jì)算,并將計(jì)算

離線數(shù)據(jù)處理

結(jié)果存入MySQL中

根據(jù)dwd層的數(shù)據(jù)使用Spark對數(shù)據(jù)進(jìn)行處理計(jì)算,并將計(jì)算

結(jié)果存入HBase中

根據(jù)dwd層的數(shù)據(jù)使用Spark對數(shù)據(jù)進(jìn)行處理計(jì)算,并將計(jì)算

結(jié)果存入ClickHouse中

根據(jù)后端數(shù)據(jù)接口,基于Vue.js、ECharts的數(shù)據(jù)可視化編碼

數(shù)據(jù)可視化

(柱狀圖、折線圖、餅狀圖等)

綜合分析報(bào)告文檔能力、綜合分析能力

-3-

競賽各階段分值權(quán)重和時(shí)間分布如下:

階段競賽時(shí)間分值權(quán)重

大數(shù)據(jù)平臺環(huán)境搭建權(quán)重10%

數(shù)據(jù)采集權(quán)重15%

實(shí)時(shí)數(shù)據(jù)處理權(quán)重25%

離線數(shù)據(jù)處理6小時(shí)權(quán)重20%

數(shù)據(jù)可視化權(quán)重15%

綜合分析報(bào)告權(quán)重10%

團(tuán)隊(duì)分工明確合理、操作規(guī)范、文明競賽權(quán)重5%

四、競賽方式

1、比賽以師生聯(lián)賽方式進(jìn)行,不得跨校組隊(duì),同一學(xué)校的報(bào)名參賽隊(duì)伍不超過3

支。

2、每個(gè)參賽隊(duì)由1名領(lǐng)隊(duì)、4名選手(1名教師、3名學(xué)生)組成,參賽選手和教

師報(bào)名獲得確認(rèn)后不得隨意更換。

3、競賽時(shí)間6小時(shí)。

五、競賽流程

根據(jù)競賽任務(wù)要求,參賽隊(duì)伍在6小時(shí)競賽時(shí)間內(nèi)須完成競賽任務(wù),每項(xiàng)任務(wù)用時(shí)

可自行掌握。

(一)競賽時(shí)間安排

日期時(shí)間內(nèi)容

14:00-18:00各參賽隊(duì)報(bào)到

第一天15:00-16:00領(lǐng)隊(duì)會(huì)、賽前說明

16:00-16:30選手熟悉賽場

8:00-9:00賽場檢錄,競賽選手進(jìn)入賽位

第二天9:00-15:00競賽選手完成競賽任務(wù)

16:00-19:00對選手提交的結(jié)果文件進(jìn)行評分

-4-

(二)競賽流程

六、競賽命題

技能大賽的命題工作由賽項(xiàng)執(zhí)委會(huì)指定的命題專家組負(fù)責(zé)。

本賽項(xiàng)制定樣題3套,并與本規(guī)程同步發(fā)布。具體詳見附件1。

正式賽卷在比賽前一天由裁判長在監(jiān)督組的監(jiān)督下從命題專家組負(fù)責(zé)的命題庫中隨

機(jī)抽取一套樣題并進(jìn)行微調(diào)整,在保密室中打印并存放。保密室全程監(jiān)控,并安排專人

看守。比賽前1小時(shí)由兩名裁判及比賽監(jiān)督員將賽題從保密室運(yùn)往賽場。

七、競賽規(guī)則

1.學(xué)生須為高等職業(yè)學(xué)校專科、高等職業(yè)學(xué)校本科、技師學(xué)院全日制在籍學(xué)生,

五年制高職四、五年級學(xué)生也可報(bào)名參賽;參賽教師須為校內(nèi)專任教師,并提供近半年

的社?;蚣{稅證明。凡在往屆全省職業(yè)院校技能大賽中獲一等獎(jiǎng)的學(xué)生,不能再參加同

一項(xiàng)目同一組別的比賽。參賽選手由省教育廳、省人力資源社會(huì)保障廳負(fù)責(zé)確認(rèn)。

2.競賽前1日安排各參賽隊(duì)領(lǐng)隊(duì)、參賽選手熟悉賽場。

3.嚴(yán)禁參賽選手、賽項(xiàng)裁判、工作人員私自攜帶通信、攝錄設(shè)備進(jìn)入比賽場地。

4.參賽選手所需的硬件、軟件和輔助工具統(tǒng)一提供,參賽隊(duì)不得使用自帶的任何

-5-

有存儲(chǔ)功能的設(shè)備,如硬盤、光盤、U盤、手機(jī)、平板電腦等。

5.所有參賽選手都必須攜帶參賽證件進(jìn)行檢錄。

6.參賽隊(duì)在賽前領(lǐng)取比賽任務(wù)并進(jìn)入比賽工位,比賽正式開始后方可進(jìn)行相關(guān)操

作。

7.比賽過程中,選手須嚴(yán)格遵守操作規(guī)程,確保人身及設(shè)備安全,并接受裁判員

的監(jiān)督和指示。因選手原因造成設(shè)備故障或損壞而無法繼續(xù)比賽的,裁判長有權(quán)決定中

止該隊(duì)比賽;非因選手個(gè)人原因造成設(shè)備故障的,由裁判長視具體情況作出裁決。

8.競賽開始時(shí)統(tǒng)一發(fā)放本階段賽卷,競賽結(jié)束后,參賽選手要確認(rèn)已成功提交競

賽要求的配置文件和文檔,裁判員與參賽選手一起簽字確認(rèn),參賽選手在確認(rèn)后不得再

進(jìn)行任何操作。

9.賽項(xiàng)成績解密后,在指定地點(diǎn),以紙質(zhì)形式向全體參賽隊(duì)進(jìn)行公布,成績無異

議后,在閉賽式上予以宣布。

八、競賽環(huán)境

1.競賽場地。競賽場地分為:競賽現(xiàn)場、裁判休息區(qū)、領(lǐng)隊(duì)休息區(qū)、服務(wù)區(qū)。其

中,競賽現(xiàn)場又劃分為:檢錄區(qū)、場內(nèi)競賽區(qū)、技術(shù)支持區(qū)。

2.競賽設(shè)備。場內(nèi)競賽區(qū)按照參賽隊(duì)數(shù)量準(zhǔn)備比賽所需的軟硬件平臺,為參賽隊(duì)

提供統(tǒng)一競賽設(shè)備和備用設(shè)備。選手無需自帶任何工具及附件。

3.競賽工位。競賽現(xiàn)場各個(gè)工作區(qū)配備單相220V/3A以上交流電源。每個(gè)比賽工

位上標(biāo)明編號。

4.技術(shù)支持區(qū)。為技術(shù)支持人員提供固定工位、電源保障。

5.服務(wù)區(qū)。提供醫(yī)療等服務(wù)保障。

6.競賽場地應(yīng)符合消防安全規(guī)定,現(xiàn)場消防器材和消防栓合格有效,應(yīng)急照明設(shè)

施狀態(tài)合格,賽場明顯位置張貼緊急疏散圖,賽場出入口專人負(fù)責(zé)。現(xiàn)場臨時(shí)用電滿足

《施工現(xiàn)場臨時(shí)用電安全技術(shù)規(guī)范》JGJ46-2005的要求。競賽現(xiàn)場通風(fēng)良好、照明需符

合教室采光規(guī)范。

九、技術(shù)規(guī)范

本賽項(xiàng)的技術(shù)規(guī)范將包括:相關(guān)專業(yè)的教育教學(xué)要求、行業(yè)、職業(yè)技術(shù)標(biāo)準(zhǔn),以及

-6-

根據(jù)高職目錄修訂后的大數(shù)據(jù)應(yīng)用開發(fā)相關(guān)專業(yè)人才培養(yǎng)標(biāo)準(zhǔn)和規(guī)范,適時(shí)地修訂本賽

項(xiàng)遵循的技術(shù)規(guī)范。

(一)基礎(chǔ)標(biāo)準(zhǔn)

標(biāo)準(zhǔn)內(nèi)容

GB/T11457-2006信息技術(shù)、軟件工程術(shù)語

GB8566-88計(jì)算機(jī)軟件開發(fā)規(guī)范

GB/T12991-2008信息技術(shù)數(shù)據(jù)庫語言SQL第1部分:框架

GB/T21025-2007XML使用指南

GB/T20009-2005信息安全技術(shù)數(shù)據(jù)庫管理系統(tǒng)安全評估準(zhǔn)則已發(fā)布

GB/T20273-2006信息安全技術(shù)數(shù)據(jù)庫管理系統(tǒng)安全技術(shù)要求

20100383-T-469信息技術(shù)安全技術(shù)信息安全管理體系實(shí)施指南

(二)軟件開發(fā)標(biāo)準(zhǔn)

標(biāo)準(zhǔn)內(nèi)容

GB/T8566-2001信息技術(shù)軟件生存周期過程

GB/T15853-1995軟件支持環(huán)境

GB/T14079-1993軟件維護(hù)指南

GB/T17544-1998信息技術(shù)軟件包質(zhì)量要求和測試

十、技術(shù)平臺

(一)競賽設(shè)備

設(shè)備類別數(shù)量設(shè)備用途基本配置

性能相當(dāng)于i5處理器,

每支參賽隊(duì)伍1臺。64GB以上內(nèi)存,1TB以上

構(gòu)建大數(shù)據(jù)平臺集

競賽服務(wù)器根據(jù)參賽隊(duì)數(shù)量,配硬盤,網(wǎng)卡(千兆),顯

備10%的備份機(jī)器。示器要求1024*768以

上。

性能相當(dāng)于i5處理器,

每支參賽隊(duì)伍4臺。

16GB以上內(nèi)存,1TB以上

競賽客戶機(jī)根據(jù)參賽團(tuán)隊(duì)數(shù)量,競賽選手比賽使用

硬盤,顯示器要求

配備10%的備份機(jī)器。

1024*768以上。

(二)軟件平臺

由2023年全國職業(yè)院校技能大賽(高職組)大數(shù)據(jù)應(yīng)用開發(fā)賽項(xiàng)合作企業(yè)——北

-7-

京四合天地科技有限公司提供四合天地大數(shù)據(jù)實(shí)訓(xùn)管理系統(tǒng)。

系統(tǒng)基于自研Docker容器編排管理引擎,運(yùn)用云原生和容器技術(shù)構(gòu)建訓(xùn)練環(huán)境,

支持快速創(chuàng)建訓(xùn)練環(huán)境。實(shí)現(xiàn)每個(gè)學(xué)生環(huán)境互相隔離、訓(xùn)練過程互不干擾,教師可以一

鍵操作即可創(chuàng)建一套全新的環(huán)境供學(xué)生進(jìn)行備賽訓(xùn)練,方便學(xué)生高效的完成訓(xùn)練操作的

同時(shí),大幅降低了教師組織訓(xùn)練的難度和成本。具體功能如下:

1、本系統(tǒng)運(yùn)行在開源操作系統(tǒng)Linux平臺下,應(yīng)使用瀏覽器/服務(wù)器模式提供服務(wù),

用戶使用最新版本的谷歌瀏覽器訪問系統(tǒng)。

2、系統(tǒng)支持包括管理員、教師、學(xué)生三種角色。管理員負(fù)責(zé)系統(tǒng)配置維護(hù)、鏡像

環(huán)境維護(hù)等工作;教師負(fù)責(zé)小組維護(hù)、訓(xùn)練任務(wù)維護(hù)等工作;學(xué)生參與并完成訓(xùn)練。

管理員功能:

3、專業(yè)管理:管理員可自主創(chuàng)建專業(yè),編輯專業(yè)相關(guān)內(nèi)容,如:新增(編輯)專

業(yè),刪除專業(yè)。

4、班級管理:管理員可自主創(chuàng)建班級,編輯班級相關(guān)內(nèi)容,如:新增(編輯)班

級,刪除班級。

5、用戶管理:管理員可自主創(chuàng)建用戶,編輯用戶相關(guān)內(nèi)容,如:新增(編輯)用

戶的賬號、姓名、手機(jī)號、角色、狀態(tài)、密碼等,同時(shí)也可對用戶進(jìn)行刪除操作。

6、鏡像環(huán)境:管理員可維護(hù)鏡像環(huán)境,可通過網(wǎng)頁上傳Dockerfile文件來完成鏡像

環(huán)境的創(chuàng)建,也可從本地鏡像倉庫進(jìn)行鏡像同步,并可對鏡像環(huán)境執(zhí)行編輯等操作。

7、環(huán)境配置:管理員依據(jù)鏡像環(huán)境的具體應(yīng)用場景,通過添加環(huán)境配置來完善該

鏡像所需的CPU、內(nèi)存、磁盤空間等配置信息,并可對環(huán)境配置信息進(jìn)行編輯和刪除。

8、服務(wù)器配置:管理員可配置計(jì)算節(jié)點(diǎn)服務(wù)器相關(guān)信息,包括新增服務(wù)器名稱、

服務(wù)器IP地址、CPU核數(shù)、內(nèi)存大小、磁盤空間,也可對服務(wù)器配置信息進(jìn)行編輯和

刪除。

9、訓(xùn)練資源監(jiān)控:管理員可監(jiān)控正在進(jìn)行的訓(xùn)練資源,監(jiān)控正在進(jìn)行的訓(xùn)練狀態(tài)、

使用人數(shù)、占用資源等信息,并可對相關(guān)的環(huán)境執(zhí)行啟動(dòng)、掛起等操作。

10、角色管理:管理員可自主創(chuàng)建角色,編輯角色相關(guān)內(nèi)容,如:添加(編輯)角

色名稱、角色備注(描述)、狀態(tài)、權(quán)限分配(權(quán)限分配依據(jù)角色名稱分配相應(yīng)權(quán)限)

-8-

等,同時(shí)也可對角色進(jìn)行刪除操作。

11、日志管理:管理員可以查看當(dāng)前系統(tǒng)操作日志和登錄日志。操作日志主要記錄

操作的賬戶、操作模塊、時(shí)間、IP等信息。登錄日志主要記錄登錄的用戶、IP地址、登

錄狀態(tài)等信息。

12、系統(tǒng)設(shè)置:可自定義系統(tǒng)名稱,如瀏覽器標(biāo)題、瀏覽器LOGO、登錄頁標(biāo)題、

首頁標(biāo)題、首頁LOGO等。

教師功能:

13、訓(xùn)練模塊:教師可自主創(chuàng)建訓(xùn)練模塊,編輯相應(yīng)的訓(xùn)練內(nèi)容。內(nèi)容包括訓(xùn)練的

名稱、介紹、使用狀態(tài)、該訓(xùn)練指定的一個(gè)或多個(gè)實(shí)訓(xùn)環(huán)境、可供下載的資源包、任務(wù)

設(shè)置的具體形式包括上傳任務(wù)說明、任務(wù)參考等。

14、小組管理:教師可自主創(chuàng)建小組,并對小組進(jìn)行編輯、啟用、禁用等操作。已

啟用的小組可以進(jìn)行添加成員、設(shè)置任務(wù)參考操作。在編輯具體小組時(shí),通過選擇該小

組所包含的成員,內(nèi)容上選擇所用到的訓(xùn)練模塊,完成小組的整體設(shè)置。

15、訓(xùn)練監(jiān)控:教師可查看各小組的訓(xùn)練情況,選擇啟動(dòng)、掛起、繼續(xù)或結(jié)束訓(xùn)練

環(huán)境。通過“進(jìn)入”按鈕,可進(jìn)入小組的某個(gè)環(huán)境進(jìn)行指導(dǎo)操作,也可對小組的某個(gè)訓(xùn)

練環(huán)境執(zhí)行啟動(dòng)、停止、重置或重啟。

16、訓(xùn)練報(bào)告:對已啟用小組,記錄每個(gè)小組中,學(xué)生具體的訓(xùn)練情況,查閱學(xué)生

提交上傳的報(bào)告、附件等信息,編輯每個(gè)學(xué)生對應(yīng)的訓(xùn)練成績。

17、個(gè)人實(shí)驗(yàn)環(huán)境:教師可在個(gè)人實(shí)驗(yàn)環(huán)境中選擇鏡像環(huán)境進(jìn)行個(gè)人實(shí)驗(yàn)或練習(xí)等

操作。

18、消息通知:當(dāng)學(xué)生完成訓(xùn)練報(bào)告的提交或附件上傳時(shí),教師會(huì)收到消息通知并

可通過消息通知直接找到訓(xùn)練報(bào)告或附件。

19、個(gè)人資料:教師可修改個(gè)人頭像及密碼。

學(xué)生功能:

20、學(xué)生登錄平臺,可進(jìn)入對應(yīng)的訓(xùn)練模塊,在線查看任務(wù)說明、任務(wù)參考,并進(jìn)

入訓(xùn)練環(huán)境進(jìn)行操作,可在瀏覽器中訪問自己的訓(xùn)練環(huán)境,也可通過SSH工具直連相

應(yīng)訓(xùn)練環(huán)境容器的ip地址進(jìn)入該環(huán)境,支持通過環(huán)境的ip地址訪問環(huán)境中部署的相應(yīng)

-9-

服務(wù),也可對環(huán)境進(jìn)行重置、重啟、上傳、下載等操作,同時(shí)學(xué)生可以下載相關(guān)的資源

文件,提交個(gè)人的訓(xùn)練報(bào)告,上傳相關(guān)附件完成訓(xùn)練。

21、個(gè)人中心:學(xué)生可修改個(gè)人頭像及密碼,也可查看自己的訓(xùn)練記錄。

(三)軟件環(huán)境

設(shè)備類型軟件類別軟件名稱、版本號

競賽環(huán)境大數(shù)據(jù)集群操

CentOS7、Docker-CE20.10

作系統(tǒng)

Hadoop3.1.3

Hive3.1.2

HBase2.2.3

Spark3.1.1

Kafka2.4.1

競賽服務(wù)器Redis6.2.6

大數(shù)據(jù)平臺組件

Flume1.9.0

Maxwell1.29.0

Flink1.14.0

ClickHouse21.9.4

JDK1.8

MySQL5.7

PC操作系統(tǒng)Ubuntu18.0464位

瀏覽器Chrome

Scala2.12

開發(fā)語言

Java8

開發(fā)客戶端IDEA2022

開發(fā)工具(CommunityEdition)

VisualStudioCode1.69

數(shù)據(jù)庫連接工具M(jìn)ySQLWorkbench

SSH工具Asbru-cm或UbuntuSSH客戶端

-10-

API測試工具PostmanAPIPlatform

Vue.js3.0

數(shù)據(jù)可視化組件

ECharts5.1

文檔編輯器WPSLinux版

輸入法搜狗拼音輸入法Linux版

十一、成績評定

(一)獎(jiǎng)項(xiàng)設(shè)定

競賽設(shè)參賽選手團(tuán)體獎(jiǎng)。獎(jiǎng)項(xiàng)設(shè)置按參賽隊(duì)數(shù)量確定,其中一等獎(jiǎng)10%,二等獎(jiǎng)20%,

三等獎(jiǎng)30%。

(二)評分標(biāo)準(zhǔn)制定原則

競賽評分制定嚴(yán)格遵守公平、公正的原則,大數(shù)據(jù)應(yīng)用開發(fā)賽項(xiàng)評分采用賽項(xiàng)結(jié)果

評分方法,始終貫徹落實(shí)競賽一貫堅(jiān)持的公平、公正和公開原則。

參與競賽成績管理的組織機(jī)構(gòu)包括裁判組、監(jiān)督和仲裁組等。裁判組實(shí)行“裁判長

負(fù)責(zé)制”,設(shè)裁判長1名、加密裁判1名、現(xiàn)場裁判2名、評分裁判3名,共4名裁判。

裁判員根據(jù)競賽工作需要分為檢錄裁判、加密裁判、現(xiàn)場裁判和評分裁判。檢錄裁

判負(fù)責(zé)對參賽隊(duì)伍(選手)進(jìn)行點(diǎn)名登記、身份核對等工作;加密裁判負(fù)責(zé)組織參賽隊(duì)

伍(選手)抽簽并對參賽隊(duì)伍(選手)的信息進(jìn)行加密、解密;現(xiàn)場裁判按規(guī)定做好賽

場記錄,維護(hù)賽場紀(jì)律;評分裁判負(fù)責(zé)對參賽隊(duì)伍(選手)的技能展示、操作規(guī)范和競

賽成果等按賽項(xiàng)評分標(biāo)準(zhǔn)進(jìn)行評定。

監(jiān)督組對裁判組的工作進(jìn)行全程監(jiān)督,并對競賽成績抽檢復(fù)核。

仲裁組負(fù)責(zé)接收由參賽隊(duì)領(lǐng)隊(duì)提出的對裁判結(jié)果的申訴,組織復(fù)議并及時(shí)反饋復(fù)議

結(jié)果。

(三)評分方法

選手在完成任務(wù)之后,將任務(wù)完成結(jié)果拷貝至U盤中,由參賽選手隊(duì)長簽字確認(rèn)(簽

工位號)。

評分采取分步得分、累計(jì)總分的計(jì)分方式。

不計(jì)參賽選手的個(gè)人得分,只記錄團(tuán)體得分。

-11-

參賽隊(duì)提交比賽任務(wù)結(jié)束請求或者在比賽時(shí)間終止后,不得再進(jìn)行任何操作。否則,

視為比賽作弊,給參賽隊(duì)記警告一次。

在競賽過程中,選手如有不服從裁判判決、擾亂賽場秩序、舞弊等不文明行為,由

裁判長按照規(guī)定扣減相應(yīng)分?jǐn)?shù)并且給予警告,情節(jié)嚴(yán)重的取消競賽資格,競賽成績記0

分,隊(duì)員退出比賽現(xiàn)場。

(四)評分標(biāo)準(zhǔn)

分值

任務(wù)考查點(diǎn)描述評分標(biāo)準(zhǔn)

(分)

主要評分點(diǎn)包括Hadoop

完全分布式安裝配置、

大數(shù)據(jù)

大數(shù)據(jù)在指定的宿主機(jī)上,基于DockerSpark安裝配置、Flink

相關(guān)平

平臺環(huán)環(huán)境完成Hadoop完全分布式、安裝配置、Hive安裝配

臺組件10

境搭建Spark、Flink、Hive、Kafka、Flume、置、Kafka安裝配置、

安裝配

(10分)ClickHouse、HBase等的安裝配置。Flume安裝配置、

ClickHouse安裝配置、

HBase安裝配置。

離線數(shù)按照要求基于Scala語言完成特定主要評分點(diǎn)包括Spark

數(shù)據(jù)采據(jù)采函數(shù)的編寫,使用Spark完成離線數(shù)據(jù)讀取、數(shù)據(jù)存儲(chǔ)、

集集、實(shí)數(shù)據(jù)采集;按照要求使用Linux命Flume數(shù)據(jù)采集、15

(15分)時(shí)數(shù)據(jù)令,利用Flume、Maxwell、KafkaMaxwell數(shù)據(jù)采集、

采集等工具完成實(shí)時(shí)數(shù)據(jù)采集。Kafka等操作。

使用Java語言基于Flink完成

實(shí)時(shí)數(shù)Kafka中的數(shù)據(jù)消費(fèi),將數(shù)據(jù)分發(fā)主要評分點(diǎn)包括Flink

實(shí)時(shí)數(shù)

據(jù)處理至Kafka的dwd層中,并在HBase數(shù)據(jù)處理、數(shù)據(jù)指標(biāo)計(jì)

據(jù)處理中進(jìn)行備份同時(shí)建立Hive外表,基算、HBase、Hive、25

計(jì)算代

(25分)于Flink完成相關(guān)的數(shù)據(jù)指標(biāo)計(jì)算ClickHouse、Redis等相

碼編寫并將計(jì)算結(jié)果存入Redis、關(guān)操作。

ClickHouse中。

離線數(shù)使用Scala語言基于Spark完成離主要評分點(diǎn)包括基于

離線數(shù)

據(jù)處理線數(shù)據(jù)清洗、處理、計(jì)算,包括數(shù)Spark的數(shù)據(jù)清洗、數(shù)據(jù)

據(jù)處理據(jù)的合并、去重、排序、數(shù)據(jù)類型指標(biāo)計(jì)算、HBase、Hive、20

計(jì)算代

(20分)轉(zhuǎn)換等并將計(jì)算結(jié)果存入MySQL、ClickHouse、MySQL等相

碼編寫HBase、ClickHouse中。關(guān)操作。

-12-

數(shù)據(jù)可數(shù)據(jù)可編寫前端Web界面,調(diào)用后臺數(shù)據(jù)主要評分點(diǎn)包括可視化

視化視化代接口,使用Vue.js、ECharts完成前端代碼開發(fā)、前端展15

(15分)碼編寫數(shù)據(jù)可視化。示。

綜合分主要評分點(diǎn)包括能夠按

文檔編根據(jù)項(xiàng)目要求,完成綜合分析報(bào)告

析報(bào)告照賽項(xiàng)要求進(jìn)行綜合分10

寫編寫。

(10分)析。

職業(yè)素主要評分點(diǎn)包括:競賽

職業(yè)素團(tuán)隊(duì)分工明確合理、操作規(guī)范、文

養(yǎng)團(tuán)隊(duì)分工明確合理、操5

養(yǎng)明競賽。

(5分)作規(guī)范、文明競賽。

(五)成績審核方法

競賽結(jié)束后,由裁判長向裁判員核實(shí)競賽過程中有無異常。如無異常,成績單由裁

判長簽字確認(rèn)并封存直至公布成績時(shí)開啟。

如有異常,在裁判長主持下,由專家組成員、裁判員、仲裁員和監(jiān)督員共同處理。

(六)成績公布方法

競賽成績經(jīng)復(fù)核無誤后,經(jīng)裁判長、監(jiān)督人員審核簽字后,以賽項(xiàng)組委會(huì)最終公布

結(jié)果為準(zhǔn)

競賽結(jié)束后,如參賽隊(duì)對比賽成績有異議,提出異議申訴或仲裁,可按照相關(guān)規(guī)定

進(jìn)行申訴和仲裁,按照仲裁結(jié)果公布競賽成績。

十二、賽場預(yù)案

賽場備用工位:賽場提供占總參賽隊(duì)伍10%的備用工位。

競賽系統(tǒng)可靠性:競賽系統(tǒng)使用的服務(wù)器應(yīng)進(jìn)行冗余,數(shù)據(jù)庫、存儲(chǔ)應(yīng)使用高可用

架構(gòu)。提前開始運(yùn)行,經(jīng)過多次壓力測試,由學(xué)校組織的真實(shí)競賽環(huán)境測試。

競賽備用服務(wù)器:現(xiàn)場提供占總參賽隊(duì)伍10%的備用服務(wù)器。

現(xiàn)場應(yīng)急預(yù)案詳情,如下:

(一)服務(wù)器問題預(yù)案

若服務(wù)器在比賽過程中出現(xiàn)卡頓、死機(jī)等情況,參賽選手舉手示意裁判,在裁判與

-13-

技術(shù)支持人員確定情況后,可更換服務(wù)器。更換服務(wù)器的等待時(shí)間,可在比賽結(jié)束后延

時(shí)。

(二)交換機(jī)問題預(yù)案

若交換機(jī)在比賽過程中出現(xiàn)傳輸速度慢或無故中斷等情況,參賽選手舉手示意裁判,

在裁判與技術(shù)支持人員確定情況后,可更換交換機(jī)。更換交換機(jī)的等待時(shí)間,可在比賽

結(jié)束后延時(shí)。

(三)PC機(jī)問題預(yù)案

若PC機(jī)在比賽過程中出現(xiàn)死機(jī)、藍(lán)屏等現(xiàn)象(重啟后無法解決),參賽選手舉手

示意裁判,在裁判與技術(shù)支持人員確定情況后,可更換備用工位或更換PC機(jī)進(jìn)行答題。

十三、申訴與仲裁

(一)申訴

1.參賽隊(duì)對不符合競賽規(guī)定的設(shè)備、工具、軟件,有失公正的評判、獎(jiǎng)勵(lì),以及

對工作人員的違規(guī)行為等,均可提出申訴。

2.申訴應(yīng)在競賽結(jié)束后2小時(shí)內(nèi)提出,超過時(shí)效將不予受理。申訴時(shí),應(yīng)按照規(guī)

定的程序由參賽隊(duì)領(lǐng)隊(duì)向相應(yīng)賽項(xiàng)裁判委員會(huì)遞交書面申訴報(bào)告。報(bào)告應(yīng)對申訴事件的

現(xiàn)象、發(fā)生的時(shí)間、涉及到的人員、申訴依據(jù)與理由等進(jìn)行充分、實(shí)事求是的敘述。事

實(shí)依據(jù)不充分、僅憑主觀臆斷的申訴將不予受理。申訴報(bào)告須有申訴的參賽選手、領(lǐng)隊(duì)

簽名。

3.賽項(xiàng)裁判委員會(huì)收到申訴報(bào)告后,應(yīng)根據(jù)申訴事由進(jìn)行審查,2小時(shí)內(nèi)書面通知

申訴方,告知申訴處理結(jié)果。如受理申訴,要通知申訴方舉辦聽證會(huì)的時(shí)間和地點(diǎn);如

不受理申訴,要說明理由。

4.申訴人不得無故拒不接受處理結(jié)果,不允許采取過激行為刁難、攻擊工作人員,

否則視為放棄申訴。申訴人不滿意賽項(xiàng)裁委會(huì)的處理結(jié)果的,可向賽項(xiàng)仲裁工作組提出

復(fù)議申請。

(二)仲裁

-14-

1.2024年甘肅省職業(yè)院校技能大賽(高職組)“大數(shù)據(jù)應(yīng)用開發(fā)”賽項(xiàng)裁判委員

會(huì)設(shè)仲裁工作組,負(fù)責(zé)受理競賽中出現(xiàn)的申訴復(fù)議并進(jìn)行仲裁,以保證競賽的順利進(jìn)行

和競賽結(jié)果公平、公正。

2.仲裁工作組的裁決為最終裁決,參賽隊(duì)不得因?qū)χ俨锰幚硪庖姴环V贡荣?/p>

或滋事,否則按棄權(quán)處理。

十四、競賽觀摩

(一)組織安排

在競賽開始1小時(shí)之后,由承辦校組織并派人帶領(lǐng)媒體、專家、企業(yè)代表、院校師

生等進(jìn)入賽場外的開放式觀摩區(qū),按照指定路線進(jìn)行觀摩。

(二)紀(jì)律要求

為保證大賽順利進(jìn)行,在觀摩期間應(yīng)遵循以下紀(jì)律要求:

1.除與競賽直接有關(guān)工作人員、裁判員、參賽選手外,其余人員均為觀摩觀眾。

2.不得違反職業(yè)院校技能大賽規(guī)定的各項(xiàng)紀(jì)律。

3.觀摩人員需經(jīng)批準(zhǔn),佩戴觀摩證件,遵循觀摩區(qū)的工作人員指揮。

4.文明觀摩,保持觀摩區(qū)清潔,不得大聲喧嘩,杜絕各種違反觀摩秩序的不文明行

為。

十五、競賽須知

(一)參賽隊(duì)須知

1.參賽隊(duì)名稱:統(tǒng)一使用規(guī)定的學(xué)校代表隊(duì)名稱,不使用其他組織、團(tuán)體的名稱;

2.參賽隊(duì)組成:每支參賽隊(duì)由4名參賽選手組成,其中參賽學(xué)生須為同校在籍學(xué)

生,參賽教師須為校內(nèi)專任教師。不接受跨校組隊(duì),同一學(xué)校的報(bào)名參賽隊(duì)伍不超過3

支;

3.各參賽院校應(yīng)指定1名負(fù)責(zé)人任賽項(xiàng)領(lǐng)隊(duì),全權(quán)負(fù)責(zé)該校參賽事務(wù)的組織、協(xié)

調(diào)和領(lǐng)導(dǎo)工作。

4.參賽選手在報(bào)名獲得確認(rèn)后,原則上不再更換。如在籌備過程中,參賽選手因

-15-

故不能參賽,須由其所在學(xué)校供職部門于賽項(xiàng)開賽前10個(gè)工作日之前出具書面說明,

經(jīng)賽項(xiàng)執(zhí)委會(huì)辦公室核實(shí)后予以更換。允許隊(duì)員缺席比賽。

5.參賽隊(duì)按照賽項(xiàng)競賽規(guī)程安排,憑賽項(xiàng)執(zhí)委會(huì)頒發(fā)的參賽證和有效身份證件參

加比賽及相關(guān)活動(dòng)。

6.賽項(xiàng)執(zhí)委會(huì)統(tǒng)一安排各參賽隊(duì)在比賽前一天進(jìn)入賽場熟悉環(huán)境和設(shè)施情況。

7.參賽隊(duì)選手和領(lǐng)隊(duì)要有良好的職業(yè)道德,嚴(yán)格遵守比賽規(guī)則和比賽紀(jì)律,服從

裁判,尊重裁判和賽場工作人員,自覺維護(hù)賽場秩序。

8.領(lǐng)隊(duì)?wèi)?yīng)負(fù)責(zé)賽事活動(dòng)期間本隊(duì)所有選手的人身及財(cái)產(chǎn)安全,如發(fā)現(xiàn)意外事故,

應(yīng)及時(shí)向賽項(xiàng)執(zhí)委會(huì)報(bào)告。

9.各學(xué)校組織代表隊(duì)時(shí),須為參賽選手購買競賽期間的人身意外傷害保險(xiǎn)。

(二)領(lǐng)隊(duì)須知

1.嚴(yán)格遵守賽場的各項(xiàng)規(guī)定,服從裁判,文明競賽。如發(fā)現(xiàn)弄虛作假者,取消參

賽資格,名次無效。

2.領(lǐng)隊(duì)務(wù)必帶好有效身份證件,在活動(dòng)過程中佩戴“領(lǐng)隊(duì)證”參加競賽相關(guān)活動(dòng)。

3.各代表隊(duì)領(lǐng)隊(duì)要堅(jiān)決執(zhí)行競賽的各項(xiàng)規(guī)定,加強(qiáng)對參賽人員的管理,做好賽前

準(zhǔn)備工作,督促選手帶好證件等競賽相關(guān)材料。

4.在比賽期間要嚴(yán)格遵守比賽規(guī)則,不得私自接觸裁判人員。

5.競賽過程中,未經(jīng)裁判許可,領(lǐng)隊(duì)及其他人員一律不得進(jìn)入競賽現(xiàn)場。

6.如對競賽過程有疑議,由領(lǐng)隊(duì)負(fù)責(zé)以書面形式向賽項(xiàng)仲裁委員會(huì)反映,但不得

影響競賽進(jìn)行。

7.對申訴的仲裁結(jié)果,領(lǐng)隊(duì)要帶頭服從和執(zhí)行,并做好選手工作。參賽選手不得

因申訴或?qū)μ幚硪庖姴环V垢傎?,否則以棄權(quán)

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論