




版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡介
2024年甘肅省職業(yè)院校技能大賽
高職組電子與信息類“大數(shù)據(jù)應(yīng)用開發(fā)”賽項(xiàng)規(guī)程
一、賽項(xiàng)名稱
賽項(xiàng)名稱:大數(shù)據(jù)應(yīng)用開發(fā)
賽項(xiàng)組別:高職組(師生同賽)
賽項(xiàng)歸屬產(chǎn)業(yè):電子與信息大類
二、競賽目的
為適應(yīng)大數(shù)據(jù)產(chǎn)業(yè)對高素質(zhì)技術(shù)技能型人才的職業(yè)需求,賽項(xiàng)以大數(shù)據(jù)應(yīng)用開發(fā)為
核心內(nèi)容和工作基礎(chǔ),重點(diǎn)考查參賽選手基于Hadoop、Spark、Flink平臺環(huán)境下,充
分利用SparkCore、SparkSQL、Flume、Kafka、Flink、Hive、HBase、Redis、Maxwell、
ClickHouse、MySQL等相關(guān)技術(shù)的特點(diǎn),基于Scala、Java、JavaScript等開發(fā)語言,
綜合軟件開發(fā)相關(guān)技術(shù),解決實(shí)際問題的能力,激發(fā)學(xué)生對大數(shù)據(jù)相關(guān)知識和技術(shù)的學(xué)
習(xí)興趣,提升學(xué)生職業(yè)素養(yǎng)和職業(yè)技能,努力為中國大數(shù)據(jù)產(chǎn)業(yè)的發(fā)展儲(chǔ)備及輸送新鮮
血液。
通過舉辦本賽項(xiàng),可以搭建校企合作的平臺,提升大數(shù)據(jù)專業(yè)及其他相關(guān)專業(yè)畢業(yè)
生能力素質(zhì),滿足企業(yè)用人需求,促進(jìn)校企合作協(xié)同育人,對接產(chǎn)業(yè)發(fā)展,實(shí)現(xiàn)行業(yè)資
源、企業(yè)資源與教學(xué)資源的有機(jī)融合,使高職院校在專業(yè)建設(shè)、課程建設(shè)、人才培養(yǎng)方
案和人才培養(yǎng)模式等方面,跟蹤社會(huì)發(fā)展的最新需要,縮小人才培養(yǎng)與行業(yè)需求差距,
引領(lǐng)職業(yè)院校專業(yè)建設(shè)與課程改革。
三、競賽內(nèi)容
賽項(xiàng)以大數(shù)據(jù)應(yīng)用開發(fā)為核心內(nèi)容和工作基礎(chǔ),重點(diǎn)考查參賽選手基于Hadoop、
Spark、Flink平臺環(huán)境下,充分利用SparkCore、SparkSQL、Flume、Kafka、Flink、
Hive、HBase、Redis、Maxwell、ClickHouse、MySQL等技術(shù)的特點(diǎn),綜合軟件開發(fā)相關(guān)
技術(shù),解決實(shí)際問題的能力,具體包括:
1.掌握Hadoop平臺、基于Spark的離線分析平臺、基于Flink的實(shí)時(shí)分析平臺,
-1-
在容器環(huán)境下,按照項(xiàng)目需求安裝相關(guān)技術(shù)組件并按照需求進(jìn)行合理配置;
2.掌握基于Spark的離線數(shù)據(jù)采集方式方法,完成指定數(shù)據(jù)的抽取并寫入Hive分
區(qū)表中。掌握基于Flume、Maxwell的實(shí)時(shí)數(shù)據(jù)采集,將數(shù)據(jù)寫入Kafka中;
3.綜合利用Flink、Kafka、Hive、Redis、HBase、ClickHouse等技術(shù),使用Java
開發(fā)語言,完成某電商系統(tǒng)的實(shí)時(shí)數(shù)據(jù)處理,包括使用Flink處理Kafka中的數(shù)據(jù)、實(shí)
時(shí)數(shù)據(jù)倉庫、將數(shù)據(jù)備份至HBase中、建立Hive外表、將數(shù)據(jù)處理結(jié)果存入Redis、
ClickHouse中等操作;
4.綜合利用Spark、Hive、MySQL、HBase、ClickHouse等相關(guān)技術(shù),使用Scala開
發(fā)語言,完成某電商系統(tǒng)的離線數(shù)據(jù)處理,包括Hive數(shù)據(jù)倉庫、使用Spark處理離線
數(shù)據(jù)、數(shù)據(jù)合并、去重、排序、數(shù)據(jù)類型轉(zhuǎn)換、將數(shù)據(jù)處理結(jié)果存入MySQL、HBase、
ClickHouse中等操作;
5.綜合運(yùn)用HTML、CSS、JavaScript等開發(fā)語言,Vue.js前端技術(shù),結(jié)合ECharts
數(shù)據(jù)可視化組件,利用后端數(shù)據(jù)接口完成數(shù)據(jù)可視化;
6.根據(jù)競賽過程,完成綜合分析報(bào)告的編寫;
7.競賽時(shí)間6小時(shí),競賽連續(xù)進(jìn)行。
競賽內(nèi)容構(gòu)成如下:
考核環(huán)節(jié)考核知識點(diǎn)和技能點(diǎn)
Docker基本操作
Hadoop完全分布式安裝配置
Spark安裝配置
大數(shù)據(jù)平臺環(huán)境搭建
Flink安裝配置
Hive安裝配置
Kafka安裝配置
-2-
Flume安裝配置
ClickHouse安裝配置
HBase安裝配置
使用Spark抽取MySQL指定數(shù)據(jù)表中的增量數(shù)據(jù)到ods層的指
定的分區(qū)表中
使用Flume采集某端口的實(shí)時(shí)數(shù)據(jù)流并存入Kafka指定的Topic
數(shù)據(jù)采集
中
使用Maxwell采集MySQL的binlog日志并存入Kafka指定的
Topic中
使用Flink消費(fèi)Kafka中的數(shù)據(jù)并將數(shù)據(jù)分發(fā)至Kafka的dwd
層中
使用Flink消費(fèi)Kafka中的數(shù)據(jù)的同時(shí)能夠?qū)?shù)據(jù)備份至HBase
中,同時(shí)建立Hive外表
實(shí)時(shí)數(shù)據(jù)處理
使用Flink對實(shí)時(shí)數(shù)據(jù)進(jìn)行處理并將處理計(jì)算結(jié)果存入Redis
中
使用Flink對實(shí)時(shí)數(shù)據(jù)進(jìn)行處理并將處理計(jì)算結(jié)果存入
ClickHouse中
使用Spark對ods層中的離線數(shù)據(jù)進(jìn)行清洗,包括數(shù)據(jù)合并、
去重、排序、數(shù)據(jù)類型轉(zhuǎn)換等操作
將清洗完的數(shù)據(jù)存入dwd層中
根據(jù)dwd層的數(shù)據(jù)使用Spark對數(shù)據(jù)進(jìn)行處理計(jì)算,并將計(jì)算
離線數(shù)據(jù)處理
結(jié)果存入MySQL中
根據(jù)dwd層的數(shù)據(jù)使用Spark對數(shù)據(jù)進(jìn)行處理計(jì)算,并將計(jì)算
結(jié)果存入HBase中
根據(jù)dwd層的數(shù)據(jù)使用Spark對數(shù)據(jù)進(jìn)行處理計(jì)算,并將計(jì)算
結(jié)果存入ClickHouse中
根據(jù)后端數(shù)據(jù)接口,基于Vue.js、ECharts的數(shù)據(jù)可視化編碼
數(shù)據(jù)可視化
(柱狀圖、折線圖、餅狀圖等)
綜合分析報(bào)告文檔能力、綜合分析能力
-3-
競賽各階段分值權(quán)重和時(shí)間分布如下:
階段競賽時(shí)間分值權(quán)重
大數(shù)據(jù)平臺環(huán)境搭建權(quán)重10%
數(shù)據(jù)采集權(quán)重15%
實(shí)時(shí)數(shù)據(jù)處理權(quán)重25%
離線數(shù)據(jù)處理6小時(shí)權(quán)重20%
數(shù)據(jù)可視化權(quán)重15%
綜合分析報(bào)告權(quán)重10%
團(tuán)隊(duì)分工明確合理、操作規(guī)范、文明競賽權(quán)重5%
四、競賽方式
1、比賽以師生聯(lián)賽方式進(jìn)行,不得跨校組隊(duì),同一學(xué)校的報(bào)名參賽隊(duì)伍不超過3
支。
2、每個(gè)參賽隊(duì)由1名領(lǐng)隊(duì)、4名選手(1名教師、3名學(xué)生)組成,參賽選手和教
師報(bào)名獲得確認(rèn)后不得隨意更換。
3、競賽時(shí)間6小時(shí)。
五、競賽流程
根據(jù)競賽任務(wù)要求,參賽隊(duì)伍在6小時(shí)競賽時(shí)間內(nèi)須完成競賽任務(wù),每項(xiàng)任務(wù)用時(shí)
可自行掌握。
(一)競賽時(shí)間安排
日期時(shí)間內(nèi)容
14:00-18:00各參賽隊(duì)報(bào)到
第一天15:00-16:00領(lǐng)隊(duì)會(huì)、賽前說明
16:00-16:30選手熟悉賽場
8:00-9:00賽場檢錄,競賽選手進(jìn)入賽位
第二天9:00-15:00競賽選手完成競賽任務(wù)
16:00-19:00對選手提交的結(jié)果文件進(jìn)行評分
-4-
(二)競賽流程
六、競賽命題
技能大賽的命題工作由賽項(xiàng)執(zhí)委會(huì)指定的命題專家組負(fù)責(zé)。
本賽項(xiàng)制定樣題3套,并與本規(guī)程同步發(fā)布。具體詳見附件1。
正式賽卷在比賽前一天由裁判長在監(jiān)督組的監(jiān)督下從命題專家組負(fù)責(zé)的命題庫中隨
機(jī)抽取一套樣題并進(jìn)行微調(diào)整,在保密室中打印并存放。保密室全程監(jiān)控,并安排專人
看守。比賽前1小時(shí)由兩名裁判及比賽監(jiān)督員將賽題從保密室運(yùn)往賽場。
七、競賽規(guī)則
1.學(xué)生須為高等職業(yè)學(xué)校專科、高等職業(yè)學(xué)校本科、技師學(xué)院全日制在籍學(xué)生,
五年制高職四、五年級學(xué)生也可報(bào)名參賽;參賽教師須為校內(nèi)專任教師,并提供近半年
的社?;蚣{稅證明。凡在往屆全省職業(yè)院校技能大賽中獲一等獎(jiǎng)的學(xué)生,不能再參加同
一項(xiàng)目同一組別的比賽。參賽選手由省教育廳、省人力資源社會(huì)保障廳負(fù)責(zé)確認(rèn)。
2.競賽前1日安排各參賽隊(duì)領(lǐng)隊(duì)、參賽選手熟悉賽場。
3.嚴(yán)禁參賽選手、賽項(xiàng)裁判、工作人員私自攜帶通信、攝錄設(shè)備進(jìn)入比賽場地。
4.參賽選手所需的硬件、軟件和輔助工具統(tǒng)一提供,參賽隊(duì)不得使用自帶的任何
-5-
有存儲(chǔ)功能的設(shè)備,如硬盤、光盤、U盤、手機(jī)、平板電腦等。
5.所有參賽選手都必須攜帶參賽證件進(jìn)行檢錄。
6.參賽隊(duì)在賽前領(lǐng)取比賽任務(wù)并進(jìn)入比賽工位,比賽正式開始后方可進(jìn)行相關(guān)操
作。
7.比賽過程中,選手須嚴(yán)格遵守操作規(guī)程,確保人身及設(shè)備安全,并接受裁判員
的監(jiān)督和指示。因選手原因造成設(shè)備故障或損壞而無法繼續(xù)比賽的,裁判長有權(quán)決定中
止該隊(duì)比賽;非因選手個(gè)人原因造成設(shè)備故障的,由裁判長視具體情況作出裁決。
8.競賽開始時(shí)統(tǒng)一發(fā)放本階段賽卷,競賽結(jié)束后,參賽選手要確認(rèn)已成功提交競
賽要求的配置文件和文檔,裁判員與參賽選手一起簽字確認(rèn),參賽選手在確認(rèn)后不得再
進(jìn)行任何操作。
9.賽項(xiàng)成績解密后,在指定地點(diǎn),以紙質(zhì)形式向全體參賽隊(duì)進(jìn)行公布,成績無異
議后,在閉賽式上予以宣布。
八、競賽環(huán)境
1.競賽場地。競賽場地分為:競賽現(xiàn)場、裁判休息區(qū)、領(lǐng)隊(duì)休息區(qū)、服務(wù)區(qū)。其
中,競賽現(xiàn)場又劃分為:檢錄區(qū)、場內(nèi)競賽區(qū)、技術(shù)支持區(qū)。
2.競賽設(shè)備。場內(nèi)競賽區(qū)按照參賽隊(duì)數(shù)量準(zhǔn)備比賽所需的軟硬件平臺,為參賽隊(duì)
提供統(tǒng)一競賽設(shè)備和備用設(shè)備。選手無需自帶任何工具及附件。
3.競賽工位。競賽現(xiàn)場各個(gè)工作區(qū)配備單相220V/3A以上交流電源。每個(gè)比賽工
位上標(biāo)明編號。
4.技術(shù)支持區(qū)。為技術(shù)支持人員提供固定工位、電源保障。
5.服務(wù)區(qū)。提供醫(yī)療等服務(wù)保障。
6.競賽場地應(yīng)符合消防安全規(guī)定,現(xiàn)場消防器材和消防栓合格有效,應(yīng)急照明設(shè)
施狀態(tài)合格,賽場明顯位置張貼緊急疏散圖,賽場出入口專人負(fù)責(zé)。現(xiàn)場臨時(shí)用電滿足
《施工現(xiàn)場臨時(shí)用電安全技術(shù)規(guī)范》JGJ46-2005的要求。競賽現(xiàn)場通風(fēng)良好、照明需符
合教室采光規(guī)范。
九、技術(shù)規(guī)范
本賽項(xiàng)的技術(shù)規(guī)范將包括:相關(guān)專業(yè)的教育教學(xué)要求、行業(yè)、職業(yè)技術(shù)標(biāo)準(zhǔn),以及
-6-
根據(jù)高職目錄修訂后的大數(shù)據(jù)應(yīng)用開發(fā)相關(guān)專業(yè)人才培養(yǎng)標(biāo)準(zhǔn)和規(guī)范,適時(shí)地修訂本賽
項(xiàng)遵循的技術(shù)規(guī)范。
(一)基礎(chǔ)標(biāo)準(zhǔn)
標(biāo)準(zhǔn)內(nèi)容
GB/T11457-2006信息技術(shù)、軟件工程術(shù)語
GB8566-88計(jì)算機(jī)軟件開發(fā)規(guī)范
GB/T12991-2008信息技術(shù)數(shù)據(jù)庫語言SQL第1部分:框架
GB/T21025-2007XML使用指南
GB/T20009-2005信息安全技術(shù)數(shù)據(jù)庫管理系統(tǒng)安全評估準(zhǔn)則已發(fā)布
GB/T20273-2006信息安全技術(shù)數(shù)據(jù)庫管理系統(tǒng)安全技術(shù)要求
20100383-T-469信息技術(shù)安全技術(shù)信息安全管理體系實(shí)施指南
(二)軟件開發(fā)標(biāo)準(zhǔn)
標(biāo)準(zhǔn)內(nèi)容
GB/T8566-2001信息技術(shù)軟件生存周期過程
GB/T15853-1995軟件支持環(huán)境
GB/T14079-1993軟件維護(hù)指南
GB/T17544-1998信息技術(shù)軟件包質(zhì)量要求和測試
十、技術(shù)平臺
(一)競賽設(shè)備
設(shè)備類別數(shù)量設(shè)備用途基本配置
性能相當(dāng)于i5處理器,
每支參賽隊(duì)伍1臺。64GB以上內(nèi)存,1TB以上
構(gòu)建大數(shù)據(jù)平臺集
競賽服務(wù)器根據(jù)參賽隊(duì)數(shù)量,配硬盤,網(wǎng)卡(千兆),顯
群
備10%的備份機(jī)器。示器要求1024*768以
上。
性能相當(dāng)于i5處理器,
每支參賽隊(duì)伍4臺。
16GB以上內(nèi)存,1TB以上
競賽客戶機(jī)根據(jù)參賽團(tuán)隊(duì)數(shù)量,競賽選手比賽使用
硬盤,顯示器要求
配備10%的備份機(jī)器。
1024*768以上。
(二)軟件平臺
由2023年全國職業(yè)院校技能大賽(高職組)大數(shù)據(jù)應(yīng)用開發(fā)賽項(xiàng)合作企業(yè)——北
-7-
京四合天地科技有限公司提供四合天地大數(shù)據(jù)實(shí)訓(xùn)管理系統(tǒng)。
系統(tǒng)基于自研Docker容器編排管理引擎,運(yùn)用云原生和容器技術(shù)構(gòu)建訓(xùn)練環(huán)境,
支持快速創(chuàng)建訓(xùn)練環(huán)境。實(shí)現(xiàn)每個(gè)學(xué)生環(huán)境互相隔離、訓(xùn)練過程互不干擾,教師可以一
鍵操作即可創(chuàng)建一套全新的環(huán)境供學(xué)生進(jìn)行備賽訓(xùn)練,方便學(xué)生高效的完成訓(xùn)練操作的
同時(shí),大幅降低了教師組織訓(xùn)練的難度和成本。具體功能如下:
1、本系統(tǒng)運(yùn)行在開源操作系統(tǒng)Linux平臺下,應(yīng)使用瀏覽器/服務(wù)器模式提供服務(wù),
用戶使用最新版本的谷歌瀏覽器訪問系統(tǒng)。
2、系統(tǒng)支持包括管理員、教師、學(xué)生三種角色。管理員負(fù)責(zé)系統(tǒng)配置維護(hù)、鏡像
環(huán)境維護(hù)等工作;教師負(fù)責(zé)小組維護(hù)、訓(xùn)練任務(wù)維護(hù)等工作;學(xué)生參與并完成訓(xùn)練。
管理員功能:
3、專業(yè)管理:管理員可自主創(chuàng)建專業(yè),編輯專業(yè)相關(guān)內(nèi)容,如:新增(編輯)專
業(yè),刪除專業(yè)。
4、班級管理:管理員可自主創(chuàng)建班級,編輯班級相關(guān)內(nèi)容,如:新增(編輯)班
級,刪除班級。
5、用戶管理:管理員可自主創(chuàng)建用戶,編輯用戶相關(guān)內(nèi)容,如:新增(編輯)用
戶的賬號、姓名、手機(jī)號、角色、狀態(tài)、密碼等,同時(shí)也可對用戶進(jìn)行刪除操作。
6、鏡像環(huán)境:管理員可維護(hù)鏡像環(huán)境,可通過網(wǎng)頁上傳Dockerfile文件來完成鏡像
環(huán)境的創(chuàng)建,也可從本地鏡像倉庫進(jìn)行鏡像同步,并可對鏡像環(huán)境執(zhí)行編輯等操作。
7、環(huán)境配置:管理員依據(jù)鏡像環(huán)境的具體應(yīng)用場景,通過添加環(huán)境配置來完善該
鏡像所需的CPU、內(nèi)存、磁盤空間等配置信息,并可對環(huán)境配置信息進(jìn)行編輯和刪除。
8、服務(wù)器配置:管理員可配置計(jì)算節(jié)點(diǎn)服務(wù)器相關(guān)信息,包括新增服務(wù)器名稱、
服務(wù)器IP地址、CPU核數(shù)、內(nèi)存大小、磁盤空間,也可對服務(wù)器配置信息進(jìn)行編輯和
刪除。
9、訓(xùn)練資源監(jiān)控:管理員可監(jiān)控正在進(jìn)行的訓(xùn)練資源,監(jiān)控正在進(jìn)行的訓(xùn)練狀態(tài)、
使用人數(shù)、占用資源等信息,并可對相關(guān)的環(huán)境執(zhí)行啟動(dòng)、掛起等操作。
10、角色管理:管理員可自主創(chuàng)建角色,編輯角色相關(guān)內(nèi)容,如:添加(編輯)角
色名稱、角色備注(描述)、狀態(tài)、權(quán)限分配(權(quán)限分配依據(jù)角色名稱分配相應(yīng)權(quán)限)
-8-
等,同時(shí)也可對角色進(jìn)行刪除操作。
11、日志管理:管理員可以查看當(dāng)前系統(tǒng)操作日志和登錄日志。操作日志主要記錄
操作的賬戶、操作模塊、時(shí)間、IP等信息。登錄日志主要記錄登錄的用戶、IP地址、登
錄狀態(tài)等信息。
12、系統(tǒng)設(shè)置:可自定義系統(tǒng)名稱,如瀏覽器標(biāo)題、瀏覽器LOGO、登錄頁標(biāo)題、
首頁標(biāo)題、首頁LOGO等。
教師功能:
13、訓(xùn)練模塊:教師可自主創(chuàng)建訓(xùn)練模塊,編輯相應(yīng)的訓(xùn)練內(nèi)容。內(nèi)容包括訓(xùn)練的
名稱、介紹、使用狀態(tài)、該訓(xùn)練指定的一個(gè)或多個(gè)實(shí)訓(xùn)環(huán)境、可供下載的資源包、任務(wù)
設(shè)置的具體形式包括上傳任務(wù)說明、任務(wù)參考等。
14、小組管理:教師可自主創(chuàng)建小組,并對小組進(jìn)行編輯、啟用、禁用等操作。已
啟用的小組可以進(jìn)行添加成員、設(shè)置任務(wù)參考操作。在編輯具體小組時(shí),通過選擇該小
組所包含的成員,內(nèi)容上選擇所用到的訓(xùn)練模塊,完成小組的整體設(shè)置。
15、訓(xùn)練監(jiān)控:教師可查看各小組的訓(xùn)練情況,選擇啟動(dòng)、掛起、繼續(xù)或結(jié)束訓(xùn)練
環(huán)境。通過“進(jìn)入”按鈕,可進(jìn)入小組的某個(gè)環(huán)境進(jìn)行指導(dǎo)操作,也可對小組的某個(gè)訓(xùn)
練環(huán)境執(zhí)行啟動(dòng)、停止、重置或重啟。
16、訓(xùn)練報(bào)告:對已啟用小組,記錄每個(gè)小組中,學(xué)生具體的訓(xùn)練情況,查閱學(xué)生
提交上傳的報(bào)告、附件等信息,編輯每個(gè)學(xué)生對應(yīng)的訓(xùn)練成績。
17、個(gè)人實(shí)驗(yàn)環(huán)境:教師可在個(gè)人實(shí)驗(yàn)環(huán)境中選擇鏡像環(huán)境進(jìn)行個(gè)人實(shí)驗(yàn)或練習(xí)等
操作。
18、消息通知:當(dāng)學(xué)生完成訓(xùn)練報(bào)告的提交或附件上傳時(shí),教師會(huì)收到消息通知并
可通過消息通知直接找到訓(xùn)練報(bào)告或附件。
19、個(gè)人資料:教師可修改個(gè)人頭像及密碼。
學(xué)生功能:
20、學(xué)生登錄平臺,可進(jìn)入對應(yīng)的訓(xùn)練模塊,在線查看任務(wù)說明、任務(wù)參考,并進(jìn)
入訓(xùn)練環(huán)境進(jìn)行操作,可在瀏覽器中訪問自己的訓(xùn)練環(huán)境,也可通過SSH工具直連相
應(yīng)訓(xùn)練環(huán)境容器的ip地址進(jìn)入該環(huán)境,支持通過環(huán)境的ip地址訪問環(huán)境中部署的相應(yīng)
-9-
服務(wù),也可對環(huán)境進(jìn)行重置、重啟、上傳、下載等操作,同時(shí)學(xué)生可以下載相關(guān)的資源
文件,提交個(gè)人的訓(xùn)練報(bào)告,上傳相關(guān)附件完成訓(xùn)練。
21、個(gè)人中心:學(xué)生可修改個(gè)人頭像及密碼,也可查看自己的訓(xùn)練記錄。
(三)軟件環(huán)境
設(shè)備類型軟件類別軟件名稱、版本號
競賽環(huán)境大數(shù)據(jù)集群操
CentOS7、Docker-CE20.10
作系統(tǒng)
Hadoop3.1.3
Hive3.1.2
HBase2.2.3
Spark3.1.1
Kafka2.4.1
競賽服務(wù)器Redis6.2.6
大數(shù)據(jù)平臺組件
Flume1.9.0
Maxwell1.29.0
Flink1.14.0
ClickHouse21.9.4
JDK1.8
MySQL5.7
PC操作系統(tǒng)Ubuntu18.0464位
瀏覽器Chrome
Scala2.12
開發(fā)語言
Java8
開發(fā)客戶端IDEA2022
開發(fā)工具(CommunityEdition)
VisualStudioCode1.69
數(shù)據(jù)庫連接工具M(jìn)ySQLWorkbench
SSH工具Asbru-cm或UbuntuSSH客戶端
-10-
API測試工具PostmanAPIPlatform
Vue.js3.0
數(shù)據(jù)可視化組件
ECharts5.1
文檔編輯器WPSLinux版
輸入法搜狗拼音輸入法Linux版
十一、成績評定
(一)獎(jiǎng)項(xiàng)設(shè)定
競賽設(shè)參賽選手團(tuán)體獎(jiǎng)。獎(jiǎng)項(xiàng)設(shè)置按參賽隊(duì)數(shù)量確定,其中一等獎(jiǎng)10%,二等獎(jiǎng)20%,
三等獎(jiǎng)30%。
(二)評分標(biāo)準(zhǔn)制定原則
競賽評分制定嚴(yán)格遵守公平、公正的原則,大數(shù)據(jù)應(yīng)用開發(fā)賽項(xiàng)評分采用賽項(xiàng)結(jié)果
評分方法,始終貫徹落實(shí)競賽一貫堅(jiān)持的公平、公正和公開原則。
參與競賽成績管理的組織機(jī)構(gòu)包括裁判組、監(jiān)督和仲裁組等。裁判組實(shí)行“裁判長
負(fù)責(zé)制”,設(shè)裁判長1名、加密裁判1名、現(xiàn)場裁判2名、評分裁判3名,共4名裁判。
裁判員根據(jù)競賽工作需要分為檢錄裁判、加密裁判、現(xiàn)場裁判和評分裁判。檢錄裁
判負(fù)責(zé)對參賽隊(duì)伍(選手)進(jìn)行點(diǎn)名登記、身份核對等工作;加密裁判負(fù)責(zé)組織參賽隊(duì)
伍(選手)抽簽并對參賽隊(duì)伍(選手)的信息進(jìn)行加密、解密;現(xiàn)場裁判按規(guī)定做好賽
場記錄,維護(hù)賽場紀(jì)律;評分裁判負(fù)責(zé)對參賽隊(duì)伍(選手)的技能展示、操作規(guī)范和競
賽成果等按賽項(xiàng)評分標(biāo)準(zhǔn)進(jìn)行評定。
監(jiān)督組對裁判組的工作進(jìn)行全程監(jiān)督,并對競賽成績抽檢復(fù)核。
仲裁組負(fù)責(zé)接收由參賽隊(duì)領(lǐng)隊(duì)提出的對裁判結(jié)果的申訴,組織復(fù)議并及時(shí)反饋復(fù)議
結(jié)果。
(三)評分方法
選手在完成任務(wù)之后,將任務(wù)完成結(jié)果拷貝至U盤中,由參賽選手隊(duì)長簽字確認(rèn)(簽
工位號)。
評分采取分步得分、累計(jì)總分的計(jì)分方式。
不計(jì)參賽選手的個(gè)人得分,只記錄團(tuán)體得分。
-11-
參賽隊(duì)提交比賽任務(wù)結(jié)束請求或者在比賽時(shí)間終止后,不得再進(jìn)行任何操作。否則,
視為比賽作弊,給參賽隊(duì)記警告一次。
在競賽過程中,選手如有不服從裁判判決、擾亂賽場秩序、舞弊等不文明行為,由
裁判長按照規(guī)定扣減相應(yīng)分?jǐn)?shù)并且給予警告,情節(jié)嚴(yán)重的取消競賽資格,競賽成績記0
分,隊(duì)員退出比賽現(xiàn)場。
(四)評分標(biāo)準(zhǔn)
分值
任務(wù)考查點(diǎn)描述評分標(biāo)準(zhǔn)
(分)
主要評分點(diǎn)包括Hadoop
完全分布式安裝配置、
大數(shù)據(jù)
大數(shù)據(jù)在指定的宿主機(jī)上,基于DockerSpark安裝配置、Flink
相關(guān)平
平臺環(huán)環(huán)境完成Hadoop完全分布式、安裝配置、Hive安裝配
臺組件10
境搭建Spark、Flink、Hive、Kafka、Flume、置、Kafka安裝配置、
安裝配
(10分)ClickHouse、HBase等的安裝配置。Flume安裝配置、
置
ClickHouse安裝配置、
HBase安裝配置。
離線數(shù)按照要求基于Scala語言完成特定主要評分點(diǎn)包括Spark
數(shù)據(jù)采據(jù)采函數(shù)的編寫,使用Spark完成離線數(shù)據(jù)讀取、數(shù)據(jù)存儲(chǔ)、
集集、實(shí)數(shù)據(jù)采集;按照要求使用Linux命Flume數(shù)據(jù)采集、15
(15分)時(shí)數(shù)據(jù)令,利用Flume、Maxwell、KafkaMaxwell數(shù)據(jù)采集、
采集等工具完成實(shí)時(shí)數(shù)據(jù)采集。Kafka等操作。
使用Java語言基于Flink完成
實(shí)時(shí)數(shù)Kafka中的數(shù)據(jù)消費(fèi),將數(shù)據(jù)分發(fā)主要評分點(diǎn)包括Flink
實(shí)時(shí)數(shù)
據(jù)處理至Kafka的dwd層中,并在HBase數(shù)據(jù)處理、數(shù)據(jù)指標(biāo)計(jì)
據(jù)處理中進(jìn)行備份同時(shí)建立Hive外表,基算、HBase、Hive、25
計(jì)算代
(25分)于Flink完成相關(guān)的數(shù)據(jù)指標(biāo)計(jì)算ClickHouse、Redis等相
碼編寫并將計(jì)算結(jié)果存入Redis、關(guān)操作。
ClickHouse中。
離線數(shù)使用Scala語言基于Spark完成離主要評分點(diǎn)包括基于
離線數(shù)
據(jù)處理線數(shù)據(jù)清洗、處理、計(jì)算,包括數(shù)Spark的數(shù)據(jù)清洗、數(shù)據(jù)
據(jù)處理據(jù)的合并、去重、排序、數(shù)據(jù)類型指標(biāo)計(jì)算、HBase、Hive、20
計(jì)算代
(20分)轉(zhuǎn)換等并將計(jì)算結(jié)果存入MySQL、ClickHouse、MySQL等相
碼編寫HBase、ClickHouse中。關(guān)操作。
-12-
數(shù)據(jù)可數(shù)據(jù)可編寫前端Web界面,調(diào)用后臺數(shù)據(jù)主要評分點(diǎn)包括可視化
視化視化代接口,使用Vue.js、ECharts完成前端代碼開發(fā)、前端展15
(15分)碼編寫數(shù)據(jù)可視化。示。
綜合分主要評分點(diǎn)包括能夠按
文檔編根據(jù)項(xiàng)目要求,完成綜合分析報(bào)告
析報(bào)告照賽項(xiàng)要求進(jìn)行綜合分10
寫編寫。
(10分)析。
職業(yè)素主要評分點(diǎn)包括:競賽
職業(yè)素團(tuán)隊(duì)分工明確合理、操作規(guī)范、文
養(yǎng)團(tuán)隊(duì)分工明確合理、操5
養(yǎng)明競賽。
(5分)作規(guī)范、文明競賽。
(五)成績審核方法
競賽結(jié)束后,由裁判長向裁判員核實(shí)競賽過程中有無異常。如無異常,成績單由裁
判長簽字確認(rèn)并封存直至公布成績時(shí)開啟。
如有異常,在裁判長主持下,由專家組成員、裁判員、仲裁員和監(jiān)督員共同處理。
(六)成績公布方法
競賽成績經(jīng)復(fù)核無誤后,經(jīng)裁判長、監(jiān)督人員審核簽字后,以賽項(xiàng)組委會(huì)最終公布
結(jié)果為準(zhǔn)
競賽結(jié)束后,如參賽隊(duì)對比賽成績有異議,提出異議申訴或仲裁,可按照相關(guān)規(guī)定
進(jìn)行申訴和仲裁,按照仲裁結(jié)果公布競賽成績。
十二、賽場預(yù)案
賽場備用工位:賽場提供占總參賽隊(duì)伍10%的備用工位。
競賽系統(tǒng)可靠性:競賽系統(tǒng)使用的服務(wù)器應(yīng)進(jìn)行冗余,數(shù)據(jù)庫、存儲(chǔ)應(yīng)使用高可用
架構(gòu)。提前開始運(yùn)行,經(jīng)過多次壓力測試,由學(xué)校組織的真實(shí)競賽環(huán)境測試。
競賽備用服務(wù)器:現(xiàn)場提供占總參賽隊(duì)伍10%的備用服務(wù)器。
現(xiàn)場應(yīng)急預(yù)案詳情,如下:
(一)服務(wù)器問題預(yù)案
若服務(wù)器在比賽過程中出現(xiàn)卡頓、死機(jī)等情況,參賽選手舉手示意裁判,在裁判與
-13-
技術(shù)支持人員確定情況后,可更換服務(wù)器。更換服務(wù)器的等待時(shí)間,可在比賽結(jié)束后延
時(shí)。
(二)交換機(jī)問題預(yù)案
若交換機(jī)在比賽過程中出現(xiàn)傳輸速度慢或無故中斷等情況,參賽選手舉手示意裁判,
在裁判與技術(shù)支持人員確定情況后,可更換交換機(jī)。更換交換機(jī)的等待時(shí)間,可在比賽
結(jié)束后延時(shí)。
(三)PC機(jī)問題預(yù)案
若PC機(jī)在比賽過程中出現(xiàn)死機(jī)、藍(lán)屏等現(xiàn)象(重啟后無法解決),參賽選手舉手
示意裁判,在裁判與技術(shù)支持人員確定情況后,可更換備用工位或更換PC機(jī)進(jìn)行答題。
十三、申訴與仲裁
(一)申訴
1.參賽隊(duì)對不符合競賽規(guī)定的設(shè)備、工具、軟件,有失公正的評判、獎(jiǎng)勵(lì),以及
對工作人員的違規(guī)行為等,均可提出申訴。
2.申訴應(yīng)在競賽結(jié)束后2小時(shí)內(nèi)提出,超過時(shí)效將不予受理。申訴時(shí),應(yīng)按照規(guī)
定的程序由參賽隊(duì)領(lǐng)隊(duì)向相應(yīng)賽項(xiàng)裁判委員會(huì)遞交書面申訴報(bào)告。報(bào)告應(yīng)對申訴事件的
現(xiàn)象、發(fā)生的時(shí)間、涉及到的人員、申訴依據(jù)與理由等進(jìn)行充分、實(shí)事求是的敘述。事
實(shí)依據(jù)不充分、僅憑主觀臆斷的申訴將不予受理。申訴報(bào)告須有申訴的參賽選手、領(lǐng)隊(duì)
簽名。
3.賽項(xiàng)裁判委員會(huì)收到申訴報(bào)告后,應(yīng)根據(jù)申訴事由進(jìn)行審查,2小時(shí)內(nèi)書面通知
申訴方,告知申訴處理結(jié)果。如受理申訴,要通知申訴方舉辦聽證會(huì)的時(shí)間和地點(diǎn);如
不受理申訴,要說明理由。
4.申訴人不得無故拒不接受處理結(jié)果,不允許采取過激行為刁難、攻擊工作人員,
否則視為放棄申訴。申訴人不滿意賽項(xiàng)裁委會(huì)的處理結(jié)果的,可向賽項(xiàng)仲裁工作組提出
復(fù)議申請。
(二)仲裁
-14-
1.2024年甘肅省職業(yè)院校技能大賽(高職組)“大數(shù)據(jù)應(yīng)用開發(fā)”賽項(xiàng)裁判委員
會(huì)設(shè)仲裁工作組,負(fù)責(zé)受理競賽中出現(xiàn)的申訴復(fù)議并進(jìn)行仲裁,以保證競賽的順利進(jìn)行
和競賽結(jié)果公平、公正。
2.仲裁工作組的裁決為最終裁決,參賽隊(duì)不得因?qū)χ俨锰幚硪庖姴环V贡荣?/p>
或滋事,否則按棄權(quán)處理。
十四、競賽觀摩
(一)組織安排
在競賽開始1小時(shí)之后,由承辦校組織并派人帶領(lǐng)媒體、專家、企業(yè)代表、院校師
生等進(jìn)入賽場外的開放式觀摩區(qū),按照指定路線進(jìn)行觀摩。
(二)紀(jì)律要求
為保證大賽順利進(jìn)行,在觀摩期間應(yīng)遵循以下紀(jì)律要求:
1.除與競賽直接有關(guān)工作人員、裁判員、參賽選手外,其余人員均為觀摩觀眾。
2.不得違反職業(yè)院校技能大賽規(guī)定的各項(xiàng)紀(jì)律。
3.觀摩人員需經(jīng)批準(zhǔn),佩戴觀摩證件,遵循觀摩區(qū)的工作人員指揮。
4.文明觀摩,保持觀摩區(qū)清潔,不得大聲喧嘩,杜絕各種違反觀摩秩序的不文明行
為。
十五、競賽須知
(一)參賽隊(duì)須知
1.參賽隊(duì)名稱:統(tǒng)一使用規(guī)定的學(xué)校代表隊(duì)名稱,不使用其他組織、團(tuán)體的名稱;
2.參賽隊(duì)組成:每支參賽隊(duì)由4名參賽選手組成,其中參賽學(xué)生須為同校在籍學(xué)
生,參賽教師須為校內(nèi)專任教師。不接受跨校組隊(duì),同一學(xué)校的報(bào)名參賽隊(duì)伍不超過3
支;
3.各參賽院校應(yīng)指定1名負(fù)責(zé)人任賽項(xiàng)領(lǐng)隊(duì),全權(quán)負(fù)責(zé)該校參賽事務(wù)的組織、協(xié)
調(diào)和領(lǐng)導(dǎo)工作。
4.參賽選手在報(bào)名獲得確認(rèn)后,原則上不再更換。如在籌備過程中,參賽選手因
-15-
故不能參賽,須由其所在學(xué)校供職部門于賽項(xiàng)開賽前10個(gè)工作日之前出具書面說明,
經(jīng)賽項(xiàng)執(zhí)委會(huì)辦公室核實(shí)后予以更換。允許隊(duì)員缺席比賽。
5.參賽隊(duì)按照賽項(xiàng)競賽規(guī)程安排,憑賽項(xiàng)執(zhí)委會(huì)頒發(fā)的參賽證和有效身份證件參
加比賽及相關(guān)活動(dòng)。
6.賽項(xiàng)執(zhí)委會(huì)統(tǒng)一安排各參賽隊(duì)在比賽前一天進(jìn)入賽場熟悉環(huán)境和設(shè)施情況。
7.參賽隊(duì)選手和領(lǐng)隊(duì)要有良好的職業(yè)道德,嚴(yán)格遵守比賽規(guī)則和比賽紀(jì)律,服從
裁判,尊重裁判和賽場工作人員,自覺維護(hù)賽場秩序。
8.領(lǐng)隊(duì)?wèi)?yīng)負(fù)責(zé)賽事活動(dòng)期間本隊(duì)所有選手的人身及財(cái)產(chǎn)安全,如發(fā)現(xiàn)意外事故,
應(yīng)及時(shí)向賽項(xiàng)執(zhí)委會(huì)報(bào)告。
9.各學(xué)校組織代表隊(duì)時(shí),須為參賽選手購買競賽期間的人身意外傷害保險(xiǎn)。
(二)領(lǐng)隊(duì)須知
1.嚴(yán)格遵守賽場的各項(xiàng)規(guī)定,服從裁判,文明競賽。如發(fā)現(xiàn)弄虛作假者,取消參
賽資格,名次無效。
2.領(lǐng)隊(duì)務(wù)必帶好有效身份證件,在活動(dòng)過程中佩戴“領(lǐng)隊(duì)證”參加競賽相關(guān)活動(dòng)。
3.各代表隊(duì)領(lǐng)隊(duì)要堅(jiān)決執(zhí)行競賽的各項(xiàng)規(guī)定,加強(qiáng)對參賽人員的管理,做好賽前
準(zhǔn)備工作,督促選手帶好證件等競賽相關(guān)材料。
4.在比賽期間要嚴(yán)格遵守比賽規(guī)則,不得私自接觸裁判人員。
5.競賽過程中,未經(jīng)裁判許可,領(lǐng)隊(duì)及其他人員一律不得進(jìn)入競賽現(xiàn)場。
6.如對競賽過程有疑議,由領(lǐng)隊(duì)負(fù)責(zé)以書面形式向賽項(xiàng)仲裁委員會(huì)反映,但不得
影響競賽進(jìn)行。
7.對申訴的仲裁結(jié)果,領(lǐng)隊(duì)要帶頭服從和執(zhí)行,并做好選手工作。參賽選手不得
因申訴或?qū)μ幚硪庖姴环V垢傎?,否則以棄權(quán)
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 2025企業(yè)基本建設(shè)借款合同樣式
- 跨界藝術(shù)融合表演行業(yè)跨境出海戰(zhàn)略研究報(bào)告
- 企業(yè)財(cái)務(wù)報(bào)表標(biāo)準(zhǔn)化行業(yè)深度調(diào)研及發(fā)展戰(zhàn)略咨詢報(bào)告
- 文化旅游融資擔(dān)保企業(yè)制定與實(shí)施新質(zhì)生產(chǎn)力戰(zhàn)略研究報(bào)告
- 2025年中國流動(dòng)空開箱市場調(diào)查研究報(bào)告
- 外語教師職業(yè)技能提升心得體會(huì)
- 人教版四年級英語單元活動(dòng)計(jì)劃
- 學(xué)前教育班主任家訪工作計(jì)劃
- 居家護(hù)理中壓力性損傷的預(yù)防與管理措施
- 市政工程驗(yàn)收的質(zhì)量控制措施
- 高中數(shù)學(xué)開放題賞析
- 艾滋病患者的溝通難點(diǎn)與技巧課件
- 非工傷人道主義賠償協(xié)議(標(biāo)準(zhǔn)版)
- 中華民族的復(fù)興
- 品質(zhì)部工作計(jì)劃
- 《浙江省工業(yè)建設(shè)項(xiàng)目用地控制指標(biāo)》(修訂)
- 【區(qū)域地理】《日本》【公開課教學(xué)PPT課件】高中地理
- 配對齒輪參數(shù)全程計(jì)算(史上最全最好用的齒輪計(jì)算表格)
- 三年級數(shù)學(xué)下冊《年月日的整理復(fù)習(xí)》
- 賽碼在線考試財(cái)務(wù)題庫
- 旅行社運(yùn)營實(shí)務(wù)電子課件 2.3 辦理旅游交易手續(xù)
評論
0/150
提交評論