國家職業技術技能標準-大數據工程技術人員(2021年版)_第1頁
國家職業技術技能標準-大數據工程技術人員(2021年版)_第2頁
國家職業技術技能標準-大數據工程技術人員(2021年版)_第3頁
國家職業技術技能標準-大數據工程技術人員(2021年版)_第4頁
國家職業技術技能標準-大數據工程技術人員(2021年版)_第5頁
已閱讀5頁,還剩14頁未讀 繼續免費閱讀

下載本文檔

版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領

文檔簡介

國家職業技術技能標準

職業編碼:2-02-10-11

大數據工程技術人員

(2021年版)

中華人民共和國人力資源和社會保障部

中華人民共和國工業和信息化部

說明

為貫徹落實《關于深化人才發展體制機制改革的意見》,推動實施人才強國

戰略,促進專業技術人員提升職業素養、補充新知識新技能,實現人力資源深

度開發,推動經濟社會全面發展,根據《中華人民共和國勞動法》有關規定,

人力資源社會保障部聯合工業和信息化部組織有關專家,制定了《大數據工程

技術人員國家職業技術技能標準》(以下簡稱《標準》)。

一、本《標準》以《人力資源社會保障部辦公廳市場監管總局辦公廳統計

局辦公室關于發布人工智能工程技術人員等職業信息的通知》(人社廳發(2019)

48號)為依據,按照《國家職業技術技能標準編制技術規程》有關要求,堅持

"以職業活動為導向、以專業能力為核心”的指導思想,在充分考慮科技進步、

社會經濟發展和產業結構變化對大數據工程技術人員專業要求的基礎上,以客

觀反映大數據技術發展水平及其對從業人員的專業能力要求為目標,對大數據

工程技術從業人員的專業活動內容進行規范細致描述,明確了各等級專業技術

人員的工作領域、工作內容以及知識水平、專業能力和實踐要求。

二、本《標準》為首次制定,依據有關規定將本職業分為初級、中級、高

級三個等級,包括職業概況、基本要求、工作要求、權重表和附錄等五個方面

內容。

三、本《標準》的編制工作在人力資源社會保障部專業技術人員管理司、

工業和信息化部人事教育司、中國就業培訓技術指導中心的指導下,由工業和

信息化部教育與考試中心具體組織實施。

四、本《標準》主要起草單位有:工業和信息化部教育與考試中心、新大

陸科技集團技術研究院、北京大學、中國電子技術標準化研究院、西安電子科

技大學、杭州數夢工場科技有限公司、騰訊科技(深圳)有限責任公司、新華

三技術有限公司。

五、本標準的開發得到了左仁貴、邵昕、劉鵬、張艮均、張淑平、宋勝利、

李祥林的支持和幫助,在此表示感謝。

七、本《標準》經人力資源社會保障部、工業和信息化部批準,自頒布之

日①起施行。

2021年2月3日,本《標準》以《人力資源社會保障部辦公廳工業和信息化部辦公廳關于頒布智能制造工程技術人

大數據工程技術人員

國家職業技術技能標準

(2021年版)

1.職業概況

1.1職業名稱

大數據工程技術人員

1.2職業編碼

2-02-10-11

1.3職業定義

從事大數據采集、清洗、分析、治理、挖掘等技術研究,并加以利用、管

理、維護和服務的工程技術人員。

1.4專業技術等級

本職業共設三個等級,分別為初級、中級、高級。

初級、中級分為三個職業方向:大數據處理、大數據分析、大數據管理。

高級不分職業方向。

1.5職業環境條件

室內,常溫。

1.6職業能力特征

具有較強的學習能力、計算能力、表達能力及分析、推理和判斷能力。

1.7普通受教育程度

大學專科學歷(或高等職業學校畢業)。

1.8職業培訓要求

1.8.1培訓期限

大數據工程技術人員需按照本《標準》的職業要求參加有關課程培訓,完

成規定學時,取得學時證明。初級128標準學時,中級128標準學時,高級160

標準學時。

員等3個國家職業技術技能標準的通知》(人社廳發(2021)10號)公布。

1.8.2培訓教師

承擔初級、中級理論知識或專業能力培訓任務的人員,應具有相關職業中

級及以上專業技術等級或相關專業中級及以上職稱。

承擔高級理論知識或專業能力培訓任務的人員,應具有相關職業高級專業

技術等級或相關專業高級職稱。

1.8.3培訓場所設備

理論知識培訓在標準教室或線上平臺進行;專業能力培訓在具有相應軟、

硬件條件的培訓場所進行。

1.9專業技術考核要求

1.9.1申報條件

——取得初級培訓學時證明,并具備以下條件之一者,可申報初級專業技

術等級:

(1)取得技術員職稱。

(2)具備相關專業大學本科及以上學歷(含在讀的應屆畢業生)。

(3)具備相關專業大學專科學歷,從事本職業技術工作滿1年。

(4)技工院校畢業生按國家有關規定申報。

——取得中級培訓學時證明,并具備以下條件之一者,可申報中級專業技

術等級:

(1)取得助理工程師職稱后,從事本職業技術工作滿2年。

(2)具備大學本科學歷,或學士學位,或大學專科學歷,取得初級專業技

術等級后,從事本職業技術工作滿3年。

(3)具備碩士學位或第二學士學位,取得初級專業技術等級后,從事本職

業技術工作滿1年。

(4)具備相關專業博士學位。

(5)技工院校畢業生按國家有關規定申報。

一一取得高級培訓學時證明,并具備以下條件之一者,可申報高級專業技

術等級:

(1)取得工程師職稱后,從事本職業技術工作滿3年。

(2)具備碩士學位,或第二學士學位,或大學本科學歷,或學士學位,取

得中級專業技術等級后,從事本職業技術工作滿4年。

(3)具備博士學位,取得中級專業技術等級后,從事本職業技術工作滿1

年。

(4)技工院校畢業生按國家有關規定申報。

1.9.2考核方式

分為理論知識考試以及專業能力考核。理論知識考試、專業能力考核均實

行百分制,成績皆達60分(含)以上者為合格,考核合格者獲得相應專業技術

等級證書。

理論知識考試以閉卷筆試、機考等方式為主,主要考核從業人員從事本職

業應掌握的基本要求和相關知識要求;專業能力考核以開卷實操考試、上機實

踐等方式為主,主要考核從業人員從事本職業應具備的技術水平。

1.9.3監考人員、考評人員與考生配比

理論知識考試中的監考人員與考生配比不低于1:15,且每個考場不少于2

名監考人員;專業能力考核中的考評人員與考生配比不低于1:5,且考評人員為

3人(含)以上單數。

1.9.4考核時間

理論知識考試時間不少于90min,專業能力考核時間不少于150min。

1.9.5考核場所設備

理論知識考試在標準教室進行;專業能力考核在具有相應軟、硬件條件的

考核場所進行。

2.基本要求

2.1職業道德

2.1.1職業道德基本知識

2.1.2職業守則

(1)遵紀守法,愛崗敬業。

(2)精益求精,勇于創新。

(3)愛護設備,安全操作。

(4)遵守規程,執行工藝。

(5)認真嚴謹,忠于職守。

2.2基礎知識

2.2.1基礎理論知識

(1)操作系統知識

(2)計算機網絡知識

(3)編程基礎知識

(4)數據結構與算法知識

(5)數據庫知識

(6)軟件工程知識

(7)云計算知識

(8)大數據知識

2.2.2技術基礎知識

(1)大數據系統環境安裝、配置和調試知識

(2)大數據平臺架構知識

(3)軟件應用開發知識

(4)接口開發與功能模塊設計知識

(5)數據采集與數據預處理知識

(6)數據計算與數據指標知識

(7)常用數據分析與挖掘方法

(8)常用數據報表與可視化技術方法

(9)數據管理知識

(10)數據運營及技術指導知識

2.2.3安全知識

(1)大數據應用、設備與外部服務組件安全管理知識

(2)大數據服務用戶身份鑒別與訪問控制管理相關知識

(3)大數據服務數據活動安全管理知識

(4)大數據服務基礎設施安全管理知識

(5)大數據系統應急響應管理知識

2.2.4其他相關知識

(1)環境保護知識

(2)文明生產知識

(3)勞動保護知識

(4)資料保管保密知識

2.2.5相關法律、法規知識

(1)《中華人民共和國勞動法》相關知識

(2)《中華人民共和國安全生產法》相關知識

(3)《中華人民共和國網絡安全法》相關知識

(4)《關于加強網絡信息保護的決定》相關知識

(5)《關鍵信息基礎設施安全保護條例》相關知識

(6)《網絡安全等級保護條例》相關知識

(7)《數據安全管理辦法》相關知識

(8)《電信和互聯網用戶個人信息保護規定》相關知識

3.工作要求

本標準對初級、中級、高級的專業能力要求和相關知識要求依次遞進,高

級別涵蓋低級別的要求。

3.1初級

大數據處理方向的職業功能包括大數據系統搭建、大數據平臺管理與運維、

大數據技術服務、大數據處理與應用,大數據分析方向的職業功能包括大數據

系統搭建、大數據平臺管理與運維、大數據技術服務、大數據分析與挖掘,大

數據管理方向的職業功能包括大數據平臺管理與運維、大數據技術服務、大數

據管理。

職業功能工作內容專業能力要求相關知識要求

1.1.1能根據施工方案,進行需求溝通并確認設

備參數

1.1.1硬件設備功能知識

1.大數據1.1硬件系統1.1.2能參照施工方案,對大數據機架及大型設

1.1.2服務器組網知識

系統搭建搭建備進行機房空間規劃并部署服務器

1.1.3服務器配置知識

1.1.3能根據組網規劃方案,對各服務器或需聯

通網絡設備進行組網布置

1.1.4能根據現場設施及電力系統,對設備進行

上電測試及點亮測試

1.2.1能根據系統部署方案,安裝集群環境、硬

1.2.1操作系統安裝及操作知識

件環境、虛擬化環境所需的各類系統

1.2.2云計算及虛擬化部署知識

1.2軟件系統1.2.2能根據軟件部署方案使用腳本部署產品或

1.2.3大數據組件安裝知識

部署用原生方法安裝各類大數據功能組件

1.2.4大數據集群配置知識

1.2.3能根據節點連接信息配置大數據集群

1.2.5大數據組件基礎操作知識

1.2.4能根據集群功能對組件進行啟動調試

2.1.1能對現有大數據集群的各類組件進行應用2.1.1應用變更管理知識

變更或版本更迭2.1.2代碼倉庫托管知識

2.1平臺管理

2.1.2能根據上線計劃,按時完成功能上線2.1.3功能持續集成知識

2.1.3能對提交代碼的版本進行管理2.1.4代碼版本控制知識

2.2.1能使用工具對集群的軟硬件運行狀態進行

監控管理

2.2.2能使用工具對大數據集群的各類組件、服

務的運行狀態進行監控管理2.2.1管理平臺操作知識

2.大數據2.2.3能使用工具對作業運行情況和資源占用情2.2.2系統環境監控知識

2.2系統運維

平臺管理況進行監控管理2.2.3常見故障排查知識

與運維2.2.4能根據故障報告,參與故障排查,處理故2.2.4容災備份知識

障問題

2.2.5能根據容災計劃,定期備份和遷移關鍵數

2.3.1能根據權限規范,使用工具配置和管理用

戶權限2.3.1權限管理知識

2.3安全維護2.3.2能針對各類突發的外部攻擊或異常事件進2.3.2常見異常處理知識

行應急處理2.3.3網絡攻防知識

2.3.3能對安全系統進行升級和維護

3.1.1能根據團隊既定計劃,收集市場目標信息

3.1.2能配合銷售團隊制作宣講材料及解決方案

3.1.1大數據行業應用知識

3.1技術咨詢展示材料

3.1.2大數據技術體系知識

3.1.3能配合工程師解決客戶技術咨詢問題并提

3.大數據供參考信息

技術服務3.2.1能根據已有的產品解決方案調整輸出具體

的項目解決方案3.2,1大數據基礎理論知識

3.2解決方案

3.2.2能進行產品演示和講解產品特性3.2.2大數據行業發展知識

設計

3.2.3能根據客戶溝通反饋整理需求文檔3.2.3大數據軟件架構知識

3.2.4能根據客戶需求提供產品咨詢及軟件架構

4.大數據4.1.1能根據業務需求進行在線、離線數據采集4.1.1網絡爬蟲知識

4.1數據采集

處理與應4.1.2能根據調度策略使用框架設置調度作業4.1.2離線數據采集知識

用4.1.3能根據存儲策略進行數據存儲4.1.3實時數據采集知識

4.1.4作業調度知識

4.1.5文件系統數據存儲知識

4.1.6關系型數據庫知識

4.1.7非關系型數據庫知識

4.2.1能根據業務需求對遺漏數據、噪音數據、4.2.1數據清洗知識

不一致數據等進行清洗4.2.2數據ETL知識

4.2數據預處4.2.2能根據業務需求對多源數據進行整合4.2.3數據庫基礎操作知識

理4.2.3能根據業務規則對數據格式進行轉換4.2.4SQL函數知識

4.2.4能根據數據歸一性原則對數據進行單位、4.2.5結構化、半結構化與非

數值規約結構化知識

4.3.1能根據業務需求編寫批量、實時數據計算4.3.1分布式計算知識

作業4.3.2內存計算知識

4.3數據計算

4.3.2能根據數據特征計算數據標簽并進行匯總4.3.3數據結構封裝知識

4.3.3能根據數據指標規則計算關鍵業務指標4.3.4關鍵業務指標知識

4.4.1能根據數據平臺構建聯機事務分析系統并

進行即席查詢

4.4.2能根據檢索引擎創建索引庫并進行數據檢4.4.10LAP系統應用知識

索4.4.2數據檢索知識

4.4數據查詢

4.4.3能使用交互式查詢工具創建數據接口并提4.4.3交互式計算知識

供對外服務接口4.4.4報表制作知識

4.4.4能使用交互式查詢平臺制作報表及展示圖

5.1.1能根據業務需求對遺漏數據、噪音數據、

不一致數據等進行清洗5.1.1數據清洗知識

5.1.2能根據業務需求對多源數據進行整合5.1.2數據ETL知識

5.1數據預處5.1.3能根據業務規則對數據格式進行轉換5.1.3數據庫基礎操作知識

理5.1.4能根據數據歸一性原則對數據進行單位、5.1.4SQL函數知識

5.大數據數值規約5.1.5結構化、半結構化與非

分析與挖5.1.5能根據數據特征及規律,選擇合適方法對結構化知識

掘數據進行采樣

5.2.1能結合業務場景使用工具對數據集進行概

5.2.1描述性統計知識

要、描述性統計分析

5.2.2統計工具使用知識

5.2數據分析5.2.2能在描述結果基礎上,對數據進行特征和

5.2.3線性相關及回歸相關知

規律的分析與推測

5.2.3能結合業務場景編寫數據統計報告

5.3.1能評估挖掘需求并使用工具對數據進行特

征工程處理

5.3.2能調用常規模型進行模型訓練5.3.1特征工程知識

5.3數據挖

5.3.3能根據合適評價指標對模型進行驗證和調5.3.2機器學習基礎知識

參5.3.3數據挖掘類庫應用知識

5.3.4能根據合適評價指標對模型進行測試并輸

出最終模型的性能評估分數

5.4.1能選擇關鍵指標抽取數據并進行圖表展示

5.4.1BI工具使用知識

5.4.2能使用可視化組件庫進行可視化頁面開發

5.4數據可視5.4.2前端頁面開發知識

并配置交互模式

化5.4.3可視化平臺配置及使用

5.4.3能根據產品反饋對可視化頁面及圖表進行

知識

調整和美化

6.1.1能對大數據全生命周期進行監控,定義、

管理元數據,并提供訪問元數據接口服務

6.1.1數據標準知識

6.1.2能對數據質量進行評估及有效管控,校正

6.1.2數據血緣知識

6.1數據管理異常數據和缺失數據

6.1.3數據質量知識

6.1.3能根據安全審計要求,對數據活動的主

6.大數據6.1.4數據審計知識

題、操作及對象等數據相關屬性進行審核,確保

管理

數據活動過程和相關操作符合安全要求

6.2.1能夠編寫或者受理評估申請

6.2數據管理6.2.2能依據DCMM規則和組織需求確定評估范6.2.1數據管理能力成熟度評

評估圍估模型知識

6.2.3能協助企業實施DCMM成熟度自評

3.2中級

大數據處理方向的職業功能包括大數據應用開發、大數據系統搭建、大數

據平臺管理與運維、大數據技術服務、大數據處理與應用,大數據分析方向的

職業功能包括大數據應用開發、大數據系統搭建、大數據平臺管理與運維、大

數據技術服務、大數據分析與挖掘,大數據管理方向的職業功能包括大數據平

臺管理與運維、大數據技術服務、大數據管理。

職業功能工作內容專業能力要求相關知識要求

1.1.1能根據系統所使用的組件接口,開發相應

的數據訪問層業務代碼

1.1.1大數據組件應用程序接

1.1.2能根據大數據存儲系統結構,設計對接業

L大數據1.I應用服務口知識

務庫表結構

應用開發開發1.L2模型層接口開發知識

1.1.3能根據產品業務需求,開發相應數據或計

LL3服務層接口開發知識

算接口

1.1.4能根據流程圖梳理代碼邏輯,優化接口及

功能模塊

1.2.1能根據測試用例,對系統進行接口、功

能、壓力等黑盒測試并輸出缺陷、測試報告

1.2.1測試技術知識

1.2.2能根據測試用例,對代碼進行邏輯、分支

1.2系統測試1.2.2測試用例設計知識

等白盒測試并輸出缺陷、測試報告

1.2.3測試腳本開發知識

1.2.3能根據相應測試需求,開發自動化測試腳

2.1.1能根據配置需求,規劃及選型硬件配置設

2.1.2能根據機房環境和配置清單,制定工程實

2.1硬件系統施方案2.1.1網絡架構和規劃知識

搭建2.1.3能根據物理硬件特性,制定組網規劃方案2.1.2服務器底層配置知識

2.1.4能根據硬件設備條件,進行底層及驅動配

2.大數據

2.1.5能根據現場施工情況進行故障處理指導

系統搭建

2.2.1能根據應用需求,規劃系統部署方案

2.2.2能根據性能需求,對各運行系統進行配置

和調優2.2.1自動化腳本開發知識

2.2軟件系統

2.2.3能根據軟件部署方案,編寫自動化部署腳2.2.2集群配置知識

部署

本,并完成部署2.2.3集群高可用及容災知識

2.2.4能根據集群組件進行高可用及容災配置

2.2.5能根據集群功能對各組件進行聯通調試

3.1.1能根據集群功能變更需求,制定組件升級

及功能遷移方案

3.1.2能對上線功能進行測試,評估上線可行3.1.1集群技術知識

3.1平臺管理

性,制定上線計劃3.1.2安全訪問控制知識

3.1.3能對大數據平臺中的各個組件使用權限進

行管理

3.2.1能編寫腳本對集群軟硬件、組件與服務、

3.大數據作業運行情況進行監控及管理操作

平臺管理3.2.2能對集群的運行性能、讀寫性能等指標進

3.2.1性能調優知識

與運維行調優

3.2系統運維3.2.2故障排查知識

3.2.3能根據故障報告,排查故障原因,處理故

3.2.3容災管理知識

障問題,并編寫自動化運維腳本

3.2.4能制定容災計劃,對異常服務進行故障轉

3.3.1能根據權限管理規范,編寫日志監控腳本3.3.1安全補丁開發知

3.3安全維護進行權限安全管理識

3.3.2能根據漏洞報告和測試報告開發相應安全3.3.2異常處理知識

補丁3.3.3安全工具產品知識

3.3.3能針對各類突發的外部攻擊或異常事件制

定應急處理方案

3.3.4能對安全系統進行開發、升級和維護工作

4.1.1能收集目標市場信息,分析行業需求

4.1.2能配合銷售團隊進行產品宣講和解決方案

展示4.1.1大數據架構知識

4.1技術咨詢

4.1.3能獨立解決客戶技術咨詢問題并提供技術4.1.2大數據技術趨勢知識

方案

4.1.4能參與項目架構設計并提出參考意見

4.2.1能根據項目需求,在產品功能和技術架構

相關技術文檔基礎上調整輸出項目解決方案

4.大數據4.2.1大數據行業背景知識

4.2解決方案4.2.2能進行產品調研、演示和產品特性講解

技術服務4.2.2市場營銷知識

設計4.2.3能結合業務情況主導或輔助原型項目交付

4.2.3項目管理知識

4.2.4能與業務部門合作挖掘客戶需求并輸出解

決方案

4.3.1能制定技術員、助理工程師對應的人才培

養計劃

4.3指導與培4.3.1大數據技術知識

4.3.2能制作培訓資源

訓4.3.2技術教學知識

4.3.3能使用培訓材料開展對技術員、助理工程

師的專業能力培訓

5.1.1能根據業務需求進行在線、離線數據采

5.1.1信息系統配置知

集,并配置數據緩存及消息隊列

5.1數據采集5.1.2能根據業務需求參與制定數據遷移方案

5.1.2數據監測與遷移知識

5.1.3能制定調度策略

5.1.3數據存儲策略知識

5.1.4能根據業務特性,制定數據存儲策略

5.2.1能根據數據建模規范設計數據模型5.2.1數據倉庫知識

5.2.2能根據存儲系統選型編寫并優化數據模型5.2.2層次建模知識

5.2數據建模

實現腳本5.2.3維度建模知識

5.大數據

5.2.3能根據業務需求對數據模型進行優化5.2.4讀寫性能知識

處理與應

5.3.1能根據數據質量要求制定數據清洗策略及

評估方案

5.3.2能根據業務要求制定數據整合方案

5.3.1信息技術文檔編制知識

5.3數據預處5.3.3能根據業務需求及性能要求設計數據結構

5.3.2數據序列化知識

理及格式調整方案

5.3.3數據壓縮知識

5.3.4能根據歸一性需求制定數據規約方案

5.3.5能根據業務需求編寫自定義數據預處理函

5.4數據計算5.4.1能根據業務需求編寫批量、實時數據計算5.4.1常用算法與數據結構知

作業并優化作業參數識

5.4.2能根據業務規則設計相應標簽庫并進行標5.4.2數據畫像知識

簽管理5.4.3數據傾斜知識

5.4.3能根據業務規則設計相應數據指標計算算

5.5.1大規模并行分析數據庫

5.5.1能使用大規模并行分析數據庫優化聯機事

知識

務分析系統性能

5.5數據查詢5.5.2數據立方知識

5.5.2能使用計算引擎優化數據查詢效率

5.5.3查詢引擎知識

5.5.3能通過計算平臺構建檢索分析系統

5.5.4數據分詞知識

6.1.1能根據數據質量要求制定數據清洗策略及

評估方案

6.1.2能根據業務要求制定數據整合方案

6.1.3能根據業務需求及性能要求

6.1.1數據格式線性變換知識

6.1數據預處設計數據結構及格式調整方案

6.1.2數據清洗需求分析方法

理6.1.4能根據歸一性需求制定數據規約方案

6.1.3數據清洗方案設計知識

6.1.5能根據業務需求編寫自定義數據預處理函

6.1.6能根據數據特征及規律,制定數據采樣方

6.2.1能根據分析需求進行數據準

備6.2.1多元統計分析知識

6.2.2能根據業務需求構建合適的分析模型6.2.2判別分析知識

6.大數據6.2.3能使用合適的算法實現分析模型并對擬合6.2.3聚類分析知識

6.2數據分析

分析與挖結果進行優化6.2.4主成分分析知識

掘6.2.4能分析數據的主成分及因子等相關特征,6.2.5因子分析知識

重構數據內容6.2.6時間序列分析知識

6.2.5能針對數據結果進行歸納并輸出分析報告

6.3.1能評估挖掘需求并選擇合適方法對數據進

行特征工程處理

6.3.2能使用算法庫及工具創建數據挖掘模型并

進行模型訓練6.3.1模型訓練知識

6.3數據挖掘6.3.3能選擇合適評價指標對模型進行驗證及調6.3.2模型測試知識

優6.3.3模型部署知識

6.3.4能選擇合適評價指標對模型進行測試并輸

出最終模型的性能評估報告

6.3.5能使用編程語言對模型進行部署和重構

6.4數據可視6.4.1能根據業務需求及分析結果,制定數據展6.4.1數據可視化設計知識

化示方案6.4.2可視化組件庫開發知識

6.4.2能設計數據可視化實現方式

6.4.3能與產品、運營人員合作美化數據報表及

數據展示頁面

6.4.4能開發并優化數據可視化組件庫

6.4.5能對數據可視化結果進行業務分析并輸出

分析報告

7.1.1能制定數據標準管理制度,通過制度約

束、系統控制等手段,提高平臺治理水平

7.1.2能制定數據質量管理規范,確保平臺數據7.1.1數據標準管理知識

質量符合規范7.1.2數據質量管理知識

7.1數據管理

7.1.3能制定數據生命周期管理規范、數據血緣7.1.3數據生命周期管理知識

關系管理規范7.1.4數據安全知識

7.大數據7.1.4能制定安全審計要求,確保數據活動過程

管理和相關操作符合安全要求

7.2.1能獨立開展DCMM調研訪談,收集、解讀評

估材料

7.2數據管理7.2.2能運用評估表等工具進行DCMM評估7.2.1DCMM評估方法

評估7.2.3能分析企業數據管理現狀,識別數據管理7.2.2數據治理知識

問題及改進項,給出數據管理能力成熟度等級建

3.3高級

職業功能工作內容專業能力要求相關知識要求

1.1.1能根據相關論文、材料實現存儲、計算功

能的分布式并行算法

I.1.2能根據算法構造存儲、讀寫或處理工具的

1.1大數據組海量數據計算引擎1.1.1分布式算法

件技術研發1.1.3能根據應用需求開發基于計算引擎的算1.L2計算引擎開發知識

子'函數或方法

LL4能根據算子、函數或方法,構造隊列或流

1.大數據程,實現計算作業功能

應用開發1.2.1能根據系統架構,規劃各項組件接口規范

1.2.2能根據業務功能,設計接口權限及參數規

1.2.1軟件應用接口開發知識

1.2應用服務1.2.2數據通信知識

1.2.3能對整體系統進行數據打通方案設計

開發1.2.3數據緩存知識

1.2.4能對整體系統進行庫表結構設計及優化

1.2.4消息中間件知識

1.2.5能對整體系統的數據傳輸、緩存、推送設

計方案

1.3系統測試1.3.1能根據產品說明文檔,規劃系統測試計劃1.3.1自動化測試腳本技術

1.3.2能根據測試計劃,協調人力、設備等測試1.3.2測試工具開發方法

資源

1.3.3能根據測試需求,編制測試腳本

L3.4能根據性能需求,進行系統深度性能優化

測試

2.1.1能根據安全施工規范,整體規劃硬件設施

安全方案

2.1.2能根據應用需求,規劃網絡配置實施方案

2.1.1安全施工規范

2.1硬件系統2.1.3能根據產品特性,制定統一施工標準

2.1.2硬件產品知識

搭建2.1.4能根據系統部署方案,與產品開發部門整

2.1.3故障管理知識

體規劃硬件承載、配置及擴展方案

2.1.5能根據不同硬件設施,制定故障處理規范

2.大數據

及流程

系統搭建

2.2.1能根據權限安全規范,制定軟件權限安全

方案

2.2.1權限安全規范

2.2.2能根據系統組件關系,配置組件使用權限

2.2軟件系統2.2.2軟件產品交付知識

2.2.3能根據產品特性,制定部署及升級策略

部署2.2.3聯邦集群知識

2.2.4能根據集群組件特性,制定高可用及容災

2.2.4異地多活知識

策略

2.2.5能根據調試結果

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間,僅對用戶上傳內容的表現方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容,請與我們聯系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論