大數(shù)據(jù)治理平臺(tái)與數(shù)據(jù)服務(wù)平臺(tái)建設(shè)及運(yùn)營(yíng)實(shí)施技術(shù)方案整理制作郎豐利151910/269大數(shù)據(jù)治理平臺(tái)與數(shù)據(jù)服務(wù)平臺(tái)建設(shè)及運(yùn)營(yíng)實(shí)施技術(shù)方案整理制作郎豐利1519目錄1 項(xiàng)目總體概述 51.1 項(xiàng)目背景 51.2 技術(shù)與數(shù)據(jù)現(xiàn)狀 51.3 需求范圍 62 項(xiàng)目解決方案 112.1 建設(shè)類業(yè)務(wù)技術(shù)方案 112.1.1 業(yè)務(wù)需求分析 112.1.2 數(shù)據(jù)資源范圍 122.1.3 數(shù)據(jù)資源層次 122.1.4 整體業(yè)務(wù)架構(gòu) 142.1.5 業(yè)務(wù)功能描述 152.2 服務(wù)類業(yè)務(wù)技術(shù)方案 392.2.1 數(shù)據(jù)采集對(duì)接服務(wù) 392.2.2 數(shù)據(jù)抽取運(yùn)維服務(wù) 552.2.3 作業(yè)調(diào)度運(yùn)維服務(wù) 632.2.4 數(shù)據(jù)資源治理服務(wù) 822.2.5 數(shù)據(jù)質(zhì)量管理服務(wù) 1002.2.6 數(shù)據(jù)融合處理服務(wù) 1112.2.7 數(shù)據(jù)分析應(yīng)用服務(wù) 1152.2.8 數(shù)據(jù)標(biāo)注服務(wù) 1212.2.9 應(yīng)用建模服務(wù) 1252.2.10 數(shù)據(jù)接口開發(fā)服務(wù) 1372.2.11 數(shù)據(jù)開放支撐服務(wù) 1472.2.12 數(shù)據(jù)運(yùn)行監(jiān)管服務(wù) 1562.3 信息安全解決方案 1672.3.1 安全服務(wù)原則 1672.3.2 安全服務(wù)措施 1683 項(xiàng)目管理方案 1753.1 項(xiàng)目管理流程 1753.1.1 項(xiàng)目流程 1753.1.2 項(xiàng)目啟動(dòng)階段 1763.1.3 需求分析階段 1773.1.4 需求規(guī)格階段 1773.1.5 設(shè)計(jì)階段 1783.1.6 開發(fā)階段 1783.1.7 測(cè)試階段 1793.1.8 試運(yùn)行階段 1793.1.9 驗(yàn)收階段 1803.1.10 項(xiàng)目維護(hù)階段 1803.2 項(xiàng)目質(zhì)量控制流程 1803.2.1 立項(xiàng)階段 1803.2.2 開發(fā)階段 1813.2.3 結(jié)項(xiàng)階段 1814 相關(guān)行業(yè)案例 1834.1 某客戶分析平臺(tái) 1834.1.1 項(xiàng)目背景 1834.1.2 業(yè)務(wù)目標(biāo) 1834.1.3 建設(shè)方案 1844.2 產(chǎn)品運(yùn)營(yíng)分析平臺(tái) 1944.2.1 項(xiàng)目背景 1944.2.2 總體設(shè)計(jì) 1954.2.3 建設(shè)方案 1974.3 客戶服務(wù)感知與差距管理平臺(tái) 2174.3.1 項(xiàng)目背景 2174.3.2 建設(shè)目標(biāo) 2184.3.3 總體設(shè)計(jì) 2194.3.4 建設(shè)方案 2205 項(xiàng)目售后服務(wù) 2235.1 服務(wù)響應(yīng)承諾 2235.1.1 服務(wù)響應(yīng)方式和內(nèi)容 2235.1.2 服務(wù)受理時(shí)間 2235.1.3 服務(wù)響應(yīng)時(shí)間 2235.2 技術(shù)服務(wù)承諾 2245.3 售后服務(wù)方案 2255.3.1 服務(wù)規(guī)范體系 2255.3.2 服務(wù)質(zhì)量保障措施 2285.3.3 服務(wù)管理保障措施 232

項(xiàng)目總體概述項(xiàng)目背景招標(biāo)方參與招標(biāo)方客戶單位其牽頭的信息化項(xiàng)目，建立了良好的長(zhǎng)期合作服務(wù)關(guān)系，對(duì)于客戶單位的重點(diǎn)工作及主要方向有著最合理的把控。招標(biāo)方已經(jīng)成功中標(biāo)多個(gè)招標(biāo)方客戶單位的數(shù)據(jù)類項(xiàng)目，需要更好的服務(wù)招標(biāo)方客戶單位的重點(diǎn)核心項(xiàng)目，建立圍繞政務(wù)公共數(shù)據(jù)管理與運(yùn)營(yíng)的制度化、體系化、生態(tài)化的全方位支撐服務(wù)。為此，需要招募長(zhǎng)期、穩(wěn)定且技術(shù)能力領(lǐng)先的數(shù)據(jù)服務(wù)供應(yīng)商來共同完成招標(biāo)方客戶單位的各種業(yè)務(wù)目標(biāo)。技術(shù)與數(shù)據(jù)現(xiàn)狀招標(biāo)方客戶單位的技術(shù)架構(gòu)包含：大數(shù)據(jù)資源平臺(tái)包含統(tǒng)一門戶、數(shù)據(jù)共享交換子系統(tǒng)（含數(shù)據(jù)交換、服務(wù)管理等功能模塊）、大數(shù)據(jù)支撐子系統(tǒng)（含數(shù)據(jù)湖、數(shù)據(jù)庫(kù)）、數(shù)據(jù)治理子系統(tǒng)、數(shù)據(jù)質(zhì)量管理子系統(tǒng)等。其中：統(tǒng)一門戶主要進(jìn)行各子系統(tǒng)的集成、功能模塊菜單級(jí)整合，實(shí)現(xiàn)了平臺(tái)用戶、權(quán)限統(tǒng)一管理、單點(diǎn)登錄等；數(shù)據(jù)共享交換子系統(tǒng)（數(shù)據(jù)交換模塊）實(shí)現(xiàn)數(shù)據(jù)交換引擎、統(tǒng)一調(diào)度引擎、任務(wù)管理、數(shù)據(jù)橋接等功能，以及對(duì)數(shù)據(jù)湖數(shù)據(jù)的存儲(chǔ)管理、共享與交換；大數(shù)據(jù)支撐子系統(tǒng)（數(shù)據(jù)湖）匯聚“四大基礎(chǔ)庫(kù)”、“統(tǒng)建系統(tǒng)”、“各委辦系統(tǒng)”、“各行政區(qū)系統(tǒng)”的經(jīng)過初始治理的原始數(shù)據(jù)；數(shù)據(jù)治理子系統(tǒng)主要實(shí)現(xiàn)三清單動(dòng)態(tài)管理、公共數(shù)據(jù)資源目錄管理，以及元數(shù)據(jù)和數(shù)據(jù)標(biāo)準(zhǔn)管理；數(shù)據(jù)質(zhì)量管理子系統(tǒng)實(shí)現(xiàn)完善的數(shù)據(jù)質(zhì)量管理功能，包括數(shù)據(jù)質(zhì)量規(guī)則制定、數(shù)據(jù)質(zhì)量稽核、數(shù)據(jù)質(zhì)量問題閉環(huán)管理；大數(shù)據(jù)支撐子系統(tǒng)（市級(jí)數(shù)據(jù)庫(kù)）主要用于存放經(jīng)過一系列清洗、轉(zhuǎn)換、加載、治理步驟后的高質(zhì)量的公共數(shù)據(jù)資源，為城市管理、公共服務(wù)等提供數(shù)據(jù)來源；數(shù)據(jù)共享交換子系統(tǒng)（服務(wù)管理模塊）主要提供市級(jí)數(shù)據(jù)庫(kù)中數(shù)據(jù)對(duì)外的服務(wù)發(fā)布與利用。整理制作郎豐利1519.需求范圍服務(wù)子類服務(wù)內(nèi)容描述數(shù)據(jù)治理/分析建設(shè)建設(shè)內(nèi)容（1）建設(shè)完善數(shù)據(jù)庫(kù)：通過人口、法人、空間地理庫(kù)數(shù)據(jù)源整合開發(fā)，并對(duì)接電子證照庫(kù)。實(shí)現(xiàn)對(duì)人口、法人、空間地理信息、證照等的接入、整合、開發(fā)、利用。結(jié)合實(shí)際，構(gòu)建公共主題庫(kù)及專題庫(kù)，為應(yīng)用提供安全高質(zhì)的專題數(shù)據(jù)服務(wù)。（2）建立數(shù)據(jù)管理子系統(tǒng)：主要實(shí)現(xiàn)數(shù)據(jù)架構(gòu)管理、數(shù)據(jù)關(guān)系管理、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)標(biāo)簽管理、數(shù)據(jù)異常管理、數(shù)據(jù)分析管理、數(shù)據(jù)流程管理、流數(shù)據(jù)處理、知識(shí)圖譜功能。（3）擴(kuò)展數(shù)據(jù)治理子系統(tǒng)：通過國(guó)家資源管理子系統(tǒng)實(shí)現(xiàn)資源申請(qǐng)、撤銷、審核、查詢、配置、目錄管理、業(yè)務(wù)流程對(duì)接、監(jiān)控模塊對(duì)接等功能。（4）建設(shè)大數(shù)據(jù)綜合應(yīng)用（一期）：通過宏觀經(jīng)濟(jì)、市場(chǎng)運(yùn)行、民生幸福、城市立方體等專題應(yīng)用的建設(shè)，構(gòu)建大數(shù)據(jù)綜合應(yīng)用示范輔助領(lǐng)導(dǎo)決策，構(gòu)建應(yīng)用管理中心支撐數(shù)據(jù)應(yīng)用，以為各部門提供優(yōu)質(zhì)的數(shù)據(jù)服務(wù)。（5）建設(shè)數(shù)據(jù)開放子系統(tǒng)（一期）：通過數(shù)據(jù)應(yīng)用方管理、開放清單管理、數(shù)據(jù)開放管理、開放授權(quán)管理等構(gòu)建全面的數(shù)據(jù)開放子系統(tǒng)，為數(shù)據(jù)應(yīng)用方、數(shù)據(jù)管理方、外部第三方等提供數(shù)據(jù)注冊(cè)、身份認(rèn)證、訂閱分發(fā)、開放數(shù)據(jù)追溯等功能。（6）擴(kuò)展平臺(tái)集成門戶：在大數(shù)據(jù)資源平臺(tái)項(xiàng)目的基礎(chǔ)上擴(kuò)展功能。主要包括消息推送、數(shù)據(jù)推送、個(gè)人信息管理、系統(tǒng)管理等功能。（7）建立數(shù)據(jù)開放門戶：主要實(shí)現(xiàn)數(shù)據(jù)目錄、數(shù)據(jù)接口、數(shù)據(jù)應(yīng)用、數(shù)據(jù)圖譜、地圖數(shù)據(jù)、互動(dòng)交流、數(shù)據(jù)開發(fā)者、輔助事項(xiàng)、個(gè)人管理等各項(xiàng)門戶目錄的建設(shè)。數(shù)據(jù)治理和數(shù)據(jù)開放運(yùn)營(yíng)服務(wù)數(shù)據(jù)采集對(duì)接服務(wù)從政務(wù)服務(wù)業(yè)務(wù)梳理著手，開展公共數(shù)據(jù)梳理，形成公共數(shù)據(jù)“三清單”，并建立公共數(shù)據(jù)“三清單”的長(zhǎng)效動(dòng)態(tài)更新機(jī)制，依據(jù)“三清單”進(jìn)行公共數(shù)據(jù)歸集，夯實(shí)數(shù)據(jù)治理基礎(chǔ)。抽取數(shù)據(jù)業(yè)務(wù)理解、數(shù)據(jù)理解、目錄編制及數(shù)據(jù)協(xié)議適配、資源掛載、清洗等。數(shù)據(jù)抽取運(yùn)維日常數(shù)據(jù)抽取任務(wù)維護(hù)，保障各信息系統(tǒng)數(shù)據(jù)及時(shí)準(zhǔn)確地匯聚，對(duì)于問題抽取任務(wù)的進(jìn)行處置調(diào)整作業(yè)調(diào)度運(yùn)維日常數(shù)據(jù)加工、分發(fā)作業(yè)的調(diào)度管理，檢查是否及時(shí)完成，對(duì)于中斷作業(yè)進(jìn)行處置；數(shù)據(jù)資源治理服務(wù)各類基礎(chǔ)庫(kù)、主題庫(kù)、專題庫(kù)的數(shù)據(jù)資源治理工作，梳理對(duì)象與范圍覆蓋更廣，內(nèi)容更豐富，如數(shù)據(jù)資源梳理、數(shù)據(jù)分級(jí)分類、數(shù)據(jù)資產(chǎn)編目、數(shù)據(jù)標(biāo)簽管理、資產(chǎn)配置管理、一數(shù)多源梳理等數(shù)據(jù)質(zhì)量管理服務(wù)對(duì)歸集數(shù)據(jù)進(jìn)行閉環(huán)質(zhì)量管理工作，不斷提升數(shù)據(jù)質(zhì)量，為數(shù)據(jù)利用打下基礎(chǔ)。閉環(huán)數(shù)據(jù)處理除需進(jìn)行常態(tài)化的監(jiān)管之外，還需進(jìn)行整改督辦跟蹤數(shù)據(jù)融合處理服務(wù)開展基礎(chǔ)數(shù)據(jù)融合應(yīng)用工作，進(jìn)行4大基礎(chǔ)庫(kù)升級(jí)改造，即人口、法人、空間地理、電子證照基礎(chǔ)數(shù)據(jù)庫(kù)；同時(shí)，依據(jù)“三清單”建設(shè)政務(wù)服務(wù)主題數(shù)據(jù)庫(kù)，協(xié)助各牽頭部門完成市場(chǎng)監(jiān)管、公共信用、經(jīng)濟(jì)社會(huì)發(fā)展、社會(huì)治理、公共安全等主題庫(kù)的建設(shè)數(shù)據(jù)分析應(yīng)用服務(wù)推進(jìn)數(shù)據(jù)分析應(yīng)用，包括業(yè)務(wù)分析、數(shù)據(jù)可視化及數(shù)據(jù)產(chǎn)品開發(fā)數(shù)據(jù)標(biāo)注服務(wù)對(duì)結(jié)構(gòu)化數(shù)據(jù)、文本數(shù)據(jù)、音頻數(shù)據(jù)、視頻數(shù)據(jù)、流媒體等格式進(jìn)行內(nèi)容釋義，并對(duì)內(nèi)容進(jìn)行分級(jí)分類管理；應(yīng)用建模服務(wù)根據(jù)不同的業(yè)務(wù)問題進(jìn)行數(shù)學(xué)模型的建立，包括參數(shù)調(diào)整、測(cè)試集驗(yàn)證等數(shù)據(jù)接口開發(fā)服務(wù)提供數(shù)據(jù)服務(wù)能力，包括服務(wù)接口的封裝及發(fā)布、各委辦局自有接口代管、國(guó)家平臺(tái)數(shù)據(jù)資源提供、數(shù)據(jù)開放等數(shù)據(jù)開放支撐服務(wù)促進(jìn)各級(jí)政務(wù)部門和公共企事業(yè)單位建立常態(tài)化工作機(jī)制，制定年度數(shù)據(jù)開放計(jì)劃，響應(yīng)公眾開放需求，依托開放平臺(tái)依法有序推進(jìn)公共信息資源開放。

建立數(shù)據(jù)開放用戶管理機(jī)制、分級(jí)分類機(jī)制、目錄管理機(jī)制、采集管理機(jī)制等內(nèi)容，確保數(shù)據(jù)開放工作有序高效、合法合規(guī)的推進(jìn)。數(shù)據(jù)運(yùn)行監(jiān)管服務(wù)在數(shù)據(jù)資產(chǎn)運(yùn)行過程中，保障資產(chǎn)的安全可靠貫穿始終。因此需要隨著業(yè)務(wù)的不斷拓展、技術(shù)的不斷提升，持續(xù)制定與完善數(shù)據(jù)運(yùn)營(yíng)相關(guān)的工作規(guī)范與考核機(jī)制，保障數(shù)據(jù)資產(chǎn)在制度框架下有序運(yùn)行

項(xiàng)目解決方案建設(shè)類業(yè)務(wù)技術(shù)方案業(yè)務(wù)需求分析根據(jù)對(duì)招標(biāo)要求的理解，建設(shè)業(yè)務(wù)需求主要包括如下幾個(gè)方面：（1）建設(shè)完善數(shù)據(jù)庫(kù)：通過人口、法人、空間地理庫(kù)數(shù)據(jù)源整合開發(fā)，并對(duì)接電子證照庫(kù)。實(shí)現(xiàn)對(duì)人口、法人、空間地理信息、證照等的接入、整合、開發(fā)、利用。結(jié)合實(shí)際，構(gòu)建公共主題庫(kù)及專題庫(kù)，為應(yīng)用提供安全高質(zhì)的專題數(shù)據(jù)服務(wù)。（2）建立數(shù)據(jù)管理子系統(tǒng)：主要實(shí)現(xiàn)數(shù)據(jù)架構(gòu)管理、數(shù)據(jù)關(guān)系管理、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)標(biāo)簽管理、數(shù)據(jù)異常管理、數(shù)據(jù)分析管理、數(shù)據(jù)流程管理、流數(shù)據(jù)處理、知識(shí)圖譜功能。（3）擴(kuò)展數(shù)據(jù)治理子系統(tǒng)：通過國(guó)家資源管理子系統(tǒng)實(shí)現(xiàn)資源申請(qǐng)、撤銷、審核、查詢、配置、目錄管理、業(yè)務(wù)流程對(duì)接、監(jiān)控模塊對(duì)接等功能。（4）建設(shè)大數(shù)據(jù)綜合應(yīng)用（一期）：通過宏觀經(jīng)濟(jì)、市場(chǎng)運(yùn)行、民生幸福、城市立方體等專題應(yīng)用的建設(shè)，構(gòu)建大數(shù)據(jù)綜合應(yīng)用示范輔助領(lǐng)導(dǎo)決策，構(gòu)建應(yīng)用管理中心支撐數(shù)據(jù)應(yīng)用，以為各部門提供優(yōu)質(zhì)的數(shù)據(jù)服務(wù)。（5）建設(shè)數(shù)據(jù)開放子系統(tǒng)（一期）：通過數(shù)據(jù)應(yīng)用方管理、開放清單管理、數(shù)據(jù)開放管理、開放授權(quán)管理等構(gòu)建全面的數(shù)據(jù)開放子系統(tǒng)，為數(shù)據(jù)應(yīng)用方、數(shù)據(jù)管理方、外部第三方等提供數(shù)據(jù)注冊(cè)、身份認(rèn)證、訂閱分發(fā)、開放數(shù)據(jù)追溯等功能。（6）擴(kuò)展平臺(tái)集成門戶：在大數(shù)據(jù)資源平臺(tái)項(xiàng)目的基礎(chǔ)上擴(kuò)展功能。主要包括消息推送、數(shù)據(jù)推送、個(gè)人信息管理、系統(tǒng)管理等功能。（7）建立數(shù)據(jù)開放門戶：主要實(shí)現(xiàn)數(shù)據(jù)目錄、數(shù)據(jù)接口、數(shù)據(jù)應(yīng)用、數(shù)據(jù)圖譜、地圖數(shù)據(jù)、互動(dòng)交流、數(shù)據(jù)開發(fā)者、輔助事項(xiàng)、個(gè)人管理等各項(xiàng)門戶目錄的建設(shè)。數(shù)據(jù)資源范圍本次項(xiàng)目建設(shè)范圍覆蓋招標(biāo)方客戶單位以及所有委辦局。數(shù)據(jù)來源即為來自委辦局、四大庫(kù)、互聯(lián)網(wǎng)及社會(huì)等業(yè)務(wù)數(shù)據(jù)。本項(xiàng)目建設(shè)中公共數(shù)據(jù)管理涉及數(shù)據(jù)的匯聚、抽取、治理、交換、共享等全生命周期，在生命周期的各個(gè)階段對(duì)數(shù)據(jù)的歸屬權(quán)、管理權(quán)有明確的界定，有利于各個(gè)項(xiàng)目參與單位能夠做到權(quán)責(zé)明確、協(xié)調(diào)統(tǒng)一。數(shù)據(jù)資源層次本項(xiàng)目建設(shè)將于平臺(tái)采用數(shù)據(jù)湖+數(shù)據(jù)庫(kù)的數(shù)據(jù)存儲(chǔ)架構(gòu)。數(shù)據(jù)湖與數(shù)據(jù)庫(kù)依托于大數(shù)據(jù)支撐平臺(tái)建設(shè)。（1）數(shù)據(jù)湖數(shù)據(jù)湖是所有從外部數(shù)據(jù)源落地到招標(biāo)方客戶單位的統(tǒng)一數(shù)據(jù)存儲(chǔ)空間。數(shù)據(jù)湖基于政務(wù)云提供的云數(shù)據(jù)庫(kù)和云存儲(chǔ)服務(wù)進(jìn)行搭建（通常包括關(guān)系型數(shù)據(jù)庫(kù)、NoSQL數(shù)據(jù)庫(kù)、列數(shù)據(jù)庫(kù)、分布式文件存儲(chǔ)等），主要存放政府部門業(yè)務(wù)數(shù)據(jù)庫(kù)、未經(jīng)加工的原始業(yè)務(wù)數(shù)據(jù)庫(kù)，支持存儲(chǔ)結(jié)構(gòu)化、非結(jié)構(gòu)化等多種類型的數(shù)據(jù)。數(shù)據(jù)湖通過大數(shù)據(jù)資源平臺(tái)，與各部門業(yè)務(wù)應(yīng)用系統(tǒng)、區(qū)級(jí)各部門或區(qū)數(shù)據(jù)管理部門的前置節(jié)點(diǎn)進(jìn)行交換。數(shù)據(jù)湖中的共享數(shù)據(jù)依據(jù)元數(shù)據(jù)進(jìn)行編目，并建立動(dòng)態(tài)更新的資源目錄。數(shù)據(jù)湖的數(shù)據(jù)存儲(chǔ)規(guī)模極其龐大，需要支持存儲(chǔ)擴(kuò)展和橫向、縱向遷移，直接用于分析的平均價(jià)值密度較低，通常需經(jīng)過預(yù)處理、集成后，形成高質(zhì)量公共數(shù)據(jù)資源。（2）數(shù)據(jù)庫(kù)數(shù)據(jù)庫(kù)，用于存放經(jīng)過一系列清洗、轉(zhuǎn)換、加載、治理步驟后的高質(zhì)量的公共數(shù)據(jù)資源，其數(shù)據(jù)來源主要來自于數(shù)據(jù)湖。對(duì)于如一網(wǎng)通辦等特殊應(yīng)用，平臺(tái)支持各部門政務(wù)應(yīng)用系統(tǒng)與數(shù)據(jù)資源池的直接雙向交互，無(wú)需通過數(shù)據(jù)湖進(jìn)行中轉(zhuǎn)，通過平臺(tái)的調(diào)度引擎可進(jìn)行交換鏈路的靈活設(shè)置。數(shù)據(jù)庫(kù)以面向不用數(shù)據(jù)應(yīng)用、行業(yè)領(lǐng)域及主題進(jìn)行劃分（如：綜合業(yè)務(wù)協(xié)同、公共基礎(chǔ)庫(kù)、公共主題庫(kù)、擴(kuò)展主題庫(kù)等），并為業(yè)務(wù)應(yīng)用和終端用戶提供業(yè)務(wù)對(duì)象訪問、數(shù)據(jù)集訪問等數(shù)據(jù)類服務(wù)，支撐輔助決策、數(shù)據(jù)可視化、數(shù)據(jù)開放、數(shù)據(jù)挖掘分析等不同公共數(shù)據(jù)應(yīng)用場(chǎng)景。通過大數(shù)據(jù)資源平臺(tái)提供的數(shù)據(jù)集成總線，對(duì)數(shù)據(jù)湖數(shù)據(jù)進(jìn)行批量離線處理或?qū)崟r(shí)處理，并將處理結(jié)果落地到數(shù)據(jù)資源池。數(shù)據(jù)資源池中的共享數(shù)據(jù)也需要依據(jù)元數(shù)據(jù)進(jìn)行編目，并建立動(dòng)態(tài)更新的資源目錄。數(shù)據(jù)庫(kù)的數(shù)據(jù)存儲(chǔ)規(guī)模極其龐大，需要采用合適的大數(shù)據(jù)平臺(tái)對(duì)明細(xì)數(shù)據(jù)和匯總數(shù)據(jù)進(jìn)行存儲(chǔ)計(jì)算，計(jì)算結(jié)果可以使用分布式文件存儲(chǔ)或關(guān)系型數(shù)據(jù)庫(kù)，用于應(yīng)用訪問或直接展現(xiàn)。整體業(yè)務(wù)架構(gòu)建立全市數(shù)據(jù)管理與利用體系：本項(xiàng)目將依托S市數(shù)據(jù)共享交換子平臺(tái)，持續(xù)匯入各市級(jí)委辦、各區(qū)縣、市級(jí)統(tǒng)建系統(tǒng)、四大庫(kù)的數(shù)據(jù)，并新增接入互聯(lián)網(wǎng)及社會(huì)數(shù)據(jù)，通過數(shù)據(jù)生命周期管理子系統(tǒng)提供公共數(shù)據(jù)管理、數(shù)據(jù)層次管理、數(shù)據(jù)關(guān)聯(lián)及流向分析、統(tǒng)一數(shù)據(jù)地圖等功能，整合法人庫(kù)、人口庫(kù)、空間地理庫(kù)數(shù)據(jù)源，并通過數(shù)據(jù)處理子系統(tǒng)建立經(jīng)濟(jì)活動(dòng)、公用事業(yè)、社會(huì)關(guān)系等公共主題庫(kù)，提供各類專業(yè)業(yè)務(wù)領(lǐng)域主題庫(kù)建設(shè)的數(shù)據(jù)支撐，通過數(shù)據(jù)服務(wù)總線對(duì)外提供利用。建設(shè)安全管理子系統(tǒng)，提供安全數(shù)據(jù)采集、敏感數(shù)據(jù)管理、安全監(jiān)管中心等功能。另外，將建立宏觀經(jīng)濟(jì)、市場(chǎng)運(yùn)行、民生幸福、城市綜合體等一系列專題應(yīng)用，在數(shù)據(jù)利用層面，通過平臺(tái)集成門戶對(duì)政務(wù)部門提供數(shù)據(jù)利用支撐，通過數(shù)據(jù)開放子系統(tǒng)與數(shù)據(jù)開放門戶對(duì)各類社會(huì)機(jī)構(gòu)提供數(shù)據(jù)利用支撐；進(jìn)一步推動(dòng)與促進(jìn)數(shù)據(jù)共享交換與利用的生態(tài)體系構(gòu)建，持續(xù)基于公共數(shù)據(jù)進(jìn)行業(yè)務(wù)創(chuàng)新。通過本次項(xiàng)目建設(shè)的各子系統(tǒng)、整合的人口、法人、空間地理庫(kù)數(shù)據(jù)源，新建的公共主題庫(kù)、專題庫(kù)等，結(jié)合S市數(shù)據(jù)共享交換子平臺(tái)，將初步構(gòu)建較為完整的S市大數(shù)據(jù)資源平臺(tái)，支撐智慧政府的改革。業(yè)務(wù)功能描述數(shù)據(jù)庫(kù)建設(shè)建設(shè)完善市級(jí)數(shù)據(jù)庫(kù)：通過人口、法人、空間地理庫(kù)數(shù)據(jù)源整合開發(fā)，并對(duì)接電子證照庫(kù)。實(shí)現(xiàn)對(duì)人口、法人、空間地理信息、證照等的接入、整合、開發(fā)、利用。結(jié)合S市實(shí)際，構(gòu)建公共主題庫(kù)及專題庫(kù)，為應(yīng)用提供安全高質(zhì)的專題數(shù)據(jù)服務(wù)。公共基礎(chǔ)庫(kù)人口庫(kù)數(shù)據(jù)源整合人口基礎(chǔ)信息庫(kù)提供身份核查和信息查詢共享服務(wù)，通過輸入公民姓名和身份證號(hào)碼，便可查詢居民身份號(hào)碼和姓名匹配度以及死亡（注銷）標(biāo)識(shí)，也可提供公民性別、民族、出生日期、出生地等信息查詢。人口庫(kù)數(shù)據(jù)源整合利用大數(shù)據(jù)資源平臺(tái)已歸集的人口相關(guān)數(shù)據(jù)，對(duì)人口庫(kù)數(shù)據(jù)接入相關(guān)功能進(jìn)行數(shù)據(jù)接入來源方面的功能整合開發(fā)。通過對(duì)人口庫(kù)數(shù)據(jù)源的全面梳理，對(duì)于原來由人口庫(kù)向數(shù)據(jù)提供部門采集且已（將）接入大數(shù)據(jù)資源平臺(tái)的數(shù)據(jù)，通過相關(guān)數(shù)據(jù)接入功能整合開發(fā)，改由大數(shù)據(jù)資源平臺(tái)直接向人口庫(kù)提供，不再需要相關(guān)數(shù)據(jù)提供部門重復(fù)提供。法人庫(kù)數(shù)據(jù)源整合作為全市法人信息的基礎(chǔ)數(shù)據(jù)庫(kù)，法人庫(kù)把原先碎片化存放的信息歸集到法人名下，全面立體的展示法人相關(guān)信息。同時(shí)，法人庫(kù)及S市法人信息共享與應(yīng)用系統(tǒng)為全市其他平臺(tái)和應(yīng)用提供有力支撐。法人庫(kù)數(shù)據(jù)源整合利用大數(shù)據(jù)資源平臺(tái)已歸集的法人相關(guān)數(shù)據(jù)，對(duì)法人庫(kù)數(shù)據(jù)接入相關(guān)功能進(jìn)行數(shù)據(jù)接入來源方面的功能整合開發(fā)。通過對(duì)法人庫(kù)數(shù)據(jù)源的全面梳理，對(duì)于原來由法人庫(kù)向數(shù)據(jù)提供部門采集且已（將）接入大數(shù)據(jù)資源平臺(tái)的數(shù)據(jù)，通過相關(guān)數(shù)據(jù)接入功能整合開發(fā)，改由大數(shù)據(jù)資源平臺(tái)直接向法人庫(kù)提供，不再需要相關(guān)數(shù)據(jù)提供部門重復(fù)提供。空間地理庫(kù)數(shù)據(jù)源整合空間地理庫(kù)提供地圖服務(wù)、影像服務(wù)、地名地址服務(wù)、三維服務(wù)與坐標(biāo)轉(zhuǎn)換等功能服務(wù)，持續(xù)為全市用戶提供優(yōu)質(zhì)的地理信息服務(wù)。空間地理庫(kù)數(shù)據(jù)源整合，利用大數(shù)據(jù)資源平臺(tái)已歸集的空間地理相關(guān)數(shù)據(jù)，對(duì)空間地理庫(kù)數(shù)據(jù)接入相關(guān)功能進(jìn)行數(shù)據(jù)接入來源方面的功能整合開發(fā)。通過對(duì)空間地理庫(kù)數(shù)據(jù)源的全面梳理，對(duì)于原來由空間地理庫(kù)向數(shù)據(jù)提供部門采集且已（將）接入大數(shù)據(jù)資源平臺(tái)的數(shù)據(jù)，通過相關(guān)數(shù)據(jù)接入功能整合開發(fā)，改由大數(shù)據(jù)資源平臺(tái)直接向空間地理庫(kù)提供，不再需要相關(guān)數(shù)據(jù)提供部門重復(fù)提供。支持公共主題庫(kù)立足于公共基礎(chǔ)庫(kù)，跨領(lǐng)域跨專題的數(shù)據(jù)提取并按主題進(jìn)行整合匯聚，形成公共主題庫(kù)，形成對(duì)專題的公共支撐。公共主題庫(kù)數(shù)據(jù)來源不限于政府部門數(shù)據(jù)，包括事業(yè)單位、企業(yè)提供數(shù)據(jù)和互聯(lián)網(wǎng)采集數(shù)據(jù)等。本項(xiàng)目建設(shè)的公共主題庫(kù)包括經(jīng)濟(jì)活動(dòng)、公用事業(yè)、社會(huì)關(guān)系、人員密度等。經(jīng)濟(jì)活動(dòng)：建設(shè)經(jīng)濟(jì)活動(dòng)公共主題庫(kù)，實(shí)現(xiàn)構(gòu)建與維護(hù)，并實(shí)現(xiàn)數(shù)據(jù)更新功能和主題聚合功能公用事業(yè)：建設(shè)公用事業(yè)公共主題庫(kù)，實(shí)現(xiàn)構(gòu)建與維護(hù)，并實(shí)現(xiàn)數(shù)據(jù)更新功能和主題聚合功能社會(huì)關(guān)系：建設(shè)社會(huì)關(guān)系公共主題庫(kù)，實(shí)現(xiàn)構(gòu)建與維護(hù)，并實(shí)現(xiàn)數(shù)據(jù)更新功能和主題聚合功能人員密度：建設(shè)人員密度公共主題庫(kù)，實(shí)現(xiàn)構(gòu)建與維護(hù)，并實(shí)現(xiàn)數(shù)據(jù)更新功能和主題聚合功能支持公共專題庫(kù)經(jīng)濟(jì)運(yùn)行監(jiān)測(cè)專題庫(kù)：建設(shè)宏觀經(jīng)濟(jì)專題專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能宏觀經(jīng)濟(jì)預(yù)測(cè)專題庫(kù)：建設(shè)宏觀經(jīng)濟(jì)預(yù)測(cè)專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能宏觀景氣指數(shù)預(yù)測(cè)專題庫(kù)：建設(shè)宏觀景氣指數(shù)預(yù)測(cè)專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能市場(chǎng)主體發(fā)展專題庫(kù)：建設(shè)市場(chǎng)主體發(fā)展專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能人口和就業(yè)專題庫(kù)：建設(shè)人口和就業(yè)專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能主體準(zhǔn)入分析專題庫(kù)：建設(shè)主體準(zhǔn)入分析專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能產(chǎn)業(yè)結(jié)構(gòu)調(diào)整專題庫(kù)：建設(shè)產(chǎn)業(yè)結(jié)構(gòu)調(diào)整專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能主體經(jīng)營(yíng)分析專題庫(kù)：建設(shè)主體經(jīng)營(yíng)分析專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能大眾創(chuàng)業(yè)分析專題庫(kù)：建設(shè)大眾創(chuàng)業(yè)分析專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能中小企業(yè)發(fā)展專題庫(kù)：建設(shè)中小企業(yè)發(fā)展專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能電子商務(wù)發(fā)展專題庫(kù)：建設(shè)電子商務(wù)發(fā)展專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能區(qū)域市場(chǎng)發(fā)展專題庫(kù)：建設(shè)區(qū)域市場(chǎng)發(fā)展專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能人口遷移專題庫(kù)：建設(shè)人口遷移專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能老齡化及養(yǎng)老專題庫(kù)：建設(shè)老齡化及養(yǎng)老專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能流動(dòng)人口專題庫(kù)：建設(shè)流動(dòng)人口專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能公共安全專題庫(kù)：建設(shè)公共安全專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能政務(wù)服務(wù)能力專題庫(kù)：建設(shè)政務(wù)服務(wù)能力專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能城市綜合體專題-城市立方體模型專題庫(kù)：建設(shè)城市立方體模型專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能城市綜合體專題-社區(qū)畫像專題庫(kù)：建設(shè)社區(qū)畫像專題庫(kù)，實(shí)現(xiàn)專題庫(kù)的規(guī)劃、建庫(kù)與維護(hù)，并提供數(shù)據(jù)更新功能數(shù)據(jù)管理子系統(tǒng)建立數(shù)據(jù)管理子系統(tǒng)：主要實(shí)現(xiàn)數(shù)據(jù)架構(gòu)管理、數(shù)據(jù)關(guān)系管理、數(shù)據(jù)分級(jí)分類管理、數(shù)據(jù)異常管理、數(shù)據(jù)分析管理、數(shù)據(jù)流程管理、流數(shù)據(jù)處理、知識(shí)圖譜、數(shù)據(jù)分層管理、數(shù)據(jù)運(yùn)維管理、數(shù)據(jù)資產(chǎn)管理功能。數(shù)據(jù)架構(gòu)管理數(shù)據(jù)中心管理：對(duì)市級(jí)數(shù)據(jù)庫(kù)進(jìn)行物理中心或邏輯中心的管理功能開發(fā)數(shù)據(jù)源管理：開發(fā)維護(hù)一個(gè)數(shù)據(jù)集存儲(chǔ)服務(wù)所需數(shù)據(jù)庫(kù)的鏈接和定位的功能數(shù)據(jù)集管理：開發(fā)實(shí)現(xiàn)對(duì)數(shù)據(jù)交換業(yè)務(wù)及各部門發(fā)布數(shù)據(jù)集的下載、查閱、可視化展示及統(tǒng)計(jì)定制等的功能數(shù)據(jù)物化管理：開發(fā)數(shù)據(jù)物化是在數(shù)據(jù)資源目錄的數(shù)據(jù)持久化管理的功能數(shù)據(jù)關(guān)系管理數(shù)據(jù)關(guān)聯(lián)管理：開發(fā)針對(duì)兩個(gè)或多個(gè)數(shù)據(jù)對(duì)象進(jìn)行關(guān)系的定義與維護(hù)，關(guān)聯(lián)關(guān)系可到字段級(jí)，并支持建立一對(duì)多和多對(duì)多的關(guān)系映射的功能數(shù)據(jù)版本管理：開發(fā)針對(duì)單個(gè)數(shù)據(jù)對(duì)象在不同時(shí)期變更的結(jié)構(gòu)進(jìn)行定義與維護(hù)，可支持多版本比對(duì)和歷史數(shù)據(jù)追溯等功能數(shù)據(jù)分級(jí)分類管理基礎(chǔ)標(biāo)簽管理：開發(fā)以列表形式和智能推薦形式將平臺(tái)中設(shè)置的基礎(chǔ)標(biāo)簽進(jìn)行呈現(xiàn)列表形式是將所有的基礎(chǔ)標(biāo)簽一一列出，并可以按照熱度進(jìn)行排序智能推薦形式是指根據(jù)最近時(shí)間段內(nèi)的標(biāo)簽的訪問頻率、搜索頻率等，以輪播的形式循環(huán)展現(xiàn)熱門標(biāo)簽的功能標(biāo)簽關(guān)系展現(xiàn)：開發(fā)通過標(biāo)簽將相關(guān)聯(lián)的數(shù)據(jù)目錄關(guān)聯(lián)在動(dòng)圖中展現(xiàn)給用戶，形成豐富數(shù)據(jù)盛筵的展示效果，做到通過一張圖就可以將某一條數(shù)據(jù)的關(guān)聯(lián)數(shù)據(jù)、以及數(shù)據(jù)之間的關(guān)系全部展示出來的功能標(biāo)簽云：開發(fā)通過標(biāo)簽訪問次數(shù)統(tǒng)計(jì)出熱門標(biāo)簽，讓平臺(tái)運(yùn)維人員了解哪些標(biāo)簽是訪問頻率高的、是符合用戶訪問習(xí)慣的，并結(jié)合用戶的搜索記錄，優(yōu)化標(biāo)簽設(shè)置，使之更通用和人性化的功能數(shù)據(jù)異常管理異常對(duì)接管理：開發(fā)可以對(duì)接數(shù)據(jù)交換總線、數(shù)據(jù)集成總線、數(shù)據(jù)服務(wù)總線系統(tǒng)中異常日志模塊的功能。異常問題列表：開發(fā)展示異常問題信息，按等級(jí)進(jìn)行分類或主動(dòng)推送，同時(shí)對(duì)異常問題進(jìn)行歸類整理，并定義規(guī)則進(jìn)行選擇性忽略或提醒的功能。人工處理管理：開發(fā)人工處理管理是記錄針對(duì)異常信息，人工處理所登記的臺(tái)賬信息，可按照異常分類進(jìn)行分類授權(quán)，實(shí)現(xiàn)指定問題的指定人員處理的功能。系統(tǒng)處理管理：開發(fā)統(tǒng)處理管理是針對(duì)異常信息集成的各子平臺(tái)系統(tǒng)處理結(jié)果的收集，該類信息往往不需要人工干預(yù)的功能。異常處理統(tǒng)計(jì)分析：開發(fā)按照異常分類、處理情況、時(shí)間、等級(jí)等維度進(jìn)行分類統(tǒng)計(jì)，以圖表的形式展現(xiàn)便于管理人員匯總分析的功能。數(shù)據(jù)分析管理分析算法管理：開發(fā)集成并提供統(tǒng)計(jì)、分類、聚類、序列等分析工具集，提供調(diào)用接口的功能預(yù)制模型管理：開發(fā)模型預(yù)制及自定義管理功能提供可選擇的預(yù)制模型，可基于業(yè)務(wù)問題，來決定可以選擇哪些可用的已有模型的功能數(shù)據(jù)變換管理：開發(fā)提供將數(shù)據(jù)變換或統(tǒng)一成適合于數(shù)據(jù)分析挖掘的形式的功能模型評(píng)估管理：開發(fā)模型質(zhì)量的評(píng)估功能支持的評(píng)價(jià)指標(biāo)有：平均誤差率、判定系數(shù)R2、正確率、查全率、查準(zhǔn)率模型訓(xùn)練與優(yōu)化管理：開發(fā)模型訓(xùn)練及優(yōu)化功能，對(duì)評(píng)估中的欠擬合或者過擬合的模型進(jìn)行優(yōu)化的功能分析可視化組件：開發(fā)對(duì)基礎(chǔ)的各類可視化組件進(jìn)行封裝，支撐應(yīng)用層模型展現(xiàn)的功能數(shù)據(jù)流程管理工作流分類：開發(fā)系統(tǒng)支持自定義工作流的分類和維護(hù)的功能可視化流程工具：開發(fā)可對(duì)數(shù)據(jù)管理相關(guān)業(yè)務(wù)流程進(jìn)行可視化編排的功能流程維護(hù)：開發(fā)工作流維護(hù)管理便捷，可以對(duì)工作流設(shè)置進(jìn)行重新定義，工作流的修改或刪除不影響原來已完成和正在流轉(zhuǎn)的工作流的功能流程監(jiān)控：開發(fā)可以按照查詢條件監(jiān)控流程的流轉(zhuǎn)情況，包括審批的狀態(tài)和結(jié)果的功能流程發(fā)布：開發(fā)流程需要發(fā)布后才能使用，發(fā)布前的修改對(duì)用戶不產(chǎn)生影響的功能流程導(dǎo)入導(dǎo)出：開發(fā)流程可采用xml文件進(jìn)行導(dǎo)入導(dǎo)出備份，提供流程嵌套功能，支持多個(gè)、多級(jí)子流程嵌套的功能流數(shù)據(jù)處理實(shí)時(shí)采集：主要應(yīng)對(duì)海量數(shù)據(jù)進(jìn)行高性能的實(shí)時(shí)數(shù)據(jù)采集處理，以實(shí)時(shí)、高效、低延遲為核心驅(qū)動(dòng)點(diǎn)，具備毫秒級(jí)數(shù)據(jù)觸發(fā)能力，實(shí)現(xiàn)秒級(jí)單位時(shí)間窗口的數(shù)據(jù)統(tǒng)計(jì)分析能力。需要支持的數(shù)據(jù)源類型可以分為以下四類：網(wǎng)絡(luò)協(xié)議數(shù)據(jù)源，包括Socket、JMS、HTTP、HTTPS等常見類型的網(wǎng)絡(luò)協(xié)議。本/異地文件數(shù)據(jù)源，包括目錄掃描、文本文件，F(xiàn)TP，SDTP等數(shù)據(jù)。分布式文件系統(tǒng)數(shù)據(jù)源，包括HDFS，HBase，Hive等數(shù)據(jù)。關(guān)系型數(shù)據(jù)庫(kù)數(shù)據(jù)源，包括DB2，Teradata，vertica等數(shù)據(jù)。支持物聯(lián)網(wǎng)網(wǎng)關(guān)采集：將物聯(lián)網(wǎng)數(shù)據(jù)從物聯(lián)網(wǎng)網(wǎng)關(guān)接入，提供協(xié)議適配和標(biāo)準(zhǔn)化處理，以及滿足海量物聯(lián)網(wǎng)數(shù)據(jù)的入湖。來自多種數(shù)據(jù)源的實(shí)時(shí)信息，因?yàn)槠鋾r(shí)效性高，數(shù)據(jù)的有效期短暫，需要實(shí)時(shí)提取和分析來自各種分布式系統(tǒng)的信息，并分發(fā)到不同的應(yīng)用中進(jìn)行處理。同時(shí)，系統(tǒng)必須高效、可靠、可管理、可監(jiān)控并且具有一定的對(duì)外開放能力。流數(shù)據(jù)引擎：開發(fā)提供數(shù)據(jù)融合，統(tǒng)計(jì)，分析的高速處理能力，對(duì)于實(shí)時(shí)性要求較高的數(shù)據(jù)計(jì)算提供支撐的功能流數(shù)據(jù)計(jì)算模型管理：開發(fā)提供對(duì)已設(shè)計(jì)完成的數(shù)據(jù)計(jì)算模型進(jìn)行申請(qǐng)，注冊(cè)，提交，執(zhí)行，監(jiān)控的統(tǒng)一管理的功能流數(shù)據(jù)計(jì)算公共模型開發(fā)：開發(fā)提供對(duì)于場(chǎng)景需求較多的數(shù)據(jù)模型可開發(fā)公共模型的功能，公共模型可以供其他用戶調(diào)用，可重復(fù)使用的功能流數(shù)據(jù)計(jì)算結(jié)果接口開發(fā)：開發(fā)提供對(duì)流數(shù)據(jù)計(jì)算結(jié)果接口開發(fā)功能和計(jì)算結(jié)果數(shù)據(jù)可通過接口形式供可視化調(diào)用或其他應(yīng)用的功能流數(shù)據(jù)計(jì)算模型查詢：開發(fā)提供流數(shù)據(jù)計(jì)算模型查詢功能，通過對(duì)流數(shù)據(jù)計(jì)算模型發(fā)布可以是其他用戶查看計(jì)算模型邏輯，進(jìn)行模型再利用，減少其他用戶開發(fā)工作量的功能。支持流媒體采集及轉(zhuǎn)發(fā)管理：針對(duì)音頻、視頻等流媒體提供數(shù)據(jù)采集功能，同時(shí)配套流媒體數(shù)據(jù)存儲(chǔ)和快速檢索功能，同時(shí)需要采集對(duì)應(yīng)流媒體設(shè)備的系統(tǒng)參數(shù)、通道參數(shù)、網(wǎng)絡(luò)參數(shù)、外設(shè)設(shè)備參數(shù)、以及外設(shè)設(shè)備的地理位置等。知識(shí)圖譜知識(shí)圖譜用節(jié)點(diǎn)和關(guān)系所組成的圖譜，為真實(shí)世界各個(gè)場(chǎng)景進(jìn)行直觀地建模，通過不同知識(shí)的關(guān)聯(lián)性形成一個(gè)網(wǎng)狀的知識(shí)結(jié)構(gòu)，即機(jī)器所能理解的圖譜，后續(xù)通過機(jī)器學(xué)習(xí)技術(shù)對(duì)知識(shí)圖譜結(jié)果持續(xù)優(yōu)化?！爸R(shí)圖譜圖計(jì)算服務(wù)=圖存儲(chǔ)+圖計(jì)算引擎”，具有復(fù)雜關(guān)系的知識(shí)圖譜以圖數(shù)據(jù)庫(kù)的方式進(jìn)行存儲(chǔ)和運(yùn)算，大大提高了基于復(fù)雜關(guān)系進(jìn)行分析和推理的效率。圖數(shù)據(jù)庫(kù)更適合多對(duì)多關(guān)系、高價(jià)值的關(guān)系、基于關(guān)系的大規(guī)模和低延時(shí)數(shù)據(jù)的、方便關(guān)系擴(kuò)展類的應(yīng)用。同時(shí)需要提供圖數(shù)據(jù)庫(kù)二次開發(fā)：開發(fā)提供二級(jí)索引，全文檢索、模糊檢索等能力，開源標(biāo)準(zhǔn)圖交互式查詢語(yǔ)言接口，支持點(diǎn)對(duì)點(diǎn)關(guān)系信息的功能。數(shù)據(jù)分層管理數(shù)據(jù)層級(jí)模型設(shè)計(jì)：開發(fā)數(shù)據(jù)層次設(shè)計(jì)功能模塊，提供數(shù)據(jù)層次設(shè)計(jì)管理功能。數(shù)據(jù)層級(jí)模型算法開發(fā)：數(shù)據(jù)層次模型算法功能模塊的開發(fā)，提供數(shù)據(jù)層次模型算法管理功能。數(shù)據(jù)層級(jí)庫(kù)表建立：數(shù)據(jù)各層級(jí)數(shù)據(jù)庫(kù)庫(kù)表創(chuàng)建功能開發(fā)。數(shù)據(jù)層級(jí)管理功能開發(fā)：對(duì)接管理功能開發(fā)，支持對(duì)接各子系統(tǒng)，實(shí)現(xiàn)數(shù)據(jù)分層管理功能。數(shù)據(jù)層級(jí)元數(shù)據(jù)管理開發(fā)：開發(fā)元數(shù)據(jù)管理功能，提供元數(shù)據(jù)定義、采集、管理等功能。數(shù)據(jù)層級(jí)分析算法功能開發(fā)：數(shù)據(jù)分層分析算法管理的功能開發(fā)。數(shù)據(jù)運(yùn)維管理監(jiān)控運(yùn)維：監(jiān)控運(yùn)維為數(shù)據(jù)開發(fā)者和維護(hù)者提供一站式的數(shù)據(jù)運(yùn)維管控能力，可自主管理作業(yè)的部署、作業(yè)優(yōu)先級(jí)、以及生產(chǎn)監(jiān)控運(yùn)維平臺(tái)提供數(shù)據(jù)監(jiān)控運(yùn)維、任務(wù)運(yùn)行情況監(jiān)控、異常情況告警、日常運(yùn)維數(shù)據(jù)統(tǒng)計(jì)等功能。運(yùn)維概覽：運(yùn)維概覽主要用來展示調(diào)度任務(wù)的指標(biāo)數(shù)據(jù)情況，目前包括任務(wù)完成情況、任務(wù)運(yùn)行情況、任務(wù)執(zhí)行時(shí)長(zhǎng)排行、調(diào)度任務(wù)數(shù)量趨勢(shì)、近一月出錯(cuò)排行、任務(wù)類型分布、30天基線破線次數(shù)排行。運(yùn)維任務(wù)：可視化展示調(diào)度任務(wù)DAG圖，方便數(shù)據(jù)運(yùn)維管理。1)提供任務(wù)運(yùn)行狀態(tài)監(jiān)控告警2)提供單任務(wù)重跑、多任務(wù)重跑、kill、置成功、暫停等操作3)提供列表和DAG兩種模式4)實(shí)現(xiàn)針對(duì)周期運(yùn)行、測(cè)試運(yùn)行、手動(dòng)運(yùn)行任務(wù)查看任務(wù)運(yùn)行狀態(tài)5)實(shí)現(xiàn)針對(duì)任務(wù)進(jìn)行重跑、停止、查看運(yùn)行日志、查看節(jié)點(diǎn)代碼、查看節(jié)點(diǎn)屬性。監(jiān)控告警：監(jiān)控告警是調(diào)度任務(wù)的監(jiān)控保障系統(tǒng)，當(dāng)任務(wù)出現(xiàn)錯(cuò)誤時(shí)，系統(tǒng)會(huì)通過預(yù)定義的方式告知任務(wù)失敗，提供按照自定義規(guī)則來配置告警規(guī)則，及時(shí)調(diào)整任務(wù)產(chǎn)出，保障產(chǎn)出數(shù)據(jù)的及時(shí)性和可用性。實(shí)時(shí)分析：實(shí)時(shí)分析主要面向數(shù)據(jù)分析師開放的功能，依托于實(shí)時(shí)分析引擎，提供方便快捷的數(shù)據(jù)查詢和結(jié)果分析。統(tǒng)一流程管理：面向不同用戶提供不同監(jiān)控視角的統(tǒng)一數(shù)據(jù)地圖功能開發(fā)。數(shù)據(jù)運(yùn)維定制化開發(fā)：按照大數(shù)據(jù)資源平臺(tái)的整體功能要求，提供數(shù)據(jù)運(yùn)維可擴(kuò)展的定制化功能。平臺(tái)運(yùn)維定制化開發(fā)：按照大數(shù)據(jù)資源平臺(tái)的整體功能要求，提供平臺(tái)運(yùn)維可擴(kuò)展的定制化功能。數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)資產(chǎn)：資產(chǎn)管理主要是針對(duì)數(shù)據(jù)資產(chǎn)類目編制的過程梳理、明確職責(zé)等內(nèi)容，同時(shí)也可以對(duì)數(shù)據(jù)表的元數(shù)據(jù)信息進(jìn)行有效管理資產(chǎn)總覽：資產(chǎn)總覽從數(shù)據(jù)規(guī)模、類目分布、熱門訪問等多個(gè)角度，對(duì)數(shù)據(jù)資源平臺(tái)上的數(shù)據(jù)資產(chǎn)狀況進(jìn)行全景式展現(xiàn)。資產(chǎn)目錄：資產(chǎn)目錄是對(duì)平臺(tái)元數(shù)據(jù)的有序組織，是記錄數(shù)據(jù)體系的保障數(shù)據(jù)類目是目錄信息與服務(wù)、保障與支撐所組成的一個(gè)整體針對(duì)資產(chǎn)的合理組織，需要對(duì)資產(chǎn)進(jìn)行對(duì)應(yīng)分類，如部門類目、主題類目、行業(yè)類目等，可對(duì)該類目下資產(chǎn)數(shù)據(jù)進(jìn)行搜索、展現(xiàn)以及權(quán)限申請(qǐng)。資產(chǎn)報(bào)告：針對(duì)整體平臺(tái)上的對(duì)應(yīng)數(shù)據(jù)，提供定周期了解其對(duì)應(yīng)資產(chǎn)情況，對(duì)總體資產(chǎn)情況進(jìn)行分析。資產(chǎn)地圖：數(shù)據(jù)地圖面向數(shù)據(jù)開發(fā)者，匯聚用戶所有數(shù)據(jù)信息，通過元數(shù)據(jù)信息收集、數(shù)據(jù)血緣探查、數(shù)據(jù)權(quán)限申請(qǐng)授權(quán)等手段，幫助數(shù)據(jù)資源平臺(tái)完成數(shù)據(jù)信息的收集和管理，解決數(shù)據(jù)資源平臺(tái)數(shù)據(jù)開發(fā)者有哪些數(shù)據(jù)可用、到哪里可以找到數(shù)據(jù)的難題，并且提升數(shù)據(jù)資源的利用率。數(shù)據(jù)治理子系統(tǒng)擴(kuò)展數(shù)據(jù)治理子系統(tǒng)：通過國(guó)家資源管理子系統(tǒng)實(shí)現(xiàn)資源申請(qǐng)、撤銷、審核、查詢、配置、目錄管理、業(yè)務(wù)流程對(duì)接、監(jiān)控模塊對(duì)接等功能。國(guó)家資源申請(qǐng)模塊：開發(fā)資源申請(qǐng)功能，供資源需求方進(jìn)行資源申請(qǐng)管理資源撤銷模塊：開發(fā)資源撤銷功能，供資源提供方進(jìn)行資源撤銷管理資源審核模塊：開發(fā)資源審核功能，供主管部門進(jìn)行資源申請(qǐng)的審核管理查詢模塊：查詢已上線的所有資源及已發(fā)布的資源管理功能開發(fā)消息管理模塊：查看申請(qǐng)審核消息、待辦消息、預(yù)警消息的消息管理功能開發(fā)配置管理模塊：配置管理功能開發(fā)，提供配置庫(kù)表、文件資源申請(qǐng)審核、服務(wù)接口申請(qǐng)審核等功能應(yīng)用及事項(xiàng)管理模塊：應(yīng)用及事項(xiàng)管理功能開發(fā)，提供服務(wù)事項(xiàng)管理、政務(wù)事項(xiàng)管理等功能使用單位對(duì)接模塊：將本區(qū)數(shù)據(jù)共享交換平臺(tái)使用單位信息注冊(cè)到市數(shù)據(jù)共享交換平臺(tái)的功能開發(fā)目錄對(duì)接模塊：目錄對(duì)接功能開發(fā)，提供下發(fā)目錄接口秘鑰、更新授權(quán)秘鑰、目錄分類獲取、目錄分類注冊(cè)、目錄分類變更、目錄分類撤銷管理等功能資源對(duì)接模塊：資源對(duì)接功能開發(fā)，提供庫(kù)表資源對(duì)接發(fā)布、庫(kù)表資源對(duì)接訂閱、庫(kù)表資源對(duì)接變更、庫(kù)表資源對(duì)接撤銷管理等功能業(yè)務(wù)流程對(duì)接模塊：業(yè)務(wù)流程對(duì)接功能開發(fā)，提供市數(shù)據(jù)共享交換平臺(tái)對(duì)接管理功能通知管理模塊：通知管理功能開發(fā)，提供通知下發(fā)管理等功能對(duì)接監(jiān)控模塊：監(jiān)控目錄及資源對(duì)接運(yùn)行情況的功能開發(fā)大數(shù)據(jù)綜合應(yīng)用根據(jù)宏觀經(jīng)濟(jì)、市場(chǎng)運(yùn)行、民生幸福、城市立方體等專題應(yīng)用的建設(shè)的要求，構(gòu)建大數(shù)據(jù)綜合應(yīng)用示范輔助領(lǐng)導(dǎo)決策。建立事件服務(wù)功能，主要實(shí)現(xiàn)事件規(guī)則定義、事件管理功能。規(guī)則定義：事件規(guī)則定義提供簡(jiǎn)單事件的定義、復(fù)雜事件的組合規(guī)則定義，通過過濾、聚合和關(guān)聯(lián)識(shí)別事件。事件采集：時(shí)間采集提供事件采集的適配接口和信息轉(zhuǎn)換，支持實(shí)時(shí)接收各系統(tǒng)的事件信息，完成信息的標(biāo)準(zhǔn)化處理。事件處理：事件處理提供多事件并發(fā)處理的進(jìn)程管理，對(duì)事件數(shù)據(jù)流進(jìn)行大任務(wù)高并發(fā)的處理。事件管理：開發(fā)事件管理功能，實(shí)現(xiàn)復(fù)雜事件的事件列表查看、事件處理等功能。事件分發(fā)：事件分發(fā)是將事件下發(fā)給事件的訂閱者，用于事件驅(qū)動(dòng)型的業(yè)務(wù)觸發(fā)。在數(shù)據(jù)服務(wù)和事件服務(wù)的雙重支撐下，構(gòu)建應(yīng)用管理中心支撐數(shù)據(jù)應(yīng)用，為各部門提供優(yōu)質(zhì)的數(shù)據(jù)服務(wù)。宏觀經(jīng)濟(jì)專題經(jīng)濟(jì)運(yùn)行監(jiān)測(cè)：開發(fā)包括GDP運(yùn)行態(tài)勢(shì)、工業(yè)增加值趨勢(shì)、投資及消費(fèi)趨勢(shì)、對(duì)外貿(mào)易進(jìn)出口運(yùn)行態(tài)勢(shì)、價(jià)格水平運(yùn)行態(tài)勢(shì)、金融運(yùn)行態(tài)勢(shì)的經(jīng)濟(jì)運(yùn)行監(jiān)測(cè)專題分析展示功能宏觀經(jīng)濟(jì)預(yù)測(cè)：開發(fā)包括GDP增速預(yù)測(cè)、工業(yè)增加值增速預(yù)測(cè)、M2增速預(yù)測(cè)，CPI預(yù)測(cè)的宏觀經(jīng)濟(jì)預(yù)測(cè)專題分析展示功能宏觀景氣指數(shù)預(yù)測(cè)：開發(fā)包括宏觀預(yù)警指數(shù)、宏觀一致指數(shù)、宏觀先行指數(shù)、宏觀滯后指數(shù)的宏觀景氣指數(shù)預(yù)測(cè)專題分析展示功能市場(chǎng)主體發(fā)展：開發(fā)包括市場(chǎng)主體數(shù)量分析、區(qū)域活力分析、行業(yè)活力分析的市場(chǎng)主體發(fā)展專題分析展示功能人口和就業(yè)：開發(fā)包括全市及各區(qū)人口情況、就業(yè)情況、人力資源情況的人口和就業(yè)專題分析展示功能市場(chǎng)運(yùn)行專題主體準(zhǔn)入分析：開發(fā)包括主體市場(chǎng)準(zhǔn)入分析、主體市場(chǎng)退出分析、主體變遷分析的主體準(zhǔn)入專題分析展示功能產(chǎn)業(yè)結(jié)構(gòu)調(diào)整：開發(fā)包括產(chǎn)業(yè)結(jié)構(gòu)分布、產(chǎn)業(yè)結(jié)構(gòu)調(diào)整分析的產(chǎn)業(yè)結(jié)構(gòu)調(diào)整專題分析展示功能主體經(jīng)營(yíng)分析：開發(fā)包括主體營(yíng)收分析、主體納稅分析、就業(yè)規(guī)模分析的主體經(jīng)營(yíng)專題分析展示功能大眾創(chuàng)業(yè)分析：開發(fā)包括創(chuàng)業(yè)密度、創(chuàng)業(yè)熱點(diǎn)行業(yè)分布、創(chuàng)業(yè)類型、創(chuàng)業(yè)年齡分布、創(chuàng)業(yè)者學(xué)歷分布、創(chuàng)業(yè)生存周期、創(chuàng)業(yè)發(fā)展、創(chuàng)業(yè)與就業(yè)的大眾創(chuàng)業(yè)專題分析展示功能中小企業(yè)發(fā)展：開發(fā)包括對(duì)中小企業(yè)主體數(shù)量、分布區(qū)域、分布行業(yè)、生命周期情況分析的中小企業(yè)發(fā)展專題分析展示功能電子商務(wù)發(fā)展：開發(fā)包括電子商務(wù)平臺(tái)、電子商務(wù)經(jīng)營(yíng)者、電子商務(wù)交易、電子商務(wù)維權(quán)的電子商務(wù)發(fā)展專題分析展示功能區(qū)域市場(chǎng)發(fā)展：開發(fā)包括產(chǎn)業(yè)數(shù)量分析、市場(chǎng)主體排名的區(qū)域市場(chǎng)發(fā)展專題分析展示功能民生幸福專題人口大數(shù)據(jù)首頁(yè)：開發(fā)包括區(qū)域人口密度分布、人口增長(zhǎng)趨勢(shì)、老齡化趨勢(shì)、不同年齡階段的性別比、流動(dòng)人口民族構(gòu)成的人口大數(shù)據(jù)首頁(yè)分析展示功能人口遷移：開發(fā)包括外省市遷入本市的人口分布情況、職業(yè)特征、年齡特征、學(xué)歷特征、遷移趨勢(shì)特征的人口遷移專題分析展示功能老齡化及養(yǎng)老：開發(fā)包括老齡化發(fā)展趨勢(shì)、老年配套設(shè)施分布及完善情況、老年人疾病、養(yǎng)老方式、老年消費(fèi)、老年需求的老齡化及養(yǎng)老專題分析展示功能流動(dòng)人口：開發(fā)包括流動(dòng)人口的聚集地分布、流動(dòng)人口來源地、流動(dòng)人口轉(zhuǎn)化為常駐人口的比例趨勢(shì)、流動(dòng)人口的民族構(gòu)成、子女入學(xué)率、犯罪率、犯罪類型的流動(dòng)人口專題分析展示功能公共安全：開發(fā)包括刑事犯罪、交通違章的公共安全專題分析展示功能食品安全：開發(fā)包括食品生產(chǎn)、食品流通、餐飲服務(wù)、食品檢測(cè)、食品維權(quán)、食品事故的食品安全專題分析展示功能政務(wù)服務(wù)能力：開發(fā)包括事項(xiàng)分類、辦件數(shù)量、辦件來源、跑腿次數(shù)、辦理時(shí)限、辦結(jié)率、行政相對(duì)人、各區(qū)熱點(diǎn)事項(xiàng)的政務(wù)服務(wù)能力專題分析展示功能城市綜合體專題城市立方體模型：開發(fā)包括360度分析展示、區(qū)域挖掘分析的城市立方體模型專題分析展示功能；社區(qū)畫像：開發(fā)包括公共能服務(wù)能力排名、老齡化排名、學(xué)齡兒童排名、人口結(jié)構(gòu)、年齡結(jié)構(gòu)、收入分布、民族結(jié)構(gòu)、學(xué)歷分布的社區(qū)畫像專題分析展示功能數(shù)據(jù)開放子系統(tǒng)建設(shè)數(shù)據(jù)開放子系統(tǒng)（一期）：通過數(shù)據(jù)應(yīng)用方管理、開放清單管理、數(shù)據(jù)開放管理、開放授權(quán)管理等構(gòu)建全面的數(shù)據(jù)開放子系統(tǒng)，為數(shù)據(jù)應(yīng)用方、數(shù)據(jù)管理方、外部第三方等提供數(shù)據(jù)注冊(cè)、身份認(rèn)證、訂閱分發(fā)、開放數(shù)據(jù)追溯等功能。實(shí)現(xiàn)可配置的數(shù)據(jù)開放管理，支持配置后流通任務(wù)自動(dòng)分發(fā)部署，在供應(yīng)端與需求端節(jié)點(diǎn)實(shí)現(xiàn)標(biāo)準(zhǔn)化的數(shù)據(jù)接口，數(shù)據(jù)流通過程可支持標(biāo)準(zhǔn)化業(yè)務(wù)流程管理，實(shí)現(xiàn)自動(dòng)化、可機(jī)讀的數(shù)據(jù)流通，其中：數(shù)據(jù)開放需支持單條實(shí)時(shí)流通、異步批量流通兩種模式，流通性能不低于10,000QPS。數(shù)據(jù)應(yīng)用方管理身份注冊(cè)：開發(fā)身份注冊(cè)功能，提供自然人、法人身份注冊(cè)；身份驗(yàn)證：開發(fā)身份驗(yàn)證功能，區(qū)分使用者身份實(shí)現(xiàn)個(gè)性化服務(wù)，包括通過App或人臉識(shí)別進(jìn)行身份驗(yàn)證以及法人用戶通過法人一證通進(jìn)行身份驗(yàn)證。開放清單管理公共數(shù)據(jù)資源ACL：開發(fā)公共數(shù)據(jù)資源ACL功能，提供公共信息資源目錄的查看，基于目錄實(shí)現(xiàn)數(shù)據(jù)訪問控制；公共數(shù)據(jù)資源可根據(jù)公共信息資源目錄及供應(yīng)情況，使數(shù)據(jù)使用者獲知公共數(shù)據(jù)提供的范圍、方式、更新頻率等信息，并整體控制某項(xiàng)數(shù)據(jù)資源是否開放；公共數(shù)據(jù)服務(wù)接口注冊(cè)：開發(fā)公共數(shù)據(jù)服務(wù)接口注冊(cè)功能，實(shí)現(xiàn)公共數(shù)據(jù)服務(wù)發(fā)布；使得數(shù)據(jù)使用者獲知公共數(shù)據(jù)服務(wù)接口與應(yīng)用的獲取方式、接口形式等信息，控制接口的可用性。數(shù)據(jù)應(yīng)用注冊(cè)：開發(fā)數(shù)據(jù)應(yīng)用注冊(cè)功能，實(shí)現(xiàn)公共數(shù)據(jù)應(yīng)用發(fā)布；可管理數(shù)據(jù)資源目錄與清單、公共數(shù)據(jù)服務(wù)接口與數(shù)據(jù)應(yīng)用的注冊(cè)，以及第三方數(shù)據(jù)服務(wù)的注冊(cè)。第三方數(shù)據(jù)服務(wù)支持方服務(wù)接口注冊(cè)：開發(fā)第三方數(shù)據(jù)服務(wù)支持方服務(wù)接口注冊(cè)功能，實(shí)現(xiàn)第三方數(shù)據(jù)服務(wù)支持方服務(wù)接口發(fā)布；公共數(shù)據(jù)服務(wù)接口與應(yīng)用注冊(cè)需維護(hù)公共數(shù)據(jù)服務(wù)接口清單，第三方數(shù)據(jù)服務(wù)支持方以接口形式提供應(yīng)用數(shù)據(jù)，便于數(shù)據(jù)使用者整合使用。提供接口獲取方式等信息，控制接口可用性。數(shù)據(jù)開放管理可通過該管理模塊對(duì)數(shù)據(jù)開放進(jìn)行全過程的管理，不僅需要包括目錄查看、數(shù)據(jù)信息項(xiàng)查看、數(shù)據(jù)應(yīng)用查看、接口信息查看在內(nèi)的一般性訪問，還需包括建立與劃分?jǐn)?shù)據(jù)主題，開放數(shù)據(jù)資源的收藏、訂閱與分發(fā)管理。除此之外，還需建立消息定義事件，由事件驅(qū)動(dòng)事物執(zhí)行的功能。數(shù)據(jù)主題建立：開發(fā)數(shù)據(jù)主題建立功能，建立并管理數(shù)據(jù)主題數(shù)據(jù)主題劃分：開發(fā)數(shù)據(jù)主題劃分功能，建立數(shù)據(jù)資源與主題的關(guān)聯(lián)消息事件管理：開發(fā)消息事件管理功能，按照消息定義建立事件，由事件驅(qū)動(dòng)事務(wù)的執(zhí)行一般性訪問：開發(fā)一般性訪問功能，包括目錄查看、數(shù)據(jù)信息查看、應(yīng)用信息查看、接口信息查看等功能收藏：開發(fā)收藏功能，注冊(cè)的訪問者收藏特定的數(shù)據(jù)集、接口、應(yīng)用訂閱：開發(fā)訂閱功能，注冊(cè)的訪問者可收藏對(duì)頻繁更新的同類數(shù)據(jù)資源訂閱分發(fā)：開發(fā)訂閱分發(fā)功能，當(dāng)數(shù)據(jù)資源更新時(shí)，系統(tǒng)根據(jù)事件向相關(guān)訂閱者推送平臺(tái)集成門戶擴(kuò)展平臺(tái)集成門戶：基于統(tǒng)一鑒權(quán)中心的基礎(chǔ)上實(shí)現(xiàn)多租戶管理，并根據(jù)租戶角色提供開發(fā)者門戶（內(nèi)部）、運(yùn)營(yíng)門戶以及開放門戶。并在門戶功能框架下實(shí)現(xiàn)消息推送、數(shù)據(jù)推送、個(gè)人信息管理、系統(tǒng)管理等功能。多租戶功能平臺(tái)集成門戶實(shí)現(xiàn)多租戶管理功能。多租戶能力：開發(fā)多租戶管理功能，實(shí)現(xiàn)按照用戶所屬職責(zé)可分為超級(jí)管理員，租戶管理員，普通租戶?？梢愿鶕?jù)需要?jiǎng)?chuàng)建包括系統(tǒng)管理員、運(yùn)營(yíng)人員、開發(fā)管理員、開發(fā)者等角色。租戶管理：開發(fā)租戶管理功能，實(shí)現(xiàn)以多租戶的思路，將數(shù)據(jù)能力和數(shù)據(jù)平臺(tái)數(shù)據(jù)處理能力按需、可控的進(jìn)行開放。租戶內(nèi)用戶管理：開發(fā)租戶內(nèi)用戶管理功能，實(shí)現(xiàn)租戶與系統(tǒng)用戶映射，以租戶的方式實(shí)現(xiàn)用戶及用戶組管理，以達(dá)到資源管控及數(shù)據(jù)權(quán)限控制的目的。租戶自注冊(cè)：開發(fā)租戶自注冊(cè)功能，通過租戶注冊(cè)流程實(shí)現(xiàn)租戶注冊(cè)。租戶注銷：開發(fā)租戶注銷功能，實(shí)現(xiàn)租戶管理員可以提交租戶注銷申請(qǐng)來釋放租戶的資源。運(yùn)營(yíng)中心建立運(yùn)營(yíng)中心，主要通過從大數(shù)據(jù)價(jià)值、評(píng)估、調(diào)用、用戶等多個(gè)維度構(gòu)建運(yùn)營(yíng)中心功能，提升平臺(tái)運(yùn)營(yíng)能力。開發(fā)運(yùn)維視圖功能，通過大屏、PC、移動(dòng)端三屏合一建立可視化運(yùn)維監(jiān)控界面，實(shí)現(xiàn)數(shù)據(jù)的統(tǒng)一運(yùn)維。數(shù)據(jù)地圖：開發(fā)數(shù)據(jù)地圖，實(shí)現(xiàn)對(duì)數(shù)據(jù)資產(chǎn)的可視化運(yùn)營(yíng)監(jiān)控。數(shù)據(jù)產(chǎn)品使用分析：開發(fā)數(shù)據(jù)產(chǎn)品使用分析功能，實(shí)現(xiàn)對(duì)數(shù)據(jù)產(chǎn)品使用情況統(tǒng)計(jì)分析，挖掘數(shù)據(jù)產(chǎn)品價(jià)值。數(shù)據(jù)價(jià)值評(píng)估：開發(fā)數(shù)據(jù)價(jià)值評(píng)估功能，可以從數(shù)據(jù)的內(nèi)在價(jià)值、市場(chǎng)價(jià)值等角度進(jìn)行數(shù)據(jù)價(jià)值評(píng)估。模型調(diào)用次數(shù)統(tǒng)計(jì)分析：開發(fā)模型調(diào)用次數(shù)統(tǒng)計(jì)分析功能，查看各數(shù)據(jù)模型調(diào)用情況，分析模型價(jià)值。平臺(tái)服務(wù)調(diào)用統(tǒng)計(jì)：開發(fā)服務(wù)調(diào)用統(tǒng)計(jì)功能，了解平臺(tái)對(duì)內(nèi)、對(duì)外服務(wù)被調(diào)用情況。用戶使用統(tǒng)計(jì)：開發(fā)用戶使用統(tǒng)計(jì)功能，掌握各委辦、區(qū)政府、外部機(jī)構(gòu)等受眾使用情況。開發(fā)中心建立開發(fā)中心門戶，主要為開發(fā)者提供統(tǒng)一開發(fā)者入口，通過開發(fā)者權(quán)限管理，實(shí)現(xiàn)讓開發(fā)者基于開發(fā)工具進(jìn)行程序開發(fā)。開發(fā)者權(quán)限管理：實(shí)現(xiàn)開發(fā)者權(quán)限管理功能，主要包括開發(fā)者登入鑒權(quán)、查看權(quán)限和權(quán)限描述的修改等。消息推送待辦事項(xiàng)：開發(fā)待辦事項(xiàng)功能，系統(tǒng)推送按人劃分的待辦事項(xiàng)，由使用者進(jìn)行查看通知公告：開發(fā)通知公告功能，系統(tǒng)推送通知公告信息，由使用者查看信息推薦：開發(fā)信息推薦功能，系統(tǒng)推送推薦信息，由使用者查看訂閱更新：開發(fā)訂閱更新功能，使用者訪問功能查看訂閱更新數(shù)據(jù)推送首頁(yè)數(shù)據(jù)：開發(fā)首頁(yè)數(shù)據(jù)功能，根據(jù)使用者身份進(jìn)行定制展示個(gè)人信息管理我的收藏：開發(fā)我的收藏功能，由使用者對(duì)收藏的各類信息和數(shù)據(jù)資源進(jìn)行查看、刪除我的訂閱：開發(fā)我的訂閱功能，由使用者對(duì)訂閱內(nèi)容進(jìn)行管理并查看更新系統(tǒng)管理入口集成及通知發(fā)布：開發(fā)通知發(fā)布功能，由管理員指定發(fā)布范圍提供發(fā)布信息進(jìn)行發(fā)布。數(shù)據(jù)開放門戶建立數(shù)據(jù)開放門戶：主要實(shí)現(xiàn)數(shù)據(jù)目錄、數(shù)據(jù)接口、數(shù)據(jù)應(yīng)用、數(shù)據(jù)圖譜、地圖數(shù)據(jù)、互動(dòng)交流、數(shù)據(jù)開發(fā)者、輔助事項(xiàng)、個(gè)人管理等各項(xiàng)門戶目錄的建設(shè)。用戶首頁(yè)：建設(shè)開放門戶首頁(yè)，首頁(yè)能夠包含數(shù)據(jù)目錄、數(shù)據(jù)接口、數(shù)據(jù)應(yīng)用、數(shù)據(jù)圖譜、地圖數(shù)據(jù)、互動(dòng)交流、數(shù)據(jù)開發(fā)者這些模塊的鏈接功能。首頁(yè)具備用戶登錄功能，登錄后可進(jìn)入個(gè)人管理，能夠?yàn)橛脩籼峁┵~戶個(gè)性化的服務(wù)。數(shù)據(jù)目錄：用戶能夠通過數(shù)據(jù)目錄模塊，獲取開放數(shù)據(jù)的數(shù)據(jù)目錄，能夠查看組成目錄的數(shù)據(jù)項(xiàng)描述，以及獲取目錄對(duì)應(yīng)的數(shù)據(jù)集；數(shù)據(jù)接口：用戶能夠以數(shù)據(jù)接口模式查詢指定數(shù)據(jù)目錄下以API數(shù)據(jù)接口形式開放的數(shù)據(jù)資源內(nèi)容數(shù)據(jù)應(yīng)用：用戶能夠在數(shù)據(jù)應(yīng)用欄目中查看利用開放數(shù)據(jù)資源形成的各種數(shù)據(jù)應(yīng)用，并可查看對(duì)應(yīng)數(shù)據(jù)應(yīng)用所使用到的開放數(shù)據(jù)資源內(nèi)容；數(shù)據(jù)圖譜：能以圖譜形式呈現(xiàn)開放數(shù)據(jù)業(yè)務(wù)所需的統(tǒng)計(jì)分析結(jié)果。業(yè)務(wù)統(tǒng)計(jì)邏輯包括但不限于以下幾個(gè)方面：數(shù)據(jù)資源統(tǒng)計(jì)、開放類型統(tǒng)計(jì)、數(shù)據(jù)類型統(tǒng)計(jì)、訪問分布統(tǒng)計(jì)、訪問省份排名、數(shù)據(jù)資源訪問情況、數(shù)據(jù)領(lǐng)域統(tǒng)計(jì)、用戶需求來源；地圖數(shù)據(jù)：能夠顯示集成地理信息的開放數(shù)據(jù)，并能顯示GIS地圖中所需的POI信息；互動(dòng)交流：互動(dòng)交流是用戶之間、用戶與運(yùn)營(yíng)人員之間的線上交流社區(qū)，包括：信息發(fā)布（最新消息、制度保障信息、用戶幫助信息）、 需求調(diào)研、問卷調(diào)查功能；數(shù)據(jù)開發(fā)者：數(shù)據(jù)開發(fā)者，是為具備具備數(shù)據(jù)開發(fā)能力用戶提供交流的線上交流平臺(tái)。能夠具備發(fā)帖、搜索、聊天交流、信息共享、提問反饋等分類的線上社區(qū)論壇功能；輔助事項(xiàng)：為開放門戶提供“關(guān)于我們”、“使用條款”、“友情鏈接”等門戶網(wǎng)站必須的服務(wù)信息說明與展示；個(gè)人管理：使用賬戶登錄門戶之后可以進(jìn)入的個(gè)人門戶模塊，可以提供登錄后收藏、訂閱、需求反饋等與賬號(hào)登錄之后相關(guān)的信息；服務(wù)類業(yè)務(wù)技術(shù)方案服務(wù)類業(yè)務(wù)主要包括數(shù)據(jù)采集對(duì)接服務(wù)、數(shù)據(jù)抽取運(yùn)維、作業(yè)調(diào)度運(yùn)維、數(shù)據(jù)資源治理服務(wù)、數(shù)據(jù)質(zhì)量管理服務(wù)、數(shù)據(jù)融合處理服務(wù)、數(shù)據(jù)分析應(yīng)用服務(wù)、數(shù)據(jù)標(biāo)注服務(wù)、應(yīng)用建模服務(wù)、數(shù)據(jù)接口開發(fā)服務(wù)、數(shù)據(jù)開放支撐服務(wù)、數(shù)據(jù)運(yùn)行監(jiān)管服務(wù)。數(shù)據(jù)采集對(duì)接服務(wù)我司將從政務(wù)服務(wù)業(yè)務(wù)梳理著手，開展公共數(shù)據(jù)梳理，形成公共數(shù)據(jù)“三清單”，并建立公共數(shù)據(jù)“三清單”的長(zhǎng)效動(dòng)態(tài)更新機(jī)制，依據(jù)“三清單”進(jìn)行公共數(shù)據(jù)歸集，夯實(shí)數(shù)據(jù)治理基礎(chǔ)。抽取數(shù)據(jù)業(yè)務(wù)理解、數(shù)據(jù)理解、目錄編制及數(shù)據(jù)協(xié)議適配、資源掛載、清洗等。數(shù)據(jù)采集服務(wù)數(shù)據(jù)采集理解數(shù)據(jù)采集(DAQ)，又稱數(shù)據(jù)獲取，是指從傳感器和其它待測(cè)設(shè)備等模擬和數(shù)字被測(cè)單元中自動(dòng)采集非電量或者電量信號(hào),送到上位機(jī)中進(jìn)行分析，處理。數(shù)據(jù)采集系統(tǒng)是結(jié)合基于計(jì)算機(jī)或者其他專用測(cè)試平臺(tái)的測(cè)量軟硬件產(chǎn)品來實(shí)現(xiàn)靈活的、用戶自定義的測(cè)量系統(tǒng)。采集一般是采樣方式，即隔一定時(shí)間（稱采樣周期）對(duì)同一點(diǎn)數(shù)據(jù)重復(fù)采集。采集的數(shù)據(jù)大多是瞬時(shí)值，也可是某段時(shí)間內(nèi)的一個(gè)特征值。根據(jù)數(shù)據(jù)來源進(jìn)行分類，數(shù)據(jù)采集分為大三類：系統(tǒng)文件日志的采集、網(wǎng)絡(luò)大數(shù)據(jù)采集、應(yīng)用程序接入。1、系統(tǒng)文件日志的采集：在現(xiàn)有的海量數(shù)據(jù)采集工具中，多用于系統(tǒng)日志采集，如Hadoop的Chukwa，Cloudera的Flume，F(xiàn)acebook的Scribe等，這些工具均采用分布式架構(gòu)，能滿足每秒數(shù)百M(fèi)B的日志數(shù)據(jù)采集和傳輸需求。Scribe：作為Facebook開源的日志收集系統(tǒng)，可以從各種日志源上收集日志，存儲(chǔ)到一個(gè)中央存儲(chǔ)系統(tǒng)上，以便于進(jìn)行集中的統(tǒng)計(jì)分析處理。Scribe為日志的“分布式收集，統(tǒng)一處理”提供了一個(gè)可擴(kuò)展的、高容錯(cuò)的方案。Chukwa：提供了一個(gè)對(duì)大數(shù)據(jù)量日志類數(shù)據(jù)采集、存儲(chǔ)、分析和展示的全套解決方案和框架，可以用于監(jiān)控大規(guī)模Hadoop集群的整體運(yùn)行情況并對(duì)它們的日志進(jìn)行分析。2、網(wǎng)絡(luò)大數(shù)據(jù)采集網(wǎng)絡(luò)數(shù)據(jù)采集是指通過網(wǎng)絡(luò)爬蟲或網(wǎng)站公開API等方式從網(wǎng)站上獲取數(shù)據(jù)信息。該方法可以將非結(jié)構(gòu)化數(shù)據(jù)從網(wǎng)頁(yè)中抽取出來，將其存儲(chǔ)為統(tǒng)一的本地?cái)?shù)據(jù)文件，并以結(jié)構(gòu)化的方式存儲(chǔ)。它支持圖片、音頻、視頻等文件或附件的采集，附件與正文可以自動(dòng)關(guān)聯(lián)。在互聯(lián)網(wǎng)時(shí)代，網(wǎng)絡(luò)爬蟲主要是為搜索引擎提供最全面和最新的數(shù)據(jù)。目前已經(jīng)知道的各種網(wǎng)絡(luò)爬蟲工具已經(jīng)有上百個(gè)，網(wǎng)絡(luò)爬蟲工具基本可以分為3類。分布式網(wǎng)絡(luò)爬蟲工具，如Nutch。Java網(wǎng)絡(luò)爬蟲工具，如Crawler4j、WebMagic、WebCollector。非Java網(wǎng)絡(luò)爬蟲工具，如Scrapy(基于Python語(yǔ)言開發(fā))。3、數(shù)據(jù)庫(kù)采集系統(tǒng)

通過數(shù)據(jù)庫(kù)采集系統(tǒng)直接與企業(yè)業(yè)務(wù)后臺(tái)服務(wù)器結(jié)合，將企業(yè)業(yè)務(wù)后臺(tái)每時(shí)每刻都在產(chǎn)生大量的業(yè)務(wù)記錄寫入到數(shù)據(jù)庫(kù)中，最后由特定的處理分許系統(tǒng)進(jìn)行系統(tǒng)分析。目前常用關(guān)系型數(shù)據(jù)庫(kù)MySQL和Oracle等來存儲(chǔ)數(shù)據(jù)，Redis和MongoDB這樣的NoSQL數(shù)據(jù)庫(kù)也常用于數(shù)據(jù)的采集。Hadoop的數(shù)據(jù)采集框架Hadoop提供了一個(gè)高度容錯(cuò)的分布式存儲(chǔ)系統(tǒng)，實(shí)現(xiàn)集中式的數(shù)據(jù)分析和數(shù)據(jù)共享。在日常應(yīng)用中要將各種數(shù)據(jù)采集到HDFS存儲(chǔ)服務(wù)中去，將數(shù)據(jù)采集到HDFS常用的框架包括：ApacheSqoopApacheFlumeGobblinDataXKettle針對(duì)特定數(shù)據(jù)源的采集工具:針對(duì)Cassandra數(shù)據(jù)源的Aegisthus，針對(duì)mongodb的mongo-hadoop。各個(gè)項(xiàng)目的特點(diǎn)及適用場(chǎng)景：ApacheSqoopSqoop：SQL-to-Hadoop,用于在關(guān)系型數(shù)據(jù)庫(kù)（RDBMS）和HDFS之間互相傳輸數(shù)據(jù)。Sqoop啟用了一個(gè)MapReduce任務(wù)來執(zhí)行數(shù)據(jù)采集任務(wù)，傳輸大量結(jié)構(gòu)化或半結(jié)構(gòu)化數(shù)據(jù)的過程是完全自動(dòng)化的。其主要通過JDBC和關(guān)系數(shù)據(jù)庫(kù)進(jìn)行交互，理論上支持JDBC的Database都可以使用Sqoop和HDFS進(jìn)行數(shù)據(jù)交互。Sqoop目前分為兩個(gè)版本Sqoop1和Sqoop2。這是兩個(gè)完全不同的版本，完全不兼容。Sqoop1了解的朋友都知道它就是一個(gè)命令行腳本，而Sqoop2相比Sqoop1引入了sqoopserver，集中化的管理Connector，引入基于角色的安全機(jī)制，而且支持多種訪問方式：cli客戶端，Webui和RestAPI。Sqoop不支持文件解析入庫(kù)，適用于關(guān)系型數(shù)據(jù)庫(kù)與HDFS/Hive/HBase之間互相傳輸數(shù)據(jù)。它支持多種關(guān)系型數(shù)據(jù)庫(kù)如mysql、oracle、postgresql?？梢愿咝Э煽氐倪M(jìn)行數(shù)據(jù)導(dǎo)入導(dǎo)出。GithubStar462,Fork362ApacheFlumeApacheFlume是一個(gè)分布式、可靠、高可用的日志收集系統(tǒng)，支持各種各樣的數(shù)據(jù)來源，如http，log文件，監(jiān)聽端口數(shù)據(jù)等等，將這些數(shù)據(jù)源的海量日志數(shù)據(jù)進(jìn)行高效收集、聚合、移動(dòng)，最后存儲(chǔ)到指定存儲(chǔ)系統(tǒng)中(可擴(kuò)展)，如kafka、HDFS分布式文件系統(tǒng)、Solr，HBase等。Flume基于流式數(shù)據(jù)，適用于日志和事件類型的數(shù)據(jù)收集，重構(gòu)后的Flume-NG版本中一個(gè)agent（數(shù)據(jù)傳輸流程）中的source（源）和sink（目標(biāo)）之間通過channel進(jìn)行鏈接，同一個(gè)源可以配置多個(gè)channel。多個(gè)agent還可以進(jìn)行鏈接組合共同完成數(shù)據(jù)收集任務(wù)，使用起來非常靈活。GithubStar1418,Fork1092GobblinGobblin是用來整合各種數(shù)據(jù)源的通用型ETL框架，在某種意義上，各種數(shù)據(jù)都可以在這里“一站式”的解決ETL整個(gè)過程，專為大數(shù)據(jù)采集而生。作為一個(gè)通用框架，Gobblin的接口封裝和概念抽象做的很好，作為一個(gè)ETL框架使用者，我們只需要實(shí)現(xiàn)我們自己的Source，Extractor，Conventer類，再加上一些數(shù)據(jù)源和目的地址之類的配置文件提交給Gobblin就行了。Gobblin相對(duì)于其他解決方案具有普遍性、高度可擴(kuò)展性、可操作性。GithubStar1381,Fork540DataXDataX是一個(gè)異構(gòu)數(shù)據(jù)源離線同步工具，致力于實(shí)現(xiàn)包括關(guān)系型數(shù)據(jù)庫(kù)(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各種異構(gòu)數(shù)據(jù)源之間穩(wěn)定高效的數(shù)據(jù)同步功能。被阿里開源之后的DataX社區(qū)并不活躍，但是好在程序的架構(gòu)設(shè)計(jì)的好，大部分用戶都會(huì)選擇fork之后基于其進(jìn)行二次開發(fā)。DataX本身由阿里開發(fā)對(duì)于阿里自身的數(shù)據(jù)庫(kù)比如ODPS、ADS等支持更好。GithubStar1128,Fork478KettleKettle是一款開源的ETL工具，純java編寫，可以在Window、Linux、Unix上運(yùn)行，綠色無(wú)需安裝，數(shù)據(jù)抽取高效穩(wěn)定。它允許你管理來自不同數(shù)據(jù)庫(kù)的數(shù)據(jù)，通過提供一個(gè)圖形化的用戶環(huán)境來描述你想做什么，而不是你想怎么做。Kettle中文名稱叫水壺，寓意就是希望把各種數(shù)據(jù)放到一個(gè)壺里，然后以一種指定的格式流出。Kettle是CS架構(gòu)，擁有自己的管理控制臺(tái)，同樣也可以通過Java代碼與我們的工程進(jìn)行集成，在程序中完成kettle的轉(zhuǎn)換、執(zhí)行等操作。GithubStar1956,Fork1476數(shù)據(jù)采集目錄FHS針對(duì)目錄樹架構(gòu)僅定義出三層目錄，三層目錄底下這三個(gè)目錄的定義：（1）/(root,根目錄)：與開機(jī)系統(tǒng)有關(guān)；（2）/usr(unixsoftwareresource)：與軟件安裝/執(zhí)行有關(guān)；（3）/var(variable)：與系統(tǒng)運(yùn)作過程有關(guān)。第一層次：/:根目錄根目錄，用“/”來表示，啟動(dòng)Linux,把所有核心的啟動(dòng)文件(包括Linux核心本身)都放到一個(gè)“/boot"目錄下。當(dāng)系統(tǒng)啟動(dòng)后，需要執(zhí)行一些基本命令在操作系統(tǒng)，這些命令都會(huì)放到“/bin"目錄下。然后這些命令可能會(huì)用到一些庫(kù)，這些庫(kù)就被放到“/lib"下面，而這些庫(kù)可能會(huì)用到一些設(shè)備驅(qū)動(dòng)文件，那么這些驅(qū)動(dòng)文件就會(huì)放到“/dev"目錄下。因此FHS定義出根目錄(/)底下的目錄如下表：/boot：存放開機(jī)啟動(dòng)加載程序的核心文件；(如kernel和grup)/bin：存放所有用戶都可以使用的linux基本操作命令；/sbin：系統(tǒng)管理相關(guān)的二進(jìn)制文件存放在這個(gè)目錄下，一些可執(zhí)行文件普通用戶只具備較小的權(quán)限；(多數(shù)管理命令默認(rèn)只有管理員可以使用)/lib：系統(tǒng)的函數(shù)庫(kù)非常的多，而/lib放置的則是在開機(jī)時(shí)會(huì)用到的函數(shù)庫(kù)，以及在/bin或/sbin底下的指令會(huì)呼叫的函數(shù)庫(kù)而已。/dev：設(shè)備文件目錄，虛擬文件系統(tǒng)，主要存放所有系統(tǒng)中device的相關(guān)信息，不論是使用的或未使用的設(shè)備，只要有可能使用到，就會(huì)在/dev中建立一個(gè)相對(duì)應(yīng)的設(shè)備文件；/media：移動(dòng)存儲(chǔ)設(shè)備默認(rèn)掛載點(diǎn)；(如光盤)/mnt：臨時(shí)掛載用的設(shè)備掛載點(diǎn)；(如磁盤分區(qū)，網(wǎng)絡(luò)共享)/opt：額外所安裝的應(yīng)用程序目錄,有些軟件包我們可以將它安裝在該目錄中；(一般為空，某些應(yīng)用軟件安裝需要這個(gè)目錄);這里主要存放那些可選的程序。你想嘗試最新的firefox測(cè)試版嗎?那就裝到/opt目錄下吧，這樣，當(dāng)你嘗試完，想刪掉firefox的時(shí)候，你就可以直接刪除它，而不影響系統(tǒng)其他任何設(shè)置。安裝到/opt目錄下的程序，它所有的數(shù)據(jù)、庫(kù)文件等等都是放在同個(gè)目錄下面。/etc：主機(jī)、系統(tǒng)或網(wǎng)絡(luò)配置文件存放目錄；/srv：主要用來存儲(chǔ)本機(jī)或本服務(wù)器提供的服務(wù)或數(shù)據(jù)。（用戶主動(dòng)生產(chǎn)的數(shù)據(jù)、對(duì)外提供服務(wù)）/tmp：保存在使用完畢后可隨時(shí)銷毀的緩存文件。/root：管理員root的宿主目錄/home：默認(rèn)存放用戶的宿主目錄(除了root用戶)。/proc:Linux系統(tǒng)上的/proc目錄是一種文件系統(tǒng)，即proc文件系統(tǒng)。與其它常見的文件系統(tǒng)不同的是，/proc是一種偽文件系統(tǒng)（也即虛擬文件系統(tǒng)），存儲(chǔ)的是當(dāng)前內(nèi)核運(yùn)行狀態(tài)的一系列特殊文件，用戶可以通過這些文件查看有關(guān)系統(tǒng)硬件及當(dāng)前正在運(yùn)行進(jìn)程的信息，甚至可以通過更改其中某些文件來改變內(nèi)核的運(yùn)行狀態(tài)。/sys：虛擬文件系統(tǒng)，被建立在內(nèi)存中，是在2.6版的kernel之后才被加入到正式的文件系統(tǒng)中，以分類的方式將系統(tǒng)的信息存放在這個(gè)目錄中，以方便linux用戶通過不同的分類找出系統(tǒng)相關(guān)的信息；/lost+found：當(dāng)系統(tǒng)在運(yùn)行時(shí)，有時(shí)會(huì)無(wú)法避免宕機(jī)、斷電或不正常重啟動(dòng)，在這樣的情況下，當(dāng)系統(tǒng)重新啟動(dòng)時(shí)，發(fā)現(xiàn)某些文件寫入未完成或其他問題產(chǎn)生，一般會(huì)使用fsck進(jìn)行文件修復(fù)，而這些被修復(fù)或救回的文件，就會(huì)被放在這個(gè)目錄下，只要是一個(gè)文件系統(tǒng)，系統(tǒng)就會(huì)自動(dòng)在該文件系統(tǒng)所在的目錄下建立"lost+found"目錄第二層次：/usr當(dāng)系統(tǒng)啟動(dòng)以后，需要其他一些用于具體工作的程序時(shí)，就會(huì)加載一個(gè)“/usr"目錄，上面放重要的運(yùn)行程序。usr為universalsoftwareresource通用軟件資源的縮寫。這個(gè)“/usr"有點(diǎn)類似Windows里面的ProgramFiles。當(dāng)軟件安裝好以后，需要用命令行去調(diào)用，則需要一個(gè)/usr/bin(軟件的基本命令)，調(diào)用命令需要用到頭文件和庫(kù)函數(shù)，則需要有/usr/include（頭文件存放處），/usr/lib（庫(kù)函數(shù)存放處）。而軟件的源碼則存放在/usr/src中。要點(diǎn)：1、/usr上面一般都是只讀文件，數(shù)據(jù)文件和配置文件不放在上面；2、沒有“/usr",linux系統(tǒng)也能正常運(yùn)行；3、/usr可以被多臺(tái)電腦共享(這里體現(xiàn)Linux系統(tǒng)的網(wǎng)絡(luò)性)。目錄1、/usr/bin：一般用戶有機(jī)會(huì)使用到的程序，或者該軟件默認(rèn)就是要讓所有用戶使用才會(huì)放在該目錄中；2、/usr/sbin：一些系統(tǒng)有可能會(huì)用到的系統(tǒng)命令，與/sbin比起來，都是一些較次要的文件；3、/usr/etc：自行安裝或非系統(tǒng)主要的配置文件目錄；/usr/games：只要是電腦游戲相關(guān)的軟件，就都安裝到這個(gè)目錄；4、/usr/include：存放的文件都是一些系統(tǒng)中用戶所會(huì)使用到的C語(yǔ)言header文件，保存的都是".h"的文件；5、/usr/lib：存放一些函數(shù)庫(kù)、執(zhí)行文件及連接文件，特別的是，存放在這里面的文件都是不希望直接被用戶或shell腳本所使用的文件，在/usr/lib中有非常多的子目錄，每一個(gè)軟件都有其各自所需的函數(shù)庫(kù)；6、/usr/local：這里主要存放那些手動(dòng)安裝的軟件，即不是通過“新立得”或apt-get安裝的軟件；7、/usr/share：此目錄都是一些共享信息，最常被用到的就是/usr/share/man這個(gè)目錄，/usr/share里的信息時(shí)跨平臺(tái)的；8、/usr/src：主要儲(chǔ)存內(nèi)核源代碼的文件；9、/usr/X11R6：存放一些Xwindows系統(tǒng)的相關(guān)文件；第三層次：/var由于/usr只放只讀文件，那么配置文件和數(shù)據(jù)文件放哪里呢?就是/etc和/var。在歷史上“var"是“variable"，中文意為“變動(dòng)”。/var目錄主要針對(duì)常態(tài)性變動(dòng)的文件，包括緩存(cache)、登錄檔(logfile)以及某些軟件運(yùn)作所產(chǎn)生的文件，例如/var/mysql就是用來存放mysql的log，這樣就進(jìn)入了第三層次/var。關(guān)于該層次的東西我涉及的較好，沒有理出頭緒來，只能等到以后對(duì)這方面更加了解是再補(bǔ)上了。數(shù)據(jù)協(xié)議適配數(shù)據(jù)在不同的協(xié)議中的叫法不同，數(shù)據(jù)在傳輸層叫數(shù)據(jù)段，網(wǎng)絡(luò)層叫數(shù)據(jù)報(bào)，數(shù)據(jù)鏈路層叫數(shù)據(jù)幀。將公共數(shù)據(jù)可以在不同的協(xié)議中均可以適配。數(shù)據(jù)資源掛載1、掛載概念在windows操作系統(tǒng)中，掛載通常是指給磁盤分區(qū)（包括被虛擬出來的磁盤分區(qū)）分配一個(gè)盤符。這個(gè)操作可以通過“計(jì)算機(jī)管理”中的“磁盤管理”來進(jìn)行。第三方軟件，如磁盤分區(qū)管理軟件、虛擬磁盤軟件等，通常也附帶掛載功能。在linux操作系統(tǒng)中，掛載是一個(gè)非常重要的功能，使用非常頻繁。它指將一個(gè)設(shè)備（通常是存儲(chǔ)設(shè)備）掛接到一個(gè)已存在的目錄上。（這個(gè)目錄可以不為空，但掛載后這個(gè)目錄下以前的內(nèi)容將不可用。）需要理解的是，linux操作系統(tǒng)將所有的設(shè)備都看作文件，它將整個(gè)計(jì)算機(jī)的資源都整合成一個(gè)大的文件目錄。我們要訪問存儲(chǔ)設(shè)備中的文件，必須將文件所在的分區(qū)掛載到一個(gè)已存在的目錄上，然后通過訪問這個(gè)目錄來訪問存儲(chǔ)設(shè)備。2、掛載條件（1）掛載點(diǎn)必須是一個(gè)目錄。（2）一個(gè)分區(qū)掛載在一個(gè)已存在的目錄上，這個(gè)目錄可以不為空，但掛載后這個(gè)目錄下以前的內(nèi)容將不可用。對(duì)于其他操作系統(tǒng)建立的文件系統(tǒng)的掛載也是這樣。3、系統(tǒng)格式需要理解的是：光盤、軟盤、其他操作系統(tǒng)使用的文件系統(tǒng)的格式與linux使用的文件系統(tǒng)格式是不一樣的。光盤是ISO9660；軟盤是fat16或ext2；windowsNT是fat16、NTFS；windows98是fat16、fat32；windows2000和windowsXP是fat16、fat32、NTFS。掛載前要了解linux是否支持所要掛載的文件系統(tǒng)格式。4、掛載命令掛載時(shí)使用mount命令：格式：mount[-參數(shù)][設(shè)備名稱][掛載點(diǎn)]其中常用的參數(shù)有：-t<文件系統(tǒng)類型>指定設(shè)備的文件系統(tǒng)類型，常見的有：minixlinux最早使用的文件系統(tǒng)ext2linux常用的文件系統(tǒng)msdos

MS-DOS的fat，就是fat16vfatwindows98常用的fat32nfs

網(wǎng)絡(luò)文件系統(tǒng)iso9660

CD-ROM光盤標(biāo)準(zhǔn)文件系統(tǒng)ntfswindowsNT2000的文件系統(tǒng)hpfsOS/2文件系統(tǒng)auto自動(dòng)檢測(cè)文件系統(tǒng)-o<選項(xiàng)>指定掛載文件系統(tǒng)時(shí)的選項(xiàng)。有些也可用在/etc/fstab中。常用的有codepage=XXX

代碼頁(yè)

iocharset=XXX

字符集

ro以只讀方式掛載rw以讀寫方式掛載nouser使一般用戶無(wú)法掛載user可以讓一般用戶掛載設(shè)備數(shù)據(jù)清洗和處理數(shù)據(jù)原始數(shù)據(jù)來自于各個(gè)業(yè)務(wù)系統(tǒng)，通常存在指標(biāo)口徑不一致、重復(fù)、不完整（感興趣的屬性沒有值）、存在錯(cuò)誤或異常（偏離期望值）的數(shù)據(jù)。綜上問題可以通過以下四點(diǎn)進(jìn)行解決：數(shù)據(jù)清洗：去掉噪聲和無(wú)關(guān)數(shù)據(jù)數(shù)據(jù)集成：將多個(gè)數(shù)據(jù)源中的數(shù)據(jù)結(jié)合起來存放在一個(gè)一致的數(shù)據(jù)存儲(chǔ)中數(shù)據(jù)變換：把原始數(shù)據(jù)轉(zhuǎn)換成為適合數(shù)據(jù)挖掘的形式數(shù)據(jù)歸約：數(shù)據(jù)立方體聚集，維歸約，數(shù)據(jù)壓縮，數(shù)值歸約，離散化和概念分層等數(shù)據(jù)對(duì)接服務(wù)1、軟件接口對(duì)接方式各個(gè)軟件廠商提供數(shù)據(jù)接口，實(shí)現(xiàn)數(shù)據(jù)匯集，為客戶構(gòu)建出自己的業(yè)務(wù)大數(shù)據(jù)平臺(tái)；實(shí)現(xiàn)過程如下：（1）協(xié)調(diào)多方軟件廠商工程師，了解對(duì)方系統(tǒng)的業(yè)務(wù)流程以及數(shù)據(jù)庫(kù)相關(guān)的表結(jié)構(gòu)設(shè)計(jì)等，討論如何實(shí)現(xiàn)數(shù)據(jù)的正確匯集并且在業(yè)務(wù)上可行。推敲各個(gè)細(xì)節(jié)，最后確定一個(gè)雙方都認(rèn)可的方案。兩個(gè)系統(tǒng)的接口是在雙方工程師的配合下完成的。有的處理可以在A系統(tǒng)進(jìn)行，也可以在B系統(tǒng)進(jìn)行，這種情況作決定的依據(jù)是，考慮以后可能會(huì)出現(xiàn)功能改動(dòng)，勢(shì)必會(huì)對(duì)現(xiàn)有系統(tǒng)造成影響，選擇受變動(dòng)影響比較小的方案。（2）確定方案，編碼（3）編碼結(jié)束，進(jìn)入測(cè)試、調(diào)試階段（4）交付使用接口對(duì)接方式的數(shù)據(jù)可靠性較高，一般不存在數(shù)據(jù)重復(fù)的情況，且都是客戶業(yè)務(wù)大數(shù)據(jù)平臺(tái)需要的有價(jià)值的數(shù)據(jù)；同時(shí)數(shù)據(jù)是通過接口實(shí)時(shí)傳遞過來，完全滿足了大數(shù)據(jù)平臺(tái)對(duì)于實(shí)時(shí)性的要求。但是接口對(duì)接方式需花費(fèi)大量人力和時(shí)間協(xié)調(diào)各個(gè)軟件廠商做數(shù)據(jù)接口對(duì)接；同時(shí)其擴(kuò)展性不高，比如：由于業(yè)務(wù)需要各軟件系統(tǒng)開發(fā)出新的業(yè)務(wù)模塊，其和大數(shù)據(jù)平臺(tái)之間的數(shù)據(jù)接口也需要做相應(yīng)的修改和變動(dòng)，甚至要推翻以前的所有數(shù)據(jù)接口編碼，工作量很大且耗時(shí)長(zhǎng)。數(shù)據(jù)抽取運(yùn)維服務(wù)我司日常數(shù)據(jù)抽取任務(wù)維護(hù)，保障各信息系統(tǒng)數(shù)據(jù)及時(shí)準(zhǔn)確地匯聚，對(duì)于問題抽取任務(wù)的進(jìn)行處置調(diào)整ETL是將業(yè)務(wù)系統(tǒng)的數(shù)據(jù)經(jīng)過抽取、清洗轉(zhuǎn)換之后加載到數(shù)據(jù)倉(cāng)庫(kù)的過程，目的是將企業(yè)中的分散、零亂、標(biāo)準(zhǔn)不統(tǒng)一的數(shù)據(jù)整合到一起，為企業(yè)的決策提供分析依據(jù)。數(shù)據(jù)的抽取是從各個(gè)不同的數(shù)據(jù)源抽取到ODS(OperationalDataStore，操作型數(shù)據(jù)存儲(chǔ))中——這個(gè)過程也可以做一些數(shù)據(jù)的清洗和轉(zhuǎn)換)，在抽取的過程中需要挑選不同的抽取方法，盡可能的提高ETL的運(yùn)行效率。數(shù)據(jù)抽取這一部分需要在調(diào)研階段做大量的工作，首先需求清除數(shù)據(jù)是從幾個(gè)業(yè)務(wù)系統(tǒng)中來,各個(gè)業(yè)務(wù)系統(tǒng)的數(shù)據(jù)庫(kù)服務(wù)器運(yùn)行什么DBMS,是否存在手工數(shù)據(jù)，手工數(shù)據(jù)量有多大，是否存在非結(jié)構(gòu)化的數(shù)據(jù)等等，當(dāng)收集完這些信息之后才可以進(jìn)行數(shù)據(jù)抽取的設(shè)計(jì)。1、對(duì)于與存放DW的數(shù)據(jù)庫(kù)系統(tǒng)相同的數(shù)據(jù)源處理方法這一類數(shù)據(jù)源在設(shè)計(jì)上比較容易。一般情況下，DBMS(SQLServer、Oracle)都會(huì)提供數(shù)據(jù)庫(kù)鏈接功能，在DW數(shù)據(jù)庫(kù)服務(wù)器和原業(yè)務(wù)系統(tǒng)之間建立直接的鏈接關(guān)系就可以寫Select語(yǔ)句直接訪問。2、對(duì)于與DW數(shù)據(jù)庫(kù)系統(tǒng)不同的數(shù)據(jù)源的處理方法對(duì)于這一類數(shù)據(jù)源，一般情況下也可以通過ODBC的方式建立數(shù)據(jù)庫(kù)鏈接——如SQLServer和Oracle之間。如果不能建立數(shù)據(jù)庫(kù)鏈接，可以有兩種方式完成，一種是通過工具將源數(shù)據(jù)導(dǎo)出成.txt或者是.xls文件，然后再將這些源系統(tǒng)文件導(dǎo)入到ODS中。另外一種方法是通過程序接口來完成。3、對(duì)于文件類型數(shù)據(jù)源(.txt,.xls)可以培訓(xùn)業(yè)務(wù)人員利用數(shù)據(jù)庫(kù)工具將這些數(shù)據(jù)導(dǎo)入到指定的數(shù)據(jù)庫(kù)，然后從指定的數(shù)據(jù)庫(kù)中抽取。或者還可以借助工具實(shí)現(xiàn)。4、增量更新的問題對(duì)于數(shù)據(jù)量大的系統(tǒng)，必須考慮增量抽取。一般情況下，業(yè)務(wù)系統(tǒng)會(huì)記錄業(yè)務(wù)發(fā)生的時(shí)間，我們可以用來做增量的標(biāo)志,每次抽取之前首先判斷ODS中記錄最大的時(shí)間，然后根據(jù)這個(gè)時(shí)間去業(yè)務(wù)系統(tǒng)取大于這個(gè)時(shí)間所有的記錄。利用業(yè)務(wù)系統(tǒng)的時(shí)間戳，一般情況下，業(yè)務(wù)系統(tǒng)沒有或者部分有時(shí)間戳。數(shù)據(jù)運(yùn)維數(shù)據(jù)抽取任務(wù)維護(hù)-劃分種類1、按領(lǐng)域來劃分（1）、基礎(chǔ)設(shè)施運(yùn)維：IDC/網(wǎng)絡(luò)運(yùn)維、服務(wù)器/存儲(chǔ)設(shè)備運(yùn)維（2）、系統(tǒng)運(yùn)維：系統(tǒng)中間件運(yùn)維、云計(jì)算平臺(tái)運(yùn)維（3）、數(shù)據(jù)運(yùn)維：數(shù)據(jù)庫(kù)運(yùn)維、大數(shù)據(jù)技術(shù)平臺(tái)運(yùn)維（4）、應(yīng)用運(yùn)維：應(yīng)用軟件系統(tǒng)（5）、云平臺(tái)運(yùn)維：公有云平臺(tái)運(yùn)維（6）、容器運(yùn)維：基于容器服務(wù)的運(yùn)維2、按技術(shù)切面劃分（1）、安全運(yùn)維（2）、性能運(yùn)維（3）、數(shù)據(jù)運(yùn)維（4）、集成運(yùn)維3、按流程來劃分（1）、構(gòu)建/持續(xù)集成、發(fā)布（2）、安裝部署、升級(jí)、遷移、合并、擴(kuò)展（3）、配置、初始化、配置變更（4）、備份、傳輸、恢復(fù)（5）、日志、監(jiān)控、預(yù)警（6）、診斷排查、優(yōu)化數(shù)據(jù)抽取任務(wù)維護(hù)-收集日志1、系統(tǒng)日志系統(tǒng)日志主要指的是操作系統(tǒng)的日志，主要在/var/log下的各種日志信息。包含系統(tǒng)操作日志、系統(tǒng)安全日志、定時(shí)任務(wù)日志等。系統(tǒng)日志是運(yùn)維管理安全模塊中審計(jì)的重要依據(jù)。一般默認(rèn)的操作系統(tǒng)日志不能滿足要求，需要對(duì)系統(tǒng)的參數(shù)進(jìn)行修改，如為history命令加上時(shí)間戳、IP，并且長(zhǎng)久保留歷史等功能。并且對(duì)日志文件進(jìn)行處理，不允許用戶進(jìn)行清空命令，只能追加。2、應(yīng)用日志應(yīng)用日志主要記錄應(yīng)用服務(wù)的健康運(yùn)行情況以及業(yè)務(wù)操作的具體日志兩部分。應(yīng)用監(jiān)控運(yùn)行情況反應(yīng)應(yīng)用服務(wù)的健康狀態(tài)，如果應(yīng)用占用CPU或是內(nèi)存過高或是忽高忽低不定，都可以通過分析應(yīng)用日志結(jié)合業(yè)務(wù)操作日志得出結(jié)論。業(yè)務(wù)操作日志可以為業(yè)務(wù)審計(jì)提供主要依據(jù)。有一些系統(tǒng)喜歡把業(yè)務(wù)操作日志寫到數(shù)據(jù)庫(kù)中，這個(gè)也是需要注意的。不過不管在哪個(gè)地方，要求是不可缺少的，它為以后業(yè)務(wù)審計(jì)和問題返查提供依據(jù)。3、數(shù)據(jù)庫(kù)日志數(shù)據(jù)庫(kù)日志主要反饋數(shù)據(jù)庫(kù)的運(yùn)行情況。通過監(jiān)控和管理數(shù)據(jù)庫(kù)的日志，及時(shí)了解數(shù)據(jù)庫(kù)的運(yùn)行情況，遇到問題及時(shí)解決等。可以通過數(shù)據(jù)庫(kù)日志結(jié)合數(shù)據(jù)庫(kù)系統(tǒng)自帶的數(shù)據(jù)庫(kù)如Oracle的系統(tǒng)視圖v$開頭，MySQL的performance_schema等。雖然數(shù)據(jù)庫(kù)的一些信息不是存在日志中而是在數(shù)據(jù)庫(kù)里面，但是也可以作為數(shù)據(jù)庫(kù)日志的一部分進(jìn)行管理和監(jiān)控，已便我們及時(shí)知道數(shù)據(jù)庫(kù)的監(jiān)控狀況，從而預(yù)防可能出現(xiàn)的問題。4、設(shè)備日志設(shè)備日志一般是一個(gè)比較容易忽略的地方，但設(shè)備日志往往可以反映設(shè)備的運(yùn)行情況。交換機(jī)故障，防火墻故障等設(shè)備故障都可能引起大面積的系統(tǒng)和服務(wù)故障。所以設(shè)備日志一定要收集，分析和監(jiān)控預(yù)警。常用的設(shè)備日志有交換機(jī)日志、防火墻日志、網(wǎng)絡(luò)安全設(shè)備日志等。數(shù)據(jù)運(yùn)維要通過各種手段完成日志的收集、過濾分析、可視化展示。數(shù)據(jù)抽取任務(wù)維護(hù)-運(yùn)維監(jiān)控大數(shù)據(jù)分析最早就來源于運(yùn)維人的日志分析，到逐漸發(fā)展對(duì)各種業(yè)務(wù)的分析，人們發(fā)現(xiàn)這些數(shù)據(jù)蘊(yùn)涵著非常大的價(jià)值，通過實(shí)時(shí)監(jiān)測(cè)、跟蹤研究對(duì)象在互聯(lián)網(wǎng)上產(chǎn)生的海量行為數(shù)據(jù)，進(jìn)行挖掘分析，揭示出規(guī)律性的東西，提出研究結(jié)論和對(duì)策。這就是大數(shù)據(jù)的用途。

同樣，通過大數(shù)據(jù)分析，我們可以得到各種指標(biāo)，例如：在業(yè)務(wù)層面：如業(yè)務(wù)每秒訪問數(shù)，每秒驗(yàn)券數(shù)，每分鐘支付、創(chuàng)建訂單等。在應(yīng)用層面：每個(gè)應(yīng)用的錯(cuò)誤數(shù)，調(diào)用過程，訪問的平均耗時(shí)，最大耗時(shí)，95線等在系統(tǒng)資源層面：如cpu、內(nèi)存、swap、磁盤、load、主進(jìn)程存活等。在網(wǎng)絡(luò)層面：如丟包、ping存活、流量、tcp連接數(shù)等。而這些指標(biāo)，剛好是運(yùn)維特別需要的東西。通過大數(shù)據(jù)分析出的這些指標(biāo)，可以解決如下方面的問題：系統(tǒng)健康狀況監(jiān)控、查找故障根源、系統(tǒng)瓶頸診斷和調(diào)優(yōu)、追蹤安全相關(guān)問題。數(shù)據(jù)運(yùn)維監(jiān)控，分為三部分：獲取需要的數(shù)據(jù)、過濾出異常數(shù)據(jù)并設(shè)置告警閥值、通過第三方監(jiān)控平臺(tái)進(jìn)行告警；所有系統(tǒng)最可靠的就是日志輸出，系統(tǒng)是不是正常，發(fā)生了什么情況，我們以前是出了問題去查日志，或者自己寫個(gè)腳本定時(shí)去分析。需要將以上內(nèi)容內(nèi)容整合到同一平臺(tái)上，再定義分析日志的邏輯。數(shù)據(jù)抽取任務(wù)維護(hù)-運(yùn)維平臺(tái)數(shù)據(jù)運(yùn)維平臺(tái)基本具備功能：1、服務(wù)臺(tái)作為運(yùn)維人員與用戶聯(lián)系的接口，受理呼叫請(qǐng)求、人工報(bào)障等服務(wù)事件，智能過濾故障報(bào)警，輔助填報(bào)工單，幫助值守人員高效處理事件。2、事件管理對(duì)事件工單進(jìn)行自動(dòng)分配、多級(jí)聯(lián)動(dòng)，并按事件的優(yōu)先級(jí)和緊急程度進(jìn)行排序，記錄事件處理的全過程，保證盡快恢復(fù)被中斷或受到影響的IT業(yè)務(wù)。3、問題管理通過配置管理數(shù)據(jù)庫(kù)對(duì)問題根本原因進(jìn)行輔助分析，通過生成變更請(qǐng)求（RFC）、聯(lián)動(dòng)知識(shí)庫(kù)，對(duì)問題進(jìn)行全生命期管理，確保有效的解決問題。4、變更管理確保在IT服務(wù)或設(shè)備變動(dòng)過程中能夠有標(biāo)準(zhǔn)的方法，以有效的控制變更，降低或消除因?yàn)樽兏鼘?duì)業(yè)務(wù)造成的影響和問題，使變更能夠有效進(jìn)行。5、協(xié)助工單管理作為事件處理、變更處理、問題處理等活動(dòng)的輔助支撐，自動(dòng)關(guān)聯(lián)主單的相關(guān)信息，有助于故障的快速解決，并規(guī)范跨部門協(xié)作流程，有效提高運(yùn)維效率。6、配置管理配置管理數(shù)據(jù)庫(kù)（CMDB）包含了IT設(shè)備的各類信息與關(guān)聯(lián)，將錯(cuò)綜復(fù)雜的IT設(shè)備以及其相互影響梳理清晰，為事件處理、問題分析和資產(chǎn)管理提供數(shù)據(jù)支持。7、資產(chǎn)管理覆蓋數(shù)據(jù)中心資產(chǎn)全生命周期管理活動(dòng)，包含庫(kù)存管理、上下架管理、盤點(diǎn)管理等多個(gè)子模塊。通過獨(dú)創(chuàng)的資產(chǎn)檢測(cè)專利技術(shù)，可實(shí)現(xiàn)精確至U位的資產(chǎn)定位。8、容量管理通過數(shù)學(xué)建模，清晰有效地展示數(shù)據(jù)中心各梯度的容量實(shí)時(shí)信息，為機(jī)房規(guī)劃、擴(kuò)容等戰(zhàn)略規(guī)劃提供決策信息，為設(shè)備部署提供有效指導(dǎo)與管控。9、供應(yīng)商管理對(duì)供應(yīng)商信息進(jìn)行智能化管理，提供智能預(yù)警與報(bào)警功能，有效實(shí)現(xiàn)與資產(chǎn)管理和事件處理聯(lián)動(dòng)，為運(yùn)維人員提供有效的設(shè)備參考信息。10、服務(wù)級(jí)別管理具有強(qiáng)大的自定義SLA功能，依據(jù)級(jí)別合理配置資源、控制成本，并能自動(dòng)根據(jù)業(yè)務(wù)類型、資產(chǎn)類型等條件自動(dòng)啟用合適的SLA，是服務(wù)質(zhì)量管理的有效保證。11、報(bào)表管理內(nèi)置近百種報(bào)表模塊，并可以