NNIT大數據解決方案創造數據的價值

1.WhyBigData2.WhyNNIT3.解決方案詳細內容4.案例21.WhyBigData

3數據爆發時代的到來通過媒體流通的信息量的變遷比特數（×1017）【出處】2010年度信息流通統計調查報告書未被利用的信息19982000200220042008200004000060000800000被利用的信息量流通的信息量2006■2025年,社會的信息量爆發為06年的200倍！

■今后如何利用大量未開發信息來創造新價值，是我們的課題多媒體信息網絡電影/圖像電視機?收音機社會媒體等

非結構化數據的增加企業內信息

交易信息日志信息

模擬數據數字化傳感器?機器等生成的信息

圖像/各種測量數據未被利用的信息比例99.4%4信息時代無所不在的數據來源

云計算中心商業旅游科研工業農林水產物流金融機構大廈公共設施住宅學校醫院賓館車站能源站商店回收設施工廠城市管理基礎設施通信能源交通水學習生活工作移動互聯網放送固定手機新能源煤氣大規模集中電源蓄電池鐵道航空海運道路上水處理下水處理產業排水處理5大數據的商業價值美國第二大百貨商Target通過數據分析幫助銷售額提升超過50%廣告信原有的美國嬰兒用品營銷: 根據公開的出生記錄在嬰兒出生后，海量的廣告促銷Target的基于大數據分析的營銷: 分析消費者的行為，對孕婦進行提前促銷購買無香護手霜,善存鈣片等分析數據廣告信6大數據技術的應用行業7搜索社交游戲視頻流通電信醫療交通公安制造航空電力金融民生核心～２０１２２０１２～

2.WhyNNIT8大數據平臺整體及NNIT注重領域處理大量數據處理多媒體數據數據庫分布式處理面部識別圖像分析數據挖掘語音識別：：運營商收集處理數據保健金融能源交通?物流安全推動人?物?IT系統之間的互動互聯網數據WebDBLog傳感器數據統計分析數據挖掘②對應激增的數據③處理不同類型的數據①從傳感器?機器收集信息←NNIT注重領域提供大數據處理平臺設計/構筑服務(使用NEC及開源產品)定制開發大數據處理系統(可能需要與NEC其他部門或其他公司合作)9面向的客戶NNIT大數據平臺的潛在客戶具有以下特點：

有大量的文件或者數據需要處理/存儲/訪問例：醫療影像、地圖文件、GPS記錄、電商網站的海量圖片非ＯＬＴＰ(非面向實時交易的系統)例：銀行BI、谷歌街景、FaceBook等不會頻繁修改已有數據內容例：ERP系統不適合使用10NNIT大數據據解決決方案案特點點高性價價比?使用通通用硬硬件比比使用用存儲儲設備備節省省３００％以以上便捷?平臺管管理通通過專專用圖圖形化化管理理系統統ＯＤＤＰＭＭ，操操作便便捷?通過掛掛載可可在１１分鐘鐘內開開始應應用系系統與與平臺臺間的的文件件交互互而無無需修修改應應用易擴展展?在管理理系統統上簡簡單操操作即即可通通過增增加節節點來來提升升系統統存儲儲容量量及性性能?平臺存存儲量量從１１０ＴＴＢ擴擴展到到１００ＰＢＢ也只只需簡簡單增增加節節點即即可完完成?平臺性性能隨隨節點點增加加線形形增長長整體解解決方方案?我們提提供從從系統統整體體設計計優化化、定定制開開發到到數據據遷移移、系系統實實施等等相關關服務的的整體體解決決方案案11ＮＮＩＩＴ大大數據據平臺臺ODPF體系12MapReduce分布式式處理理組件件ＯＦＳ分布式式文件件存儲儲系統統ＯＤＢＢ*1KVS型分布布式DBＯＤＰＰＭ圖形化化的平臺管管理系系統*1：現版版本ODPF的分布布式數數據庫庫主要要功能能以Hbase為主上圖為為平臺臺管理理系統統ODPMＯＤＰＰＦ其他Hadoop生態圈圈組件件SQL支持，，數據據遷移移，ETL等平臺綜綜合管管理系系統ODPM?整體一一站式式管理理-管理作作為前前端主主機的的web/DB服務器器(可為虛虛擬機機)-管理NNIT大數據據平臺臺的整整體配配置/硬件/組件/運行狀狀態等等-管理平平臺中中的文文件和和數據據?豐富的的管理理功能能使平平臺運運用更更便捷捷-Wizard向導功功能：：初期期安裝裝，節節點追追加等等-配置管管理：：平臺臺的初初期設設定及及修改改等-運維管管理：：監控控、報報警等等-數據管管理：：文件件及數數據的的訪問問控制制，副副本管管理，，內容容檢索索等13前端主主機管管理界界面OFSVolume管理界界面文件系系統OFS14WebServer應用程程序直直接讀讀寫存存放在在平臺臺上的的文件件和數數據JmeterJmeterJmeter數據節節點JmeterJmeterJmeter數據節節點DBServerWebServerDBServer分布式式文件件系統統(從KB大小的的數十十億海海量地地圖圖圖片到到GB級別的的數據據庫文文件)ＯＦＳ?便捷：：無需需修改改前端端應用用程序序即可可連接接OFS進行讀讀寫?高擴展展性：：通過過簡單單追加加數據據節點點即可可線性性擴展展存儲儲容量量與性性能?高性價價比：：硬件件使用用通用用x86服務器器避免免昂貴貴小型型機和和存儲儲設備備?高可用用性：：自動動副本本管理理機制制對應應硬件件故障障3.解決方方案詳詳細內內容15服務內內容（（基于于數據據生命命周期期）數據生生成數據存存儲數據處處理數據應應用分布式式數據據庫，，分布布式文文件系系統采集、、監測測軟件件智能搜搜索與與分析析軟件件系統集集成、、IT基礎設設施服服務咨詢實實施服服務信息安安全平臺設設備（（網絡絡設備備、服服務器器等））采集設設備信息服服務硬件基礎軟軟件應用軟軟件NNIT提供部部分NNIT與母公公司或或合作作伙伴伴共同同提供供部分分16解決方方案內內容#項目內容1信息服務系統集成整體解決方案2咨詢顧問數據應用咨詢3平臺開發咨詢4IT基礎設施面向私有云的IDC需求設計5IaaS/PaaS6程序開發數據層應用程序開發7性能測試AP/DB/Filesystem層面的性能測試8應用軟件采集，檢測軟件9智能搜索與分析軟件10基礎軟件數據庫SQL+NoSQL11非關系型數據庫NoSQL12分布式文件系統13數據處理中間件14系統管理15硬件數據采集設備各種傳感器，攝像頭等等16數據平臺設備網絡設備，服務器等NNIT注力領領域17解決方方案內內容（（信息息服務務）#項目內容備注1信息服務系統集成整體解決方案整合母公司及合作伙伴資源提供一站式服務2咨詢顧問數據應用咨詢幫助客戶找出數據的附加價值3平臺開發咨詢根據客戶需求提案大數據平臺4IT基礎設施面向私有云的IDC需求設計基于業務發展規劃的IDC需求設計5IaaS/PaaS使用日電東軟IaaS/PaaS作為基礎平臺6程序開發數據層應用程序開發對應用程序中需要與數據庫及文件系統等平臺層交互的數據層進行開發7性能測試AP/DB/FS層的性能測試性能測試及系統優化18服務內內容（（基礎礎軟件件）#項目內容備注10基礎軟件數據庫SQL+NoSQLMySQL+ＯＦＳ,IFS(InfoFrameRelationalStore,byNEC)等11ＯＤＢ，Ｈｂａｓｅ12分布式文件系統ＯＦＳ可通過ＮＦＳ直接操作文件或應用系統使用ＡＰＩ操作文件13數據處理中間件HIVE,Pig,Sqoop等14平臺管理ＯＤＰＭ圖形化的平臺綜合管理系統19目錄4.案例20NNIT案例(1):移動位位置服服務21作為移移動位位置服服務的的后端端平臺臺提供供文件件及數數據的的存儲儲和訪訪問NNIT案例(1):移動位位置服服務22內測版版:初期系系統規規模:14臺機架架式服服務器器（其其中8臺用于于大數數據集集群））初期數數據規規模:100T?20億個文文件(30KB/個的地地圖圖圖片及及500KB/個的衛衛星實實景照照片)?數十萬萬臺車車的GPS信息(2條/分)?用戶上上傳的的照片片等文文件系統性性能：：?地圖訪訪問并并發：：受限限于互互聯網網帶寬寬(平臺內內部支支持萬萬兆數數據交交換)?GPS數據上上傳并并發：：每數數據庫庫節點點1400條/秒NNIT案例(2):油井管管理平平臺云平臺臺用大數數據處處理平平臺分分析處處理來來自物物聯網網傳感感器的的海量量數據據23NNIT案例(2):油井管管理平平臺24初期系系統規規模:2千口新新式油油井(國內油油井數數7萬口)初期數數據規規模:容量:2TB+,數據條條數:二十億億條以以上(每口井井每分分發送送2次1K數據包包，保保存1年以上上)系統效效果：：提高生生產效效率及及管理理水平平●中短期期故障障(結蠟，，卡泵泵，短短路，，漏液液等)自動分分析，，●中長期期生產產經營營信息息(產量，，電力力成本本控制制等)自動分分析NNIT案例(2):油井管管理平平臺251億條數數據:3臺8Corex86服務器器10億條數數據：：5臺100億條數數據：：10臺對全數數據進進行帶帶有模模糊匹匹配查查詢的的分析析掃描描任務務NNIT案例(3):食品溯溯源零售企企業流通企企業成品制制造企企業原料制制造企企業養殖廠廠消費者者農戶加強監監管·杜絕假冒偽偽劣產產品提高安安全安安心的附加加價值值共享·掌握運輸和和保管管狀態態食品溯源平臺通過整整合供供應鏈鏈上的的各個個環節節達成成對各各種食食品的的綜合合管理理26NNIT案例(3):食品溯溯源作為山山東某某食品品集團團企業業內產產品溯溯源，，年產