數(shù)字化智能工廠數(shù)據(jù)中臺頂層設計解決方案整理制作：郎豐利1519制作時間：2023年睿利而行整理制作：郎豐利1519制作時間：2023年睿利而行整理制作：郎豐利1519制作時間：2023年睿利而行數(shù)據(jù)中臺背景第一章數(shù)據(jù)中臺頂層設計第二章數(shù)據(jù)中臺解決方案第三章目錄Contents1數(shù)據(jù)中臺背景數(shù)據(jù)中臺的概念由阿里巴巴首次提出，它是一個承接技術，引領業(yè)務，構建規(guī)范定義的、全域可連接萃取的、智慧的數(shù)據(jù)處理平臺，建設目標是為了高效滿足前臺數(shù)據(jù)分析和應用的需求。數(shù)據(jù)中臺是涵蓋了數(shù)據(jù)資產(chǎn)、數(shù)據(jù)治理、數(shù)據(jù)模型、垂直數(shù)據(jù)中心、全域數(shù)據(jù)中心、萃取數(shù)據(jù)中心、數(shù)據(jù)服務等多個層次的體系化建設方法。數(shù)據(jù)中臺概念數(shù)據(jù)服務化數(shù)據(jù)中臺是培育業(yè)務創(chuàng)新的土壤，是利用數(shù)據(jù)促進業(yè)務創(chuàng)新的保障數(shù)據(jù)標準化“書同文，車同軌”，避免了“重復數(shù)據(jù)抽取和維護帶來的成本浪費”數(shù)據(jù)智能化通過大量智慧算法訓練數(shù)據(jù)細胞，形成數(shù)據(jù)大腦，產(chǎn)生智慧的力量，預先洞察未來數(shù)據(jù)資產(chǎn)化數(shù)據(jù)不斷的在補充，數(shù)據(jù)模型不斷的進化，只有在滋養(yǎng)中才能從最初的字段單一到逐漸成長為企業(yè)最為寶貴的模型資產(chǎn)數(shù)據(jù)中臺的內(nèi)核包括兩方面：一個是應用數(shù)據(jù)的技術能力，另一個是數(shù)據(jù)資產(chǎn)的管理。數(shù)據(jù)中臺概念業(yè)務場景：智慧工廠全球運營指揮中心智慧工廠智能供應鏈管理第三方風控

|

全球供應量可視化

|

質(zhì)量控制前置

|

智能供應鏈（訂單、倉儲、物流）質(zhì)量管控質(zhì)量大數(shù)據(jù)（事后）

|質(zhì)量預測模型（事前）C2M動態(tài)供應鏈

|

柔性生產(chǎn)線智能物流智能倉儲

|

智能裝箱

|

物流可視化追蹤|

智能清關智能制造資產(chǎn)管理

|AGV廠區(qū)物流

|

產(chǎn)線預防性維護

|

智能安全監(jiān)控

|

工廠能耗管理

|

設備虛擬化

|

設計生產(chǎn)一體化生產(chǎn)運營可視化，業(yè)務模塊數(shù)字化應用數(shù)字化運營數(shù)字化指標運營系統(tǒng)質(zhì)量管控工序數(shù)據(jù)質(zhì)量實時監(jiān)控預警E2E融合質(zhì)量數(shù)據(jù)預警系統(tǒng)數(shù)據(jù)可靠性分析物聯(lián)網(wǎng)數(shù)據(jù)應用數(shù)據(jù)資產(chǎn)管理物流數(shù)據(jù)采集系統(tǒng)IT產(chǎn)線數(shù)字化生產(chǎn)安全數(shù)字化制造能耗數(shù)據(jù)管理云制造數(shù)據(jù)分析測試，儀表，診斷，維修數(shù)據(jù)/智能診斷裝備維護，大數(shù)據(jù)云調(diào)度制造數(shù)據(jù)可視化訂單全流程可視制造測試網(wǎng)絡監(jiān)控可視質(zhì)量管控數(shù)據(jù)可視網(wǎng)絡資源規(guī)劃作業(yè)能力規(guī)劃工廠DC

卡車運輸---防盜感應器客戶三級運輸運輸–

連接承運商和貨主預測性運輸按需送達基于Geocode的智能地址獲取和校驗感知式存儲AS/RSWMS&TMS揀料叉車with

RFIDSensors智能眼鏡驗收撿料RFID

Scanner揀料國家倉基于先進技術與工具，物流信息自動感知與采集，實物流全程可視數(shù)字化承運商執(zhí)行過程與結果可視，績效自動生成智能化基于云端的與內(nèi)外部高度集成的物流IT系統(tǒng)實時的物流信息驅(qū)動精準的資源計劃管理智能化大數(shù)據(jù)分析車輛追蹤與LSP管理實時的路徑規(guī)劃二次運輸自動線體帶感應器的裝車垛口卸貨by

TrailerSkate

Dock國際運輸數(shù)字化的運輸跟蹤客戶需求、風險、外部運力等信息及時感知，自動給出預測性方案智能化連接 連接連接連接連接連接業(yè)務場景：智慧物流與智能倉儲數(shù)字化運營整理制作郎豐利1519企業(yè)越來越重視數(shù)字化運營，核心重點是數(shù)據(jù)管理、可視以及數(shù)據(jù)治理超過60%計劃或已經(jīng)建立數(shù)據(jù)管理委員會基礎大數(shù)據(jù)產(chǎn)品逐步成熟，數(shù)據(jù)安全、數(shù)據(jù)開放以及主數(shù)據(jù)管理需求旺盛。大數(shù)據(jù)能力框架，數(shù)字資產(chǎn)管理作用將被關注From

信通院、艾瑞咨詢：預計到2020年，大數(shù)據(jù)軟件市場規(guī)模將達到268.2億元，年復合增長率38.6%；大數(shù)據(jù)服務市場規(guī)模將達到165.9億元，年復合增長率41.4%。初步估算數(shù)據(jù)管理市場約43億，核心發(fā)展方向：數(shù)據(jù)資產(chǎn)管理、

數(shù)據(jù)可視化以及機器學習From

中國信通院《中國大數(shù)據(jù)發(fā)展調(diào)查報告2018》目標：???從煙囪式多個平臺向融合大數(shù)據(jù)平臺，建立統(tǒng)一的數(shù)據(jù)采集與整合大數(shù)據(jù)處理、計算及數(shù)據(jù)服務能力，降低大數(shù)據(jù)使用成本通過集中各領域數(shù)據(jù)，方便創(chuàng)新，讓數(shù)據(jù)產(chǎn)生更大價值大中臺、小前臺，前臺特種兵敏捷作戰(zhàn)單元+中臺航母艦群精確制導炮火統(tǒng)一數(shù)據(jù)平臺(基礎設施復用)運營生產(chǎn)數(shù)據(jù)中臺統(tǒng)一數(shù)據(jù)資產(chǎn)中心離線統(tǒng)近一線數(shù)據(jù)建實模時、分析內(nèi)與存挖掘……分析分析分析分析統(tǒng)一數(shù)據(jù)服務統(tǒng)一數(shù)據(jù)采集銷售預測客戶分析建模分析客服現(xiàn)網(wǎng)煙囪數(shù)據(jù)IT系統(tǒng)生產(chǎn) 銷售輔助運營系統(tǒng)應用系統(tǒng)客服應用新業(yè)務挑戰(zhàn)：1、獨：煙囪系統(tǒng)，數(shù)據(jù)孤島嚴重。重復開發(fā)、成本浪費；2、斷：數(shù)據(jù)理解與數(shù)據(jù)價值鏈條的斷層；3、缺：缺標準、缺治理、缺數(shù)據(jù)；4、難：知數(shù)據(jù)難、要數(shù)據(jù)難、懂數(shù)據(jù)難；數(shù)字化運營，需要由傳統(tǒng)的煙囪式IT系統(tǒng)向數(shù)據(jù)中臺轉(zhuǎn)型生產(chǎn)數(shù)倉銷售數(shù)倉客服數(shù)倉2數(shù)據(jù)中臺頂層設計數(shù)據(jù)中臺定義與愿景定義：全域級可復用的數(shù)據(jù)資產(chǎn)中心與數(shù)據(jù)能力中心，提供清潔、透明、智慧的數(shù)據(jù)資產(chǎn)與高效、易用的數(shù)據(jù)能力，使能業(yè)務數(shù)字化運營；愿景：讓數(shù)據(jù)成為如水和電一般的資源，隨需獲取，敏捷自助；讓數(shù)據(jù)極大發(fā)揮價值，推動業(yè)務創(chuàng)新與變革；數(shù)據(jù)領域由企業(yè)擴展到生態(tài)伙伴數(shù)據(jù)敏捷自助安全共享（隱私、授權、權限等）數(shù)據(jù)合規(guī)算法模型（AI）實現(xiàn)特性業(yè)務對象、規(guī)則、過程數(shù)字化數(shù)據(jù)聯(lián)接數(shù)據(jù)實時可視數(shù)據(jù)透明數(shù)據(jù)清潔數(shù)字業(yè)務化數(shù)據(jù)采集/處理自動化、智能化數(shù)據(jù)中臺建設框架：1）以業(yè)務數(shù)字化為前提，數(shù)據(jù)入湖為基礎，建設數(shù)據(jù)資產(chǎn)中心；2）打造能高效承載數(shù)據(jù)中臺建設的數(shù)據(jù)運營平臺能力中心……數(shù)據(jù)服務數(shù)據(jù)消費數(shù)據(jù)源業(yè)務報告實時可視自助分析智能決策 運營監(jiān)控批量/實時采集數(shù)據(jù)能力中心主數(shù)據(jù)客戶基本信息云服務信息…基礎數(shù)據(jù)國家Region…非結構化數(shù)據(jù)業(yè)務日志 視頻流媒體 文件…外部數(shù)據(jù)客戶財報 國家風險行業(yè)信息 財經(jīng)信息…主題聯(lián)接（數(shù)據(jù)模型、標簽、圖銷售站點主題合同主題數(shù)據(jù)計算（規(guī)則、算法、模型等）分攤 智能運維模型 智能搜索文本挖掘題識項目主題 員工主題云服務主題 客戶主題產(chǎn)品維度區(qū)域……收入預測模型……………完整、清潔的邏輯數(shù)據(jù)湖統(tǒng)籌推動、以用促建，急用先行為數(shù)據(jù)中臺提供一站式“原材料”匯聚各業(yè)務源系統(tǒng)數(shù)據(jù)，清洗/注冊數(shù)據(jù)資產(chǎn)業(yè)務對象、規(guī)則、過程數(shù)字化對準需求，驅(qū)動業(yè)務數(shù)字化數(shù)據(jù)采集/處理自動化持續(xù)數(shù)據(jù)治理，提升數(shù)據(jù)質(zhì)量數(shù)字化運營數(shù)字化運維業(yè)務流效率提升滿足自助、智能的數(shù)據(jù)消費識別多場景數(shù)據(jù)消費需求構建數(shù)據(jù)消費快速響應機制數(shù)據(jù)業(yè)務化，數(shù)據(jù)反哺業(yè)務，促進數(shù)字化運營中臺消費場景3業(yè)務平臺數(shù)據(jù)資產(chǎn)中心中臺核心資產(chǎn)數(shù)據(jù)湖數(shù)據(jù)質(zhì)量元數(shù)據(jù)管理數(shù)據(jù)采集數(shù)據(jù)服務數(shù)據(jù)開發(fā)數(shù)據(jù)可視化數(shù)據(jù)地圖數(shù)據(jù)共享與安全數(shù)字化研發(fā)CBC運營系統(tǒng)cloudscope運維系統(tǒng)內(nèi)部數(shù)據(jù)HRMS人員Esee機房建設CM客服外部數(shù)據(jù)社交媒體數(shù)據(jù)服務數(shù)據(jù)清洗資譜）存貨主領域知圖譜客服投支付CMDB產(chǎn)配置數(shù)據(jù)事務數(shù)據(jù)

建云服務發(fā)布 故障信息 訴記錄 設售賣記錄 營銷活動…平臺建設12主題連接層，數(shù)據(jù)中臺核心資產(chǎn)建立“面向?qū)ο?、面向主體、面向業(yè)務流”的數(shù)據(jù)聯(lián)接和標簽持續(xù)沉淀業(yè)務規(guī)則、算法、模型建設公共數(shù)據(jù)服務，減少重復開發(fā)數(shù)據(jù)中臺建設兩條主線：數(shù)據(jù)建設數(shù)據(jù)產(chǎn)生數(shù)據(jù)提供數(shù)據(jù)整合、標識、聯(lián)接、建模數(shù)據(jù)消費業(yè)務數(shù)字化消費場景數(shù)據(jù)湖中臺核心資產(chǎn)數(shù)據(jù)湖指標數(shù)據(jù)運營數(shù)據(jù)數(shù)據(jù)服務數(shù)據(jù)實時可視診斷預警故障數(shù)據(jù)源數(shù)據(jù)CBCcloudscopeFUXISCM項目數(shù)據(jù)銷售數(shù)據(jù)收入觸發(fā)財務數(shù)據(jù)主題聯(lián)接發(fā)票信息合同基本信息開票計劃業(yè)務主題回款核銷 收入觸發(fā)開票觸發(fā)計劃云服務運營大屏技術保障全景銷售毛利成本中心數(shù)據(jù)服務-云服務建設全流程明細數(shù)據(jù)服務-交付項目收入明細研發(fā)效率大盤數(shù)據(jù)可視與分析運營指標運維指標平臺建設安全態(tài)勢感知故障智能預警智能決策中心智能擴容推薦數(shù)據(jù)調(diào)優(yōu)診斷大數(shù)據(jù)服務數(shù)據(jù)接入服務MRSDLICcloudTable數(shù)據(jù)呈現(xiàn)與決策數(shù)據(jù)智能服務OBSDWSES云服務運營大屏技術保障全景銷售毛利成本中心研發(fā)效率大盤安全態(tài)勢感知故障智能預警智能決策中心智能擴容推薦數(shù)據(jù)調(diào)優(yōu)診斷實時數(shù)據(jù)接入DIS批量數(shù)據(jù)遷移CDM數(shù)據(jù)庫實時同步Dsync日志數(shù)據(jù)采集log數(shù)據(jù)開發(fā)數(shù)據(jù)開發(fā)/處理/調(diào)度／運維數(shù)據(jù)治理元數(shù)據(jù)管理/數(shù)據(jù)地圖/數(shù)據(jù)質(zhì)量/業(yè)務指標／數(shù)據(jù)標準數(shù)據(jù)可視大屏開發(fā)/發(fā)布／預覽數(shù)據(jù)運營平臺DAYU智能分析自助BI/報表／OLAP數(shù)據(jù)服務服務創(chuàng)建/發(fā)布／服務市場分析 決策 行動數(shù)據(jù)消費描述發(fā)生了什么

?診斷為什么會發(fā)生

?預測將會發(fā)生什么

?指導要采取什么措施

?自愈系統(tǒng)自我控制解決問題。人工判斷和采取措施人工判斷和采取措施人工判斷和采取措施人工判斷和采取措施數(shù)字化運營的不同層次數(shù)字化運營的不同階段階段一：數(shù)據(jù)實時可視數(shù)據(jù)展示實時可信報告上線在線開會支持數(shù)據(jù)層層下鉆階段二：診斷預警階段三：智能決策提前感知業(yè)務問題自動預警潛在風險智能分析問題根因洞察趨勢推薦方案支持客觀精準決策中臺數(shù)據(jù)消費解碼：包含不同層次和階段的數(shù)字化運營數(shù)據(jù)消費的不同用戶類型業(yè)務人員 管理者 數(shù)據(jù)科學家 IT開發(fā)人員3數(shù)據(jù)中臺解決方案數(shù)據(jù)運營平臺，產(chǎn)品定位與價值定位：提供給數(shù)據(jù)工作者（數(shù)據(jù)管理者、數(shù)據(jù)分析師、數(shù)據(jù)開發(fā)者）的一站式、高效易用的數(shù)據(jù)治理運營平臺；客戶價值：幫助企業(yè)快速構建端到端的智能數(shù)據(jù)系統(tǒng)，消除數(shù)據(jù)孤島，統(tǒng)一數(shù)據(jù)標準，加快數(shù)據(jù)變現(xiàn)，促進數(shù)字化轉(zhuǎn)型；數(shù)據(jù)遷移實時接入離線遷移第三方工具敏捷可視能力自助分析能力全局治理能力高效探索能力快速開發(fā)能力用戶數(shù)據(jù)消費支撐業(yè)務主題/畫像/指標的訪問查詢檢索數(shù)據(jù)開放應用分析數(shù)據(jù)源DAYU平臺：一站式數(shù)據(jù)運營數(shù)據(jù)開發(fā)Pipeline開發(fā)、調(diào)度數(shù)據(jù)可視化大屏可視，

BI視圖數(shù)據(jù)規(guī)范數(shù)據(jù)模型，約束規(guī)則數(shù)據(jù)質(zhì)量質(zhì)量規(guī)則、質(zhì)量報告全域數(shù)據(jù)目錄（元數(shù)據(jù)Catalog）公有云數(shù)據(jù)湖MRS DLI GES

DWS私有云數(shù)據(jù)湖嚴管數(shù)據(jù)非嚴管數(shù)據(jù)數(shù)據(jù)接入實時接入離線遷移第三方工具數(shù)據(jù)流數(shù)據(jù)流調(diào)度流 調(diào)度流命名：DAYU像大禹治水一樣幫助企業(yè)進行數(shù)據(jù)治理與運營，最終讓數(shù)據(jù)變?yōu)槠髽I(yè)創(chuàng)新的新能源，助力企業(yè)新增長。行業(yè)模板+運營，一站式構建企業(yè)數(shù)據(jù)中臺智能數(shù)據(jù)湖運營平臺DAYU行業(yè)模板快速開發(fā)共享開放具有最優(yōu)性價比的端到端技術平臺，支持用戶數(shù)據(jù)找得到，管得住沉淀行業(yè)能力，快速構建數(shù)據(jù)中臺，助力用戶數(shù)據(jù)

用得好郎豐利整理制作數(shù)據(jù)可視 全局治理智能數(shù)據(jù)湖存儲計算主題數(shù)據(jù)模型指標計算Pipeline行業(yè)數(shù)據(jù)算子行業(yè)應用模型數(shù)據(jù)規(guī)范設計，基于XX數(shù)據(jù)體系建設方法論沉淀而成數(shù)據(jù)標準不統(tǒng)一數(shù)據(jù)業(yè)務斷層數(shù)據(jù)重復建設歷史不可追溯現(xiàn)狀目標數(shù)據(jù)標準系統(tǒng)化、流程化數(shù)據(jù)需求全鏈路打通數(shù)據(jù)研發(fā)自動化、無碼化元數(shù)據(jù)中心數(shù)據(jù)需求管理指標定義&數(shù)據(jù)模型權限&安全數(shù)據(jù)構建方法論行業(yè)標準指標內(nèi)容指標發(fā)布\下線輸入：業(yè)務數(shù)據(jù)化需求輸出：標準化數(shù)據(jù)中臺設計一站式敏捷大數(shù)據(jù)開發(fā)治理，全流程可視開發(fā) 治理服務 資產(chǎn)使用SQL進行圖片識別，快速完成非結構化數(shù)據(jù)處理createtablecars_no(filePathstring,resultarray<struct<number:string,type:string>>)using

ocroptions

(path"obs://bucket1/wangfei/cars",ocrApiUrl

"/v1.0/ocr/plate-number",ocrEndpoint"",ocrRegion

"cn-north-1")SubmitIDLogTimeNumberColorLoacationFile12018072210:09:46粵B

12345白坂田五和大道obs://bucket1/wangfei/cars/file00222018072210:09:46粵B

67890黑坂田五和大道obs://bucket1/wangfei/cars/file002實時機器學習、深度學習，增強實時數(shù)據(jù)分析能力SQL中調(diào)用各種機器學習算法和深度學習框架，降低AI能力使用門檻AI能力與SQL融合，懂SQL就可以開發(fā)AI業(yè)務可復用的行業(yè)模板，加速數(shù)據(jù)價值發(fā)現(xiàn)流程行業(yè)數(shù)據(jù)標準行業(yè)主題數(shù)據(jù)模型行業(yè)指標計算流程行業(yè)算子行業(yè)指標業(yè)務對象中心（五大庫）：產(chǎn)品、客戶、合同、站點/網(wǎng)絡、員工數(shù)據(jù)湖數(shù)據(jù)主題RC經(jīng)營主題CNBG銷售 企業(yè)運營消費者運營 研發(fā)主題交付主題 ITR主題供應主題 采購主題HR主題 行政主題IT主題運營(ITO/DSO)流程域主題：經(jīng)營、運營區(qū)域數(shù)據(jù)平面數(shù)據(jù)地圖業(yè)務實體(項目合同)經(jīng)營(收入/成本)合規(guī)(內(nèi)控/賬實)Data

Lake：800+對象

7000+實體

100+萬屬性供應數(shù)據(jù)95%進底座CNBG數(shù)據(jù)50%進底座GTS數(shù)據(jù)60%進底座產(chǎn)品數(shù)據(jù)90%進底座流程IT數(shù)據(jù)及其它90%進底座數(shù)據(jù)統(tǒng)一采集入湖數(shù)據(jù)統(tǒng)一入湖，實現(xiàn)5大業(yè)務對象的數(shù)字化案例：XX內(nèi)部IT數(shù)據(jù)運營，助力XX“清潔數(shù)據(jù)的數(shù)字化運營藍圖”推動數(shù)據(jù)入湖，實現(xiàn)內(nèi)、外數(shù)據(jù)的獲取構建五大庫，實現(xiàn)五大關鍵業(yè)務對象數(shù)字化，實現(xiàn)數(shù)據(jù)同源，減少數(shù)據(jù)搬家重點建設大數(shù)據(jù)和人工智能平臺，“數(shù)據(jù)獲取→數(shù)字化→

智能化”三步走案例：智慧園區(qū)數(shù)據(jù)運營，助力企業(yè)降本增效智能數(shù)據(jù)湖運營平臺DAYU人員主題庫車輛主題庫資產(chǎn)主題庫設備主題庫組織主題庫時空主題庫事件主題庫資源主題庫園區(qū)主題庫批量數(shù)據(jù)集成實時數(shù)據(jù)集成數(shù)據(jù)ETL可視化開發(fā)任務調(diào)度管理權限管理數(shù)據(jù)集成數(shù)據(jù)標準數(shù)據(jù)質(zhì)量元數(shù)據(jù)管理指標監(jiān)控數(shù)據(jù)地圖數(shù)據(jù)血緣數(shù)據(jù)治理園區(qū)智能運營中心IOC數(shù)據(jù)來源公司管理數(shù)據(jù)業(yè)務子系統(tǒng)數(shù)據(jù)外部互聯(lián)網(wǎng)數(shù)據(jù)……智能數(shù)據(jù)湖底座接入園區(qū)個數(shù)100+構建園區(qū)8+個主題庫主題庫含5000+屬性數(shù)據(jù)集成開發(fā)從15天縮短到1天數(shù)據(jù)應用開發(fā)效率提升50%數(shù)據(jù)分析由T+1到實時應用數(shù)據(jù)智能數(shù)據(jù)湖運營平臺DAYU智能數(shù)據(jù)湖原始數(shù)據(jù)計量數(shù)據(jù)設備數(shù)據(jù)負荷數(shù)據(jù)能效數(shù)據(jù)交易數(shù)據(jù)發(fā)電數(shù)據(jù)……