2023學年完整公開課版貼源層介紹_第1頁
2023學年完整公開課版貼源層介紹_第2頁
2023學年完整公開課版貼源層介紹_第3頁
2023學年完整公開課版貼源層介紹_第4頁
2023學年完整公開課版貼源層介紹_第5頁
已閱讀5頁，還剩4頁未讀， 繼續免費閱讀

下載本文檔

版權說明：本文檔由用戶提供并上傳，收益歸屬內容提供方，若內容存在侵權，請進行舉報或認領

文檔簡介

負責人：胡晶01目錄貼源層介紹貼源層介紹1貼源層介紹考慮大數據架構計算和存儲的特點，以及上層應用對數據訪問的需求，數據分層結構規劃為貼源層、整合層、清單層（輕度）、應用層。采用分布式事務數據庫，接收和處理實時數據，支持大表條件索引檢索和DML原子事務，為確保此層性能和和穩定性，不接受上層應用的直接訪問。貼源層介紹人們對數據的處理行為可以劃分為操作型數據處理和分析型數據處理，操作型數據處理一般放在傳統的數據庫(Database，DB)中進行，分析型數據處理則需要在數據倉庫(DataWarehouse，DW)中進行。但是并不是所有的數據處理都可以這樣劃分，換句話說，人們對數據的處理需求并不只有這兩類，比如，有些操作型處理并不適合放在傳統的數據庫上完成，也有些分析型處理不適合在數據倉庫中進行。這時候就需要第三種數據存儲體系，操作數據存儲(OperationalDataStore，ODS)系統就因此產生。它的出現，也將DB、DW兩層數據架構轉變成DB、ODS、DW三層數據架構。1.ODS貼源層產生的背景貼源層介紹ODS中的數據具有以下4個基本特征：（1）面向主題的：進入ODS的數據是來源于各個操作型數據庫以及其他外部數據源，數據進入ODS前必須經過ETL過程（抽取、清洗、轉換、加載等）。（2）集成的：ODS的數據來源于各個操作型數據庫，同時也會在數據清理加工后進行一定程度的綜合。（3）可更新的：可以聯機修改。這一點區別于數據倉庫。（4）當前或接近當前的：“當前”是指數據在存取時刻是最新的，“接近當前”是指存取的數據是最近一段時間得到的。2.ODS貼源層數據的基本特征貼源層介紹（1）實現企業級的OLTP操作：傳統的操作型數據庫往往只存放企業某一類業務或者某一個部門的數據，因此無法面向企業全局數據的OLTP，而ODS可以實現。因為ODS的數據是面向整個企業進行集成匯總的，克服了原來面向應用的操作型數據庫數據分散的缺陷。（2）實現即時的OLAP操作：在數據倉庫上進行OALP，往往由于數據量十分龐大而需要較長的時間。而在企業實際應用中，對于一些較低層次的決策，往往并不需要太多的歷史數據，可能只需要參考當前的或者接近當前的數據就可以完成，并且要求具有較快的響應時間，因此數據倉庫顯然無法滿足這樣的要求，但是ODS可以實現。ODS中不僅有面向企業全局的細節數據和匯總數據，而且規模比數據倉庫小，具有較強的實時響應能力。3.ODS貼源層的功能貼源層介紹ODS貼源層的業務目標如下：（1）統一準實時的數據共享；（2）生產經營數據質量檢查；（3）統一客戶視圖的提供與展示；（4）生產經營報表統一

溫馨提示

  • 1. 本站所有資源如無特殊說明，都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等，如果需要附件，請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙，網頁內容里面會有圖紙預覽，若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間，僅對用戶上傳內容的表現方式做保護處理，對用戶上傳分享的文檔內容本身不做任何修改或編輯，并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容，請與我們聯系，我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論