{管理信息化數據倉}迪比特數據倉庫方案書第一章系統規劃1.1系統目標系統的目標是建立面向業務（宏觀）戰略的商務智能平臺，整合迪比特集團各業務系統。整個系統分為四個階段來完成：1.2靈活報表第三階段：統一數據平臺：決策支持1.系統目標第四第四階段：優化不同的系以第二階段：大MIS系統：流程再造常感到信息不夠，或數據提出非常困難。如何將這些歷史第一階段：靈活報表系統課題。建完整、穩健、高效的自動化綜合統計信息展現平臺。靈活報表系統的具體設計目標主要有：1、最大限度地科學管理信息資源，以先進的數據庫管理系統為基礎，完成數據采集、整理、存儲、利用，提高信息資源的管理水平；2、充分挖掘信息的價值，借助計算機及網絡通信技術，通過系統自動生成動態監控的業務狀況、財務狀況；3、提高工作效率，幫助公司各層級管理人員擺脫煩瑣的數據整理工作，實現管理水平和管理質量的飛躍；4、減少工作誤差，提供更加完善的指標校驗功能，自動驗證用戶數據輸入是否正確，保證輸入數據的正確性、完整性。1.2.2系統特點1數據抽取ETLExtractTransformLoadETL‘抽取：將數據從各種原始的業務系統中讀取出來，這是所有工作的前提。其次‘轉換：按照預先設計好的規則將抽取得數據進行轉換，使本來異構的數據格式能統一起來。最后的‘裝載：將轉換完的數據按計劃增量或全部的導入到數據倉庫中。ETL最新的業務動態。如果從整體角度來看，ETL主要作用在于其屏蔽了復雜的業務是構建數據倉庫最重要的意義所在。2數據存儲系統數據存儲采用關系型數據庫技術和ROLAPODS型細節數據層）和數據集市層。具有以下特點：關系數據存儲模型直接ETL裝載保留數據細節同時建立必要的數據預聚合不丟棄業務信息3業務特性：作為世界一流的商務智能平臺產品，MicroStrategy具有以下一些特點：1)完美的客戶化展現:查詢、報表和圖表MicroStrategy產品具有非常強大的報表定制功能。通過GUI方式，只需簡便于以后在此基礎上再次編輯加工。如下圖所示報表：MicroStrategyReportService支持中國式報表格式2)可實現OLAP分析提供多維視圖的數據組織、管理與多維分析。提供增量匯總技術。提供分析作業調度管理。提供最優/最差分析、例外分析、排名分析、比較分析等分析功能。具有豐富的圖形展現功能。能夠靈活地建立、定制不同的分析指標和各種指標計算公式，實現OLAP分析的動態化處理。并具有切片、切塊、旋轉、鉆取和鉆透等多維分析操作。能直接鉆取到詳細數據，也能進行多維數據和詳細數據的混合分析。提供豐富的函數，可自由擴展，便于二次開發。OLAP分析結果可輸出為Excel、HTML、文本文件等多種類型的文件。對分析指標指定警告值的，在分析報表或圖形中以突出方式進行顯示。3)可實現即席查詢通過定義業務邏輯到數據庫結構映射層，使最終用戶無需了解數據庫和SQL的復雜性，只需按業務邏輯規則即可快速簡潔地定義查詢需求，系統自動完成連接操作、條件定義等復雜的SQL定義操作。提供各種向導式界面、圖形查詢生成器、提示窗口等，通過簡單的鼠標拖拉操作即可實現即席查詢、報告生成、圖表生成、深入分析和發布等功能。具備多表之間的鉆取訪問、具備主表與子表之間的鉆取訪問功能。提供資源控制機制。它能夠監控查詢的運行進程，并停止長時間運行的前，能夠預測查詢所需時間。能訪問各種數據源的數據，訪問結果也能輸出到多種通用文件格式中。可以對用戶設立不同的查詢優先級，實現數據倉庫資源的合理分配。4)信息發布默認情況下就已經是發布到Web方式。還能夠以電子郵件、手機短信等方式發布。提供訂閱門戶，使用者可以在門戶中自定義發送方式。1.3大MIS系統——流程再造作為業務決策人(BDM)或技術決策人(TDM)Microsoft門戶和集成解決方案如何幫助您的公司簡化異種系統、提高雇員生產力、降低運營成本并改善整體IT基礎結構。將企業資源計劃(ERP)、供應鏈管理(SCM)和客戶關系管理(CRM)系統等內部業務理和合同管理業務流程自動化。要“推倒重來”而且風險和投入都相對小業務流程管理BPM（BusinessProcessManagement）是將生產流程、業務流程、各類行政申請流程、70%以上需要兩人以上協作實施的任務全部或部分由計算機處理，并使其簡單化、自動化的業務過程。1.4統一數據平臺1.4.1統一數據平臺特性了該公司所有業務數據，從在線事務處理（OLTP數據可能駐留在許多不同的數據源中。這些數據源可能是文檔、層次型數據庫、統組成的混合系統。理系統（DBMS）的共享性、完整性、數據獨立性外，還具有下列特征：*統一性和一致性*面向主題*歷史性*只讀性統一性和一致性經營數據。例如，在許多企業中，應用程序常常以不同的格式使用類似的數據：日期按照Julian或者Gregorian/假數據可能表示為1/0ON/OFF、TRUE/FALSE/負等。不同的應用程序可能使用不同的術語來描述同樣的數據，例如一個應用程序可能使用“平衡表來描述銀行帳戶，另外一個應用程序可能使用“總量表表示銀行的帳戶。在數據倉庫中存儲的數據需要一種單一的、可數據來自跨組織和部門，例如企業以前保存的數據、表格中的數據、甚至來自Internet析和理解企業的經營狀況。面向主題企業的分析過程。歷史性存儲在OLTP系統中的數據可以正確地表示現在時間的任何值。OLTP系統經常只的時間的數據，一般是五年到十年。數據倉庫存儲了企業一段時間的快照形式。30-90天。數據經集成進入數據倉庫后是極少或者根本不更新的。因此，常用的操作是追加操作和歷史查詢。只讀性通過使用索引、預先計算的數據和物理的數據庫正規化來優化查詢的性能。1.4.2統一數據平臺建模數據模型是對現實世界進行抽象的工具。它描述了企業內的實體和聯系,即主題域,是企業最高層次的抽象。數據模型采用ERDERD由各分ERD綜合而成,不僅消除了分ERD之間的不一致,而且消除了不必要的冗余。ERD在邏輯上實現了數據倉庫集成和面向主題的特點。數據平臺的建模首先是根據迪比特公司的業務,確定主題領域，然后擴充每個主題域,以得到主碼(包括時間主屬性)和各屬性,MicroStrategy產品的告警功能實現數據的push，刷新客戶端，使用戶及時了解監管指標的當前狀況。2經營分析與計劃達成TopN、絕對值分布等等數理統計。業務支出計劃達成情況等幾個主要方面，以及其他五個方面的輔助方面。3企業戰略管理——平衡計分卡應用通過儀表板表現形式：第二章靈活報表方案設計多樣的信息表現形式，為企業的經營決策提供各種信息。2.1系統邏輯設計系統分為三大模塊：數據抽取、數據存儲、數據展現。數據存儲：數據存儲包括數據倉庫和數據集市。數據倉庫為企業統一的信息平臺；數據集市為面向多維分析的數據存儲。數據展現：數據倉庫信息輸出部分，輸出方式可分為固定報表、即席查詢、多維分析。按功能可分為各種應用分析系統，如：客戶關系管理系統、資產負債分析系統、管理會計、績效考核系統。2.2系統部署拓撲結構MicroStrategy用系統支撐軟件的MicroStrategy產品將按如下方式部署：2.3應用功能詳見本方案1.1.2節的第三點：業務特性。2.4軟件配置此次項目主要使用MicroStrategy配置主要為MicroStrategyMicroStrategy產品各組件所需的軟件配置MicroStrategy軟件操作系統BIMicroStrategyIntelligenceServerWindowsNT/2000Server；服務器Solaris；AIXWebMicroStrategyWebUniversalWindowsNT/2000或Unix服務器（SunSolaris,IBMAIX,HP-UX）或WebL（JSPLinuxTomc版本）應MicroStrategyArchitectWindowsNT/2000XP用建模C/SMicroStrategyDesigner/AnalystWindowsNT/2000XP客戶端（查詢、報表、OLAP級分析）WeMicroStrategyWebProfessional/AnalystreportseveWindowsNT/2000XP,Unix,Linb客戶rseux報表、OLAP級分析）2.5硬件配置1MicroStrategy各產品組件所需的硬件配置客戶端所需硬件資源MicroStrategy軟件最小配置推薦配置CPU(1000MHZ)內存CPU(1000MHZ)內存數目數目應用建模MicroStrategyArchi1128M1256MtectC/S客戶端MicroStrategyD1128M1256Mesigner/AnalystWeb客戶端MicroStrategyW1128M1256MebProfessional/Analyst/Reporter服務器端所需硬件資源基本假設：業務用戶并發操作率假設為50%；業務用戶全部使用B/S方式進行報表操作；服務器端的CPU主頻假設為1000MHZ。為了保證報表系統的高可用，報表應用服務器、Web服務器采用群集。計算方法：根據MicroStrategy實驗室的測算結果及在世界各地的實施經驗，在IntelligenceServer上每1000MHZ的CPU可支撐40-50個并發操作用戶，如果Web服務器只用于支撐MicroStrategyWeb/WebUniversalIntelligenceServer相當。用并發用MicroStrategyIntelligenceServerMicroStrategyWeb服匯總戶戶數務器數（50%并發率）2001002CPU;2CPU;4CPU;2048MRAM2048MRAM4096MRAM100501CPU;1CPU;2CPU;1024MRAM1024MRAM2048MRAM50250.5CPU;0.5CPU;1CPU;512MRAM512MRAM1024+YMRAM2數據庫與ETL硬件平臺配置此次項目數據庫與ETL服務硬件平臺的配置規格，我們給予以下三點意見：1.運維環境的硬件平臺可以根據開發環境的負載情況在系統切換上線前再作準確確定；2.鑒于客戶當前的IT狀況，我們認為不排除對“現有數據管理系統的設備例舊的可能；3.PU，4G可以達到4CPU，8內存的配置；也可以更高。第三章：靈活報表系統的實施我們將采用DWM（DataWarehouseMethod）為迪比特公司實施項目。DWM驟和任務。DWM是一組預定義好的、在整個數據倉庫項目中起指導作用的、可用多種方法管理的實施步驟。DWM可以幫助我們解決諸如確定正確的系統范圍和用DWM且可以盡可能的減少系統的實施風險。DWM是一個抽象的方法論，需要結合項目實際環境作定制。DWM把數據倉庫系統的實施分為13個過程，7個階段。如下表所示：過程|階段實施策略系統定義系統分析系統設計系統建立系統應用系統維護業務需求定義34.6%9.3%13.3%數據獲取8.4%8.5%23.1%16.4%17.2%21.4%系統結構定義11.5%22.2%14.3%5.4%14.5%數據質量控制2.2%12.1%6.5%7.9%0.6%數據倉庫管理3.4%4.4%3.9%11%16.1%元數據管理3.7%4.7%4.9%數據訪問6.3%4.7%4.9%數據庫設計與4%2%建立文檔設置1%1.1%2%4.5%3.9%系統測試1.2%7.4%15%19.8%19.7%培訓0.5%7.7%2.7%4.1%4.7%27.8%系統上線1.7%0.2%0.4%17.8%技術支持45%上表中各個過程中的陰影表示每個過程涉及到哪個實施階段，表中的百分比表示以一個中等規模的項目為例，每個過程在各個實施階段中所占的比例。3.1DWM實施過程7個實施階段中均會涉及上述大部分或全部的實施過程。1業務需求定義滿足的業務需求，確定系統的實施范圍，初步建立系統實施的方向。2數據獲取本過程的目標是確定數據倉庫系統將要使用的數據的來源數據獲取過程會涉及數據倉庫的數據獲取模塊的功能。3系統結構定義過程中還需要確定數據訪問的安全性控制、數據備份與恢復等方面的策略和方案。4數據質量控制完成，以保證進入到數據倉庫中的數據是可靠的數據。5數據倉庫管理案。過程期間，需要設計和建立數據倉庫管理模塊，用于實現版本控制、數據備份與恢復、數據歸檔、數據管理和監測，以及建立其他管理和檢測任務，最終實現管理的自動化。6元數據管理要求，又符合業務需求。量等因素。對技術人員而言，如何有效的管理數據倉庫是其最關心的問題。drill-down/up分析。通過開發元數據管理模塊實現對元數據的獲取、集成和訪問。7數據訪問具。8數據庫設計與建立對開發環境、測試環境和產品環境的建立。9文檔設置和運行正常進行的重要輔助手段。10系統測試測試步驟和測試數據。從功能角度講，系統測試包括各個模塊的單獨測試，系統集成測試；11培訓效的培訓，保證不同類型的人員更好地使用和維護已投入運行的系統。12系統上線本過程的目標是把系統移植到產品環境中，包括制定安裝計劃，準備客戶維護和產品環境。13技術支持系統上線之后，繼續為用戶提供在系統管理方面的技術支持3.2DWM實施階段使用增量開發方法（IncrementalApproach）開發的數據倉庫系統，其實施過程分成下列7個階段。1實施策略結構進行定義。2系統定義確定的解決方案實施范圍內確定技術結構和數據倉庫結構。問和培訓等方面的策略性方案。3系統分析在本階段中，在已確定的解決方案實施范圍內，明確詳細的業務需求，包括建立邏輯模型、收集源于源數據的詳細需求，以及最終用戶對數據的訪問需求。具的選擇。量控制、數據倉庫管理和元數據管理等數據倉庫解決方案中各部分的工具進行評估和選擇。4系統設計對數據訪問和查詢、編制報表等部分的詳細定義。據和元數據庫對象的物理結構設計。系統設計階段還完成平臺配置，制定測試方案，編制用戶使用和技術參考手冊、培訓資料，以及制定系統上線策略。5系統建立具，并于數據對象集成；構造查詢、編制報表。性能測試。6系統應用品環境中。7系統維護本階段完成對前一階段實施的評估和回顧，為下一階段的實施做好準備。3.3項目實施計劃第四章技術服務計劃、維護與承諾我方承諾項目交付后3年5天*8收費兩部分。4.1免費服務內容在線支持：使用在線支持，更新并記錄技術問題。電話支持：對于日常的操作問題，可以不限次數的電話咨詢。Email支持：對于客戶在工作中碰到的問題，我方在收到Email請求后，將及時給予回復。對于客戶通過傳真方式發出的問題請求，我方收到請求后及時給出回復。熱線電話：021-8。我們可以做到8小時內的做出服務回應，72小時內的解決問題。我們還會安排不定期的客戶回訪。4.2收費服務內容對于不能通過免費維護服務實現的技術支持，安排資深技術人員赴現場進行問題處理。第五章培訓計劃5.1MicroStrategy產品培訓5.1.1培訓時間表培訓課程培訓時間參加培訓人員MicroStrategy:基礎報表2天項目設計人員、高級報表開發人員、系統管理員MicroStrategy:系統管理2天系統管理人員MicroStrategyDesktop:4天高級報表開發人員高級報表MicroStrategyArchitect2天項目設計人員:項目設計5.1.2培訓課程境下使用的MicroStrategyMicroStrategy總部所發布的已有的培訓內容。MicroStrategy:報表基礎時間2天先導課程熟練使用Windows操作界面培訓對象報表開發人員或設計人員分析人員高級報表用戶任何需要進一步的MicroStrategy課程培訓的人員所覆蓋的MicroStrategyDesktopMicroStrategy產品MicroStrategyWeb課程描述兩天的課程將向學員介紹MicroStrategyDesktop和MicroStrategyWeb的報表用各種格式化選項比如排序、旋轉、分頁、大綱模式、以及顯示總計和小計等。培訓內容MicroStrategy決策支持介紹MicroStrategyDesktop介紹在Desktop中創建、保存、查看報表在Desktop中操作報表創建、保存、編輯基本過濾器創建、格式化基本度量基本提示和搜索創建和查看文檔在MicroStrategyWeb中操作報表MicroStrategy:系統管理時間2天先導課程MicroStrategy:報表基礎培訓對象系統管理員開發人員咨詢人員項目經理所覆蓋的MicroStrategyIntelligenceServerMicroStrategy產品MicroStrategyWebMicroStrategyAdministrator課程描述兩天的課程將引導學員理解MicroStrategyIntelligenceServer,MicroStrategyWeb和MicroStrategyAdministrator臺。這些培訓內容將通過手工實驗和討論方式來進行。學員還將學會使用MicroStrategyAdministrato中的一些工具軟件：ObjectManager,CommandManager和ProjectMergeWizard.將具備成功實施BI項目所需的設計、實施、調優和維護平臺的知識。培訓內容系統管理綜述系統架構和查詢流程系統安裝配置和管理界面啟動和連接安全LDAP鑒權IntelligenceServer系統管理緩存和調度數據集市群集ObjectManagerCommandManager項目及用戶合并向導MicroStrategyWeb綜述MicroStrategyWeb系統管理MicroStrategyDesktop:高級報表時間4天先導課程MicroStrategy:報表基礎培訓對象報表開發人員或設計人員需要創建高級報表并具有一定的SQL基礎知識的分析人員項目經理咨詢人員高級用戶所覆蓋的MicroStrategyDesktopMicroStrateg