第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)2023/7/17第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．1數(shù)據(jù)倉(cāng)庫(kù)的投資分析4．1．1建設(shè)數(shù)據(jù)倉(cāng)庫(kù)的必要性1．企業(yè)應(yīng)用數(shù)據(jù)倉(cāng)庫(kù)的目標(biāo)大致可以劃分為三類：（1）將數(shù)據(jù)倉(cāng)庫(kù)作為企業(yè)的核心業(yè)務(wù)進(jìn)行發(fā)展。（2）利用數(shù)據(jù)倉(cāng)庫(kù)來優(yōu)化企業(yè)內(nèi)部管理控制，如人力資源的管理、成本的管理、產(chǎn)品質(zhì)量和服務(wù)質(zhì)量的管理等等。（3）利用數(shù)據(jù)倉(cāng)庫(kù)為企業(yè)增加商業(yè)機(jī)會(huì)，這主要包括幫助市場(chǎng)、銷售部門對(duì)客戶情況和市場(chǎng)情況進(jìn)行分析，幫助企業(yè)決策者提供輔助決策信息。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]2．企業(yè)建設(shè)數(shù)據(jù)倉(cāng)庫(kù)的必要性分析第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．1．2數(shù)據(jù)倉(cāng)庫(kù)的投資回報(bào)及風(fēng)險(xiǎn)分析1．定量分析定量分析通常使用的是ROI(ReturnofInvestment，投資回報(bào)率)和投資回報(bào)周期來衡量。投資回報(bào)率是投資獲得的收益部分除以投資所耗的部分，即：

ROI=收益成本/成本現(xiàn)值第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]2．定性分析（1）能否提高產(chǎn)品質(zhì)量和服務(wù)質(zhì)量？（2）能否優(yōu)化內(nèi)部資源配置，提高效率，降低成本？（3）能否改善企業(yè)與客戶之間的關(guān)系，為客戶提供更多、更好的服務(wù)？（4）能否改善管理層的管理能力、管理水平和管理效果？（5）能否為企業(yè)決策層的決策提供有效的支持？（6）能否提高企業(yè)的市場(chǎng)反應(yīng)能力、反應(yīng)速度？（7）能否為企業(yè)的技術(shù)創(chuàng)新和產(chǎn)品創(chuàng)新提供有效支持？第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]3．風(fēng)險(xiǎn)分析建立數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的過程中會(huì)面臨以下幾方面的風(fēng)險(xiǎn)：（1）企業(yè)將建立數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的目標(biāo)定得過于遠(yuǎn)大，不切合實(shí)際，最終難以實(shí)現(xiàn)。（2）系統(tǒng)的實(shí)現(xiàn)周期過長(zhǎng)在一定程度上將導(dǎo)致項(xiàng)目風(fēng)險(xiǎn)的加大。（3）由于項(xiàng)目控制不當(dāng)而產(chǎn)生的風(fēng)險(xiǎn)。（4）由于忽視了數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的后期維護(hù)而產(chǎn)生的風(fēng)險(xiǎn)。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．2數(shù)據(jù)倉(cāng)庫(kù)的開發(fā)方法4．2．l瀑布式開發(fā)方法第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．2．2螺旋式開發(fā)第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．3數(shù)據(jù)倉(cāng)庫(kù)的建立過程

第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．3．1數(shù)據(jù)進(jìn)入數(shù)據(jù)倉(cāng)庫(kù)的過程與建立數(shù)據(jù)倉(cāng)庫(kù)的步驟

1．?dāng)?shù)據(jù)進(jìn)入數(shù)據(jù)倉(cāng)庫(kù)的基本過程操作數(shù)據(jù)向數(shù)據(jù)倉(cāng)庫(kù)的移動(dòng)包括以下五個(gè)過程：提取、變換、凈化、加載和匯總。2．建立數(shù)據(jù)倉(cāng)庫(kù)的步驟（1）收集和分析業(yè)務(wù)需求。（2）建立數(shù)據(jù)模型和數(shù)據(jù)倉(cāng)庫(kù)的物理設(shè)計(jì)。（3）定義數(shù)據(jù)源。（4）選擇數(shù)據(jù)倉(cāng)庫(kù)技術(shù)和平臺(tái)第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]（5）從操作型數(shù)據(jù)庫(kù)中提取、轉(zhuǎn)換和凈化數(shù)據(jù)并加載到數(shù)據(jù)倉(cāng)庫(kù)。（6）選擇訪問和報(bào)表工具。（7）選擇數(shù)據(jù)庫(kù)連接軟件。（8）選擇數(shù)據(jù)分析和數(shù)據(jù)展示軟件。（9）更新數(shù)據(jù)倉(cāng)庫(kù)。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．3．2需求分析數(shù)據(jù)倉(cāng)庫(kù)開發(fā)過程中每一個(gè)階段的每一項(xiàng)任務(wù)都是由需求決定的。(1)數(shù)據(jù)倉(cāng)庫(kù)的需求。用戶必須能夠從數(shù)據(jù)倉(cāng)庫(kù)中找到他們所需要的所有戰(zhàn)略信息，必須能夠方便地訪問數(shù)據(jù)倉(cāng)庫(kù)，運(yùn)行查詢，得到結(jié)果，并且毫無(wú)阻礙地進(jìn)行結(jié)果分析。（2）綜合分析之后形成一份需求定義文檔。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．3．3數(shù)據(jù)路線1．概念模型設(shè)計(jì)概念模型設(shè)計(jì)的操作主要是對(duì)原有數(shù)據(jù)庫(kù)系統(tǒng)中的數(shù)據(jù)進(jìn)行集成和重組而形成的數(shù)據(jù)集合。2．邏輯模型設(shè)計(jì)通過邏輯模型設(shè)計(jì)，可以對(duì)每個(gè)當(dāng)前要裝載的主題的邏輯實(shí)現(xiàn)進(jìn)行定義，并將相關(guān)的內(nèi)容（如適當(dāng)?shù)牧６葎澐郑侠淼臄?shù)據(jù)分割策略，合適的數(shù)據(jù)來源等）記錄在數(shù)據(jù)倉(cāng)庫(kù)的元數(shù)據(jù)中。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]3．物理模型設(shè)計(jì)通過物理模型設(shè)計(jì)，可以確定數(shù)據(jù)的存儲(chǔ)結(jié)構(gòu)，存放位置，索引策略及存儲(chǔ)分配。4．?dāng)?shù)據(jù)裝載接口設(shè)計(jì)編制數(shù)據(jù)裝載程序，該程序包括了數(shù)據(jù)裝載功能和數(shù)據(jù)綜合功能。數(shù)據(jù)裝載功能負(fù)責(zé)數(shù)據(jù)抽取、轉(zhuǎn)換、清洗、集成，數(shù)據(jù)綜合功能負(fù)責(zé)將集成的細(xì)節(jié)數(shù)據(jù)轉(zhuǎn)化為不同綜合層次的數(shù)據(jù)。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．3．4技術(shù)路線技術(shù)路線將會(huì)確定數(shù)據(jù)倉(cāng)庫(kù)的基礎(chǔ)構(gòu)造。并且這種基礎(chǔ)構(gòu)造包括兩類：操作型基礎(chǔ)構(gòu)造和物理基礎(chǔ)構(gòu)造。1、操作型基礎(chǔ)構(gòu)造操作型基礎(chǔ)構(gòu)造包括人員、流程、培訓(xùn)和管理軟件。2．物理基礎(chǔ)構(gòu)造物理基礎(chǔ)構(gòu)造主要包括計(jì)算機(jī)平臺(tái)和一系列的工具。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．3．5應(yīng)用路線

數(shù)據(jù)倉(cāng)庫(kù)的應(yīng)用設(shè)計(jì)主要包括OLAP模型設(shè)計(jì)、數(shù)據(jù)挖掘模型設(shè)計(jì)和信息傳遞設(shè)計(jì)等。1．OLAP模型設(shè)計(jì)第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]2．?dāng)?shù)據(jù)挖掘模型設(shè)計(jì)第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]3．信息傳遞。通常用戶和數(shù)據(jù)倉(cāng)庫(kù)包括六個(gè)階段的交互過程：（1）依據(jù)數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)來定義需求；（2）從數(shù)據(jù)倉(cāng)庫(kù)中來選擇合適的數(shù)據(jù)子集；（3）用計(jì)算機(jī)來操作豐富的子集；（4）將行業(yè)含義和選擇的數(shù)據(jù)結(jié)合起來；（5）將結(jié)果構(gòu)建成適合用戶的格式；（6）用各種方式來表示結(jié)構(gòu)化的結(jié)果。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．3．6數(shù)據(jù)倉(cāng)庫(kù)部署數(shù)據(jù)部署的工作主要包括用戶認(rèn)可、初始裝載、桌面準(zhǔn)備和初始培訓(xùn)等內(nèi)容。1．用戶認(rèn)可。主要工作是測(cè)試所有用戶的界面和系統(tǒng)的性能。2．初始裝載。運(yùn)行接口的驅(qū)動(dòng)程序，將數(shù)據(jù)裝入到數(shù)據(jù)倉(cāng)庫(kù)中。3．桌面準(zhǔn)備。桌面準(zhǔn)備的主要工作是安裝好所有需要的桌面用戶工具，測(cè)試每個(gè)客戶的計(jì)算機(jī)。4．初始培訓(xùn)。這部分工作是讓用戶能夠了解如何使用數(shù)據(jù)倉(cāng)庫(kù)。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．4數(shù)據(jù)倉(cāng)庫(kù)的維護(hù)4．4．l數(shù)據(jù)周期從操作型環(huán)境數(shù)據(jù)發(fā)生改變起，到這個(gè)變化反映到數(shù)據(jù)倉(cāng)庫(kù)中所用的時(shí)間就是數(shù)據(jù)周期。4．4．2參照完整性數(shù)據(jù)的參照完整性是指數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)表之間動(dòng)態(tài)連接。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．4．3數(shù)據(jù)環(huán)境信息第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．4．4數(shù)據(jù)備份與恢復(fù)1．?dāng)?shù)據(jù)備份（1）只有當(dāng)前數(shù)據(jù)才應(yīng)當(dāng)不斷的備份。（2）可以考慮使用日志備份和差異備份的方法。（3）建立良好的備份規(guī)劃，周期性地將數(shù)據(jù)存檔。（4）一般備份的時(shí)間是在夜間進(jìn)行，但也可以使用備份與每日裝載同步進(jìn)行。（5）備份介質(zhì)的選擇第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]2．?dāng)?shù)據(jù)恢復(fù)

恢復(fù)過程中需要注意一些問題：（l）要有一個(gè)清楚的恢復(fù)計(jì)劃。將不同的災(zāi)難情況列表，指出每種情況下如何進(jìn)行恢復(fù)。（2）考慮公司的條件，建立恢復(fù)步驟，估計(jì)恢復(fù)的期望停機(jī)時(shí)間，正確、迅速地通知用戶。（3）如果必須去源系統(tǒng)完成恢復(fù)過程，要保證源系統(tǒng)可用。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．5提高數(shù)據(jù)倉(cāng)庫(kù)性能

可以通過以下四點(diǎn)來提高數(shù)據(jù)倉(cāng)庫(kù)的性能。提高I/O性能縮小查詢范圍采取并行優(yōu)化技術(shù)選擇適當(dāng)?shù)某跏蓟瘏?shù)第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．6數(shù)據(jù)倉(cāng)庫(kù)的安全性4．6．1安全類型從類型上可以分以下四種：Individual個(gè)體Group組Hierarchical層次Conglomeration集成第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．6．2安全方法1．建立外部安全通常我們可以通過建立防火墻、數(shù)據(jù)庫(kù)試圖、密碼等手段，在數(shù)據(jù)倉(cāng)庫(kù)周圍建立屏障。2．建立內(nèi)部安全通常我們可以通過建立防火墻、數(shù)據(jù)庫(kù)試圖、密碼等手段，在數(shù)據(jù)倉(cāng)庫(kù)周圍建立屏障。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．7分布式數(shù)據(jù)倉(cāng)庫(kù)4．7．1采用分布式數(shù)據(jù)倉(cāng)庫(kù)的優(yōu)點(diǎn)第一，整個(gè)代價(jià)低。對(duì)于一個(gè)數(shù)據(jù)倉(cāng)庫(kù),當(dāng)最初采用分布式技術(shù)時(shí),軟、硬代價(jià)要比最初采用大的、中央集成的技術(shù)代價(jià)低;第二，存放在數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)量理論上無(wú)限制。如果數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)量將要超過分布式處理器的限制時(shí),只要在網(wǎng)中加入另一個(gè)處理器即可。這也符合企業(yè)的發(fā)展趨勢(shì);第三，研制、見效周期短。在短期內(nèi)局部數(shù)據(jù)倉(cāng)庫(kù)就能建好、運(yùn)行并使局部組織受益。第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．7．2分布式數(shù)據(jù)倉(cāng)庫(kù)的模型建立與數(shù)據(jù)劃分第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]4．7．3分布式數(shù)據(jù)倉(cāng)庫(kù)的建設(shè)策略（一）建設(shè)的策略一般有四種開發(fā)機(jī)制。1．獨(dú)立建造數(shù)據(jù)倉(cāng)庫(kù)2．分布式(不同地域同時(shí))開發(fā)方式這種策略主要針對(duì)一些業(yè)務(wù)分散在多個(gè)地域的大型企業(yè),業(yè)務(wù)間的交互比較密切。3．在多個(gè)層次上建造數(shù)據(jù)倉(cāng)庫(kù)4．多個(gè)開發(fā)者建立當(dāng)前細(xì)節(jié)層第4章數(shù)據(jù)倉(cāng)庫(kù)的規(guī)劃與開發(fā)[1]（二）建設(shè)的原則建設(shè)