第4章數(shù)據(jù)挖掘發(fā)現(xiàn)知識(shí)的類型Valadononry.chAsposeslidesforNET4odientPEvaluationonly.CreatedwithAsposeSlidesforNET4.0dientProfilo71Copyright2019-2019AsposePtyL41廣義知識(shí)4.2關(guān)聯(lián)知識(shí)43分類知識(shí)44預(yù)測(cè)型知識(shí)45偏差型知識(shí)Valadononry.chAsposeslidesforNET4odientPEvaluationonly.CreatedwithAsposeSlidesforNET4.0dientProfilo71Copyright2019-2019AsposePtyL41廣義知識(shí)■從數(shù)據(jù)分析角度出發(fā),數(shù)據(jù)挖掘可以分為兩種類型描述型數(shù)據(jù)挖掘以簡(jiǎn)潔概述的方式表達(dá)數(shù)據(jù)中的存在一些有意義的性質(zhì)■預(yù)測(cè)型數(shù)據(jù)挖掘—通過(guò)對(duì)所提供數(shù)據(jù)集應(yīng)用特定方法分析所獲得的一個(gè)或一組數(shù)據(jù)模型并將該模型用于預(yù)測(cè)未來(lái)新數(shù)據(jù)的有關(guān)性質(zhì)。Valadononry.chAsposeslidesforNET4odientPEvaluationonly.CreatedwithAsposeSlidesforNET4.0dientProfilo71Copyright2019-2019AsposePtyL41廣義知識(shí)■數(shù)據(jù)庫(kù)通常包含了大量細(xì)節(jié)性數(shù)據(jù),然而用戶卻常常想要得到能以簡(jiǎn)潔描述性方式所提供的概要性總結(jié)(summarized這樣的數(shù)據(jù)摘要能夠提供一類數(shù)據(jù)的整體情況描述;或與其它類別數(shù)據(jù)相比較的有關(guān)情況的整體描述。■此外用戶通常希望能輕松靈活地獲得從不同角度和分析細(xì)度對(duì)數(shù)據(jù)所進(jìn)行的描述■描述型數(shù)據(jù)挖掘又稱為概念描述,它是數(shù)據(jù)挖掘中的一個(gè)重要組成部分。下面就將主要介紹如何有效地進(jìn)行定性歸納以獲得概念描述的有關(guān)內(nèi)容234概念上的層次Valadononry.chAsposeslidesforNET4odientPEvaluationonly.CreatedwithAsposeSlidesforNET4.0dientProfilo71Copyright2019-2019AsposePtyL第4章數(shù)據(jù)挖掘發(fā)現(xiàn)知識(shí)的類型411廣義知識(shí)的概念定義廣義知識(shí)是指類別特征的概括性描述知識(shí),也稱為概念描述。它反映同類事物共同性質(zhì),是對(duì)數(shù)據(jù)的概括、精煉和抽象■廣義知識(shí)是對(duì)大量藪據(jù)的歸納、概括,提煉出帶有普遍性的、概括性的描述統(tǒng)計(jì)知識(shí)。Valadononry.chAsposeslidesforNET4odientPEvaluationonly.CreatedwithAsposeSlidesforNET4.0dientProfilo71Copyright2019-2019AsposePtyL第4章數(shù)據(jù)挖掘發(fā)現(xiàn)知識(shí)的類型■數(shù)據(jù)庫(kù)中數(shù)據(jù)及對(duì)象在基本概念層次包含了許多細(xì)節(jié)性的數(shù)據(jù)信息在商場(chǎng)銷售數(shù)據(jù)庫(kù)的商品信息數(shù)據(jù)中,就包含了許多諸如:商品編號(hào)、商品名稱、商品品牌等低層次信息,對(duì)這類大量的數(shù)據(jù)進(jìn)行更高層次抽象以提供一個(gè)概要性描述是十分重要的。例如:對(duì)春節(jié)所銷售商品情況進(jìn)行概要描述,對(duì)于市場(chǎng)和銷售主管來(lái)講顯然是十分重要的■最簡(jiǎn)單的描述型數(shù)據(jù)(廣義知識(shí))挖掘就是定性歸納。定性歸納常常也稱為概念描述。這里概念描述涉及一組(同類別)的對(duì)象,諸如:商店常客等。■概念描述生成對(duì)數(shù)據(jù)的定性描述和對(duì)比定性描述定性概念描述提供了一個(gè)有關(guān)數(shù)據(jù)整體的簡(jiǎn)潔清晰描述(概念內(nèi)涵)對(duì)比定性概念描述提供了基于多組(不同類別)數(shù)據(jù)的對(duì)比概念描述(概念外延)6Valadononry.chAsposeslidesforNET4odientPEvaluationonly.CreatedwithAsposeSlidesforNET4.0dientProfilo71Copyright2019-2019AsposePtyL第4章數(shù)據(jù)挖掘發(fā)現(xiàn)知識(shí)的類型■給定存儲(chǔ)在數(shù)據(jù)庫(kù)中的大量數(shù)據(jù),能夠用簡(jiǎn)潔清晰的高層次抽象泛化名稱來(lái)描述相應(yīng)的定性概念是非常重要的,這樣用戶就可以利用基于多層次數(shù)據(jù)抽象的功能對(duì)數(shù)據(jù)中所存在的一般性規(guī)律進(jìn)行探索■例如在商場(chǎng)數(shù)據(jù)庫(kù)中,銷售主管不用對(duì)每個(gè)顧客的購(gòu)買記錄進(jìn)行檢查,而只需要對(duì)更高抽象層次的數(shù)據(jù)進(jìn)行研究即可。如:對(duì)按地理位置進(jìn)行劃分的顧客購(gòu)買總額、每組顧客的購(gòu)買頻率以及顧客收入情況進(jìn)行更高層次的研究分析。這種多維多層次的數(shù)據(jù)泛化分析與數(shù)據(jù)倉(cāng)庫(kù)中的多維數(shù)據(jù)分析,Valadononry.chAsposeslidesforNET4odientPEvaluationonly.CreatedwithAsposeSlidesforNET4.0dientProfilo71Copyright2019-2019AsposePtyL第4章數(shù)據(jù)挖掘發(fā)現(xiàn)知識(shí)的類型412廣義知識(shí)的發(fā)現(xiàn)方法要順利完成概要描述任務(wù),就需要一個(gè)十分重要的數(shù)據(jù)挖掘功能:數(shù)據(jù)泛化■數(shù)據(jù)泛化是一個(gè)從相對(duì)低層概念到更高層概念且對(duì)數(shù)據(jù)庫(kù)中與任務(wù)相關(guān)的大量數(shù)據(jù)進(jìn)行抽象概述的一個(gè)分析過(guò)程。對(duì)大量數(shù)據(jù)進(jìn)行有效靈活的概述方法主要有兩種■1.數(shù)據(jù)立方體2.面向?qū)傩缘囊?guī)約Valadononry.chAsposeslidesforNET4odientPEvaluationonly.CreatedwithAsposeSlidesforNET4.0dientProfilo71Copyright2019-2019AsposePtyL1.數(shù)據(jù)立方體■數(shù)據(jù)立方的維是通過(guò)一系列能夠形成層次的屬性或網(wǎng)格,例如:日期(date)可以包含屬性天、周、月、季和年,這些屬性構(gòu)成了維的網(wǎng)格。■利用數(shù)據(jù)立方方法(又稱為OLAP方法)進(jìn)行數(shù)據(jù)泛化,就是在數(shù)據(jù)立方中存放著預(yù)先對(duì)部分或所有維(屬性)的聚合計(jì)算結(jié)果通常數(shù)據(jù)立方中的數(shù)據(jù)需要經(jīng)過(guò)費(fèi)時(shí)復(fù)雜的運(yùn)算操作(如:sum、count、average),不同的抽象層次均需要進(jìn)行這類運(yùn)算,將這些運(yùn)算與操作結(jié)果存放在這些數(shù)據(jù)立方中,最終所獲得的這些數(shù)據(jù)立方可用于決策支持、知識(shí)發(fā)現(xiàn),或其它許多應(yīng)用。Valadononry.chAsposeslidesforNET4odientPEvaluationonly.CreatedwithAsposeSlidesforNET4.0dientProfilo71Copyright2019-2019AsposePtyL1.數(shù)據(jù)立方體■對(duì)多維數(shù)據(jù)立方的數(shù)據(jù)泛化和數(shù)據(jù)細(xì)化工作,可以通過(guò)rollup或drilldown操作實(shí)現(xiàn)上卷(roll-up):匯總數(shù)據(jù)消減數(shù)據(jù)立方中的維數(shù)(維規(guī)約),或?qū)傩灾捣夯癁楦邔哟蔚母拍?概念分層向上攀升)下鉆(dri-down):上卷的逆操作由不太詳細(xì)的數(shù)據(jù)到更詳細(xì)的數(shù)據(jù),可以通過(guò)沿維的概念分層向下或引入新的