第10章物聯網的數據處理10.1數據中心10.2大數據與物聯網10.3數據庫系統 10.4數據挖掘10.5搜索引擎第10章物聯網的數據處理10.1數據中心第10章物聯網的數據處理--續10.6海量數據存儲10.7云計算10.8普適計算10.9數據呈現第10章物聯網的數據處理--續10.6海量數據存儲10.1數據中心10.1.1數據中心的組成10.1.2數據中心的分類與分級10.1.3數據中心的建設10.1數據中心10.1.1數據中心的組成數據中心的定義可以實現信息的集中處理、存儲、傳輸、交換和管理等功能的基礎設施計算機設備服務器網絡設備通信設備存儲設備《物聯網概論》-韓毅剛4數據中心的定義可以實現信息的集中處理、存儲、傳輸、交換和管理數據中心外部Google《物聯網概論》-韓毅剛5數據中心外部Google《物聯網概論》-韓毅剛5IDC《物聯網概論》-韓毅剛6IDC《物聯網概論》-韓毅剛6數據中心內部《物聯網概論》-韓毅剛7數據中心內部《物聯網概論》-韓毅剛7數據中心內部《物聯網概論》-韓毅剛8數據中心內部《物聯網概論》-韓毅剛810.1.1數據中心的組成《物聯網概論》-韓毅剛9物理組成邏輯組成10.1.1數據中心的組成《物聯網概論》-韓毅剛9物理組成數據中心物理組成計算機設備服務器網絡設備通信設備存儲設備《物聯網概論》-韓毅剛10數據中心物理組成計算機設備《物聯網概論》-韓毅剛10數據中心邏輯組成支撐系統計算設備業務信息系統《物聯網概論》-韓毅剛11數據中心邏輯組成支撐系統《物聯網概論》-韓毅剛11數據中心的邏輯組成示意圖《物聯網概論》-韓毅剛12數據中心的邏輯組成示意圖《物聯網概論》-韓毅剛1210.1.2數據中心的分類與分級分類EDCIDC分級國標GB50174-92《物聯網概論》-韓毅剛1310.1.2數據中心的分類與分級分類《物聯網概論》-韓毅剛數據中心分類EDC企業數據中心IDC互聯網數據中心《物聯網概論》-韓毅剛14數據中心分類EDC《物聯網概論》-韓毅剛14分級國標GB50174-92A（容錯型）B（冗余型）C（基本型）國際TIA-942標準TierⅠTierⅡTierⅢTierⅣ《物聯網概論》-韓毅剛15分級國標《物聯網概論》-韓毅剛1510.1.3數據中心的建設建筑裝修設備安裝《物聯網概論》-韓毅剛1610.1.3數據中心的建設建筑《物聯網概論》-韓毅剛16數據中心部分機柜《物聯網概論》-韓毅剛17數據中心部分機柜《物聯網概論》-韓毅剛17數據中心部分通信設備機柜《物聯網概論》-韓毅剛18數據中心部分通信設備機柜《物聯網概論》-韓毅剛18走線架《物聯網概論》-韓毅剛19走線架《物聯網概論》-韓毅剛19數據中心的電源組《物聯網概論》-韓毅剛20數據中心的電源組《物聯網概論》-韓毅剛20UPC供電系統《物聯網概論》-韓毅剛21UPC供電系統《物聯網概論》-韓毅剛21發電機供電《物聯網概論》-韓毅剛22發電機供電《物聯網概論》-韓毅剛22空調系統《物聯網概論》-韓毅剛23空調系統《物聯網概論》-韓毅剛23監控系統單個機房《物聯網概論》-韓毅剛24計算機網絡

TCP/IP

TCP/IPAgent軟件或Client軟件機房環境

TCP/IPWeb軟件

TCP/IP網絡設備嵌入式系統監控系統單個機房《物聯網概論》-韓毅剛24計算機網絡TCP消防系統原理《物聯網概論》-韓毅剛25消防系統原理《物聯網概論》-韓毅剛25防雷接地系統《物聯網概論》-韓毅剛26防雷接地系統《物聯網概論》-韓毅剛2610.2大數據與物聯網10.2.1大數據的概念10.2.2物聯網與大數據的關系10.2.3物聯網大數據的特點10.2.4大數據的分析與處理27《物聯網概論》-韓毅剛10.2大數據與物聯網10.2.1大數據的概念27《物聯10.2.1大數據的概念4個“V”Volume（大量）Variety（多樣）Value（價值）Velocity（高速），《物聯網概論》-韓毅剛2810.2.1大數據的概念4個“V”《物聯網概論》-韓毅剛210.2.2物聯網與大數據的關系物聯網催生了大數據大數據豐富了物聯網應用《物聯網概論》-韓毅剛2910.2.2物聯網與大數據的關系物聯網催生了大數據《物聯網10.2.3物聯網大數據的特點1）數據量更大2）數據速率更高3）數據更加多樣化4）物聯網對數據真實性的要求更高《物聯網概論》-韓毅剛3010.2.3物聯網大數據的特點1）數據量更大《物聯網概論》10.2.4大數據的分析與處理1）批量數據處理系統2）流式數據處理系統3）交互式數據處理系統4）圖數據處理系統《物聯網概論》-韓毅剛3110.2.4大數據的分析與處理1）批量數據處理系統《物聯網10.3數據庫系統 10.3.1數據庫的類型10.3.2數據庫的操作10.3.3數據庫與物聯網32《物聯網概論》-韓毅剛10.3數據庫系統 10.3.1數據庫的類型32《物聯網10.3.1數據庫的類型《物聯網概論》-韓毅剛33關系數據庫層次數據庫網狀數據庫10.3.1數據庫的類型《物聯網概論》-韓毅剛33關系數據新型數據庫演繹數據庫面向對象數據庫分布式數據庫分布式實時數據庫工程數據庫時態數據庫模糊數據庫《物聯網概論》-韓毅剛34新型數據庫演繹數據庫《物聯網概論》-韓毅剛3410.3.2數據庫的操作DBMSSQL《物聯網概論》-韓毅剛3510.3.2數據庫的操作DBMS《物聯網概論》-韓毅剛35DBMS桌面數據庫AccessFoxProdBase客戶/服務器數據庫SQLServerOracleSybase《物聯網概論》-韓毅剛36DBMS桌面數據庫《物聯網概論》-韓毅剛36SQL查詢更新添加刪除《物聯網概論》-韓毅剛37SQL查詢《物聯網概論》-韓毅剛3710.3.3數據庫與物聯網非關系數據庫系統物聯網數據庫特征《物聯網概論》-韓毅剛3810.3.3數據庫與物聯網非關系數據庫系統《物聯網概論》-非關系數據庫系統非SQL亞馬遜的Dynamo臉譜的Cassandra阿帕奇的HBase《物聯網概論》-韓毅剛39非關系數據庫系統非SQL《物聯網概論》-韓毅剛39物聯網數據庫特征數據量大數據異構性強數據關聯性復雜分布式存儲數據實時性《物聯網概論》-韓毅剛40物聯網數據庫特征數據量大《物聯網概論》-韓毅剛40物聯網數據庫舉例分布式實時數據庫主動數據庫《物聯網概論》-韓毅剛41物聯網數據庫舉例分布式實時數據庫《物聯網概論》-韓毅剛4110.4數據挖掘10.4.1數據挖掘的過程10.4.2數據挖掘的方法10.4.3物聯網中的數據挖掘42《物聯網概論》-韓毅剛10.4數據挖掘10.4.1數據挖掘的過程42《物聯網概10.4.1數據挖掘的過程《物聯網概論》-韓毅剛431.數據處理2.數據挖掘3.知識評估與表示10.4.1數據挖掘的過程《物聯網概論》-韓毅剛431.1.數據處理1）數據準備2）數據選取3）數據預處理4）數據變換《物聯網概論》-韓毅剛441.數據處理1）數據準備《物聯網概論》-韓毅剛44

2.數據挖掘1）選擇算法2）數據挖掘。《物聯網概論》-韓毅剛45

2.數據挖掘1）選擇算法《物聯網概論》-韓毅剛45

3.知識評估與表示模式選擇知識評估結果可視化《物聯網概論》-韓毅剛46

3.知識評估與表示模式選擇《物聯網概論》-韓毅剛4610.4.2數據挖掘的方法集合論方法信息論方法仿生學方法其他方法《物聯網概論》-韓毅剛4710.4.2數據挖掘的方法集合論方法《物聯網概論》-韓毅剛數據挖掘的具體方法1）統計分析方法2）決策樹3）神經網絡4）遺傳算法5）粗糙集6）聯機分析處理技術《物聯網概論》-韓毅剛48數據挖掘的具體方法1）統計分析方法《物聯網概論》-韓毅剛4810.4.3物聯網中的數據挖掘1.異構數據的處理2.分布式數據挖掘《物聯網概論》-韓毅剛4910.4.3物聯網中的數據挖掘1.異構數據的處理《物聯網1.異構數據的處理結構化數據半結構化數據非結構化數據《物聯網概論》-韓毅剛501.異構數據的處理結構化數據《物聯網概論》-韓毅剛502.分布式數據挖掘集中式局部式《物聯網概論》-韓毅剛512.分布式數據挖掘集中式《物聯網概論》-韓毅剛51

10.5搜索引擎10.5.1搜索引擎的分類10.5.2搜索引擎的組成和工作原理10.5.3面向物聯網的搜索引擎52《物聯網概論》-韓毅剛

10.5搜索引擎10.5.1搜索引擎的分類52《物聯網10.5.1搜索引擎的分類《物聯網概論》-韓毅剛53全文搜索引擎目錄索引類搜索引擎元搜索引擎10.5.1搜索引擎的分類《物聯網概論》-韓毅剛53全文搜10.5.2搜索引擎的組成和工作原理工作過程組成工作原理《物聯網概論》-韓毅剛5410.5.2搜索引擎的組成和工作原理工作過程《物聯網概論》搜索引擎工作過程搜索信息整理信息，建立索引結果排序《物聯網概論》-韓毅剛55搜索引擎工作過程搜索信息《物聯網概論》-韓毅剛55搜索引擎系統結構《物聯網概論》-韓毅剛56搜索引擎系統結構《物聯網概論》-韓毅剛56搜索引擎的組成1.搜索器2.索引器3.檢索器4.用戶接口《物聯網概論》-韓毅剛57搜索引擎的組成1.搜索器《物聯網概論》-韓毅剛5710.5.3面向物聯網的搜索引擎數據特征搜索引擎特征《物聯網概論》-韓毅剛5810.5.3面向物聯網的搜索引擎數據特征《物聯網概論》-韓搜索引擎特征1）搜索內容的時空性強2）實體搜索3）查詢輸入方式多樣4）安全和隱私問題5）多媒體搜索《物聯網概論》-韓毅剛59搜索引擎特征1）搜索內容的時空性強《物聯網概論》-韓毅剛5910.6海量數據存儲10.6.1磁盤陣列10.6.2網絡存儲10.6.3云存儲60《物聯網概論》-韓毅剛10.6海量數據存儲10.6.1磁盤陣列60《物聯網概論10.6.1磁盤陣列《物聯網概論》-韓毅剛611．RAID級別2.RAID技術特點3.RAID的實現10.6.1磁盤陣列《物聯網概論》-韓毅剛611．RAID磁盤陣列《物聯網概論》-韓毅剛62磁盤陣列《物聯網概論》-韓毅剛624盤位磁盤陣列存儲器《物聯網概論》-韓毅剛634盤位磁盤陣列存儲器《物聯網概論》-韓毅剛63機柜式磁盤陣列《物聯網概論》-韓毅剛64機柜式磁盤陣列《物聯網概論》-韓毅剛64RAID級別RAID分為0～7個級別RAID10RAID0與RAID1的組合RAID50RAID0與RAID5的組合《物聯網概論》-韓毅剛65RAID級別RAID分為0～7個級別《物聯網概論》-韓毅剛RAID優點傳輸速率高容錯《物聯網概論》-韓毅剛66RAID優點傳輸速率高《物聯網概論》-韓毅剛66RAID的具體實現軟件RAID硬件RAID《物聯網概論》-韓毅剛67RAID的具體實現軟件RAID《物聯網概論》-韓毅剛6710.6.2網絡存儲1.直接附加存儲DAS2.網絡附加存儲NAS3.存儲區域網SAN《物聯網概論》-韓毅剛6810.6.2網絡存儲1.直接附加存儲DAS《物聯網概論》-1.直接附加存儲DAS直附式存儲DirectAttachedStorage電纜直接相連《物聯網概論》-韓毅剛691.直接附加存儲DAS直附式存儲《物聯網概論》-韓毅剛69

2.網絡附加存儲NAS網附式存儲NetworkAttachedStorage通過網絡接口連接《物聯網概論》-韓毅剛70

2.網絡附加存儲NAS網附式存儲《物聯網概論》-韓毅剛703.存儲區域網SANSANStorageAreaNetwork《物聯網概論》-韓毅剛713.存儲區域網SANSAN《物聯網概論》-韓毅剛7110.6.3云存儲概念結構模型《物聯網概論》-韓毅剛7210.6.3云存儲概念《物聯網概論》-韓毅剛72云存儲的概念一種服務模式云計算的延伸《物聯網概論》-韓毅剛73云存儲的概念一種服務模式《物聯網概論》-韓毅剛73云存儲的體系結構訪問層應用接口層基礎管理層存儲層《物聯網概論》-韓毅剛74云存儲的體系結構訪問層《物聯網概論》-韓毅剛7410.7云計算10.7.1云計算的概念10.7.2云計算系統的組成和結構10.7.3云計算系統實例10.7.4云計算系統的開發75《物聯網概論》-韓毅剛10.7云計算10.7.1云計算的概念75《物聯網概論》10.7.1云計算的概念《物聯網概論》-韓毅剛76定義分類延伸10.7.1云計算的概念《物聯網概論》-韓毅剛76定義云計算的定義一種基于互聯網的新的IT服務增加、使用和交付模式《物聯網概論》-韓毅剛77云計算的定義一種基于互聯網的新的IT服務增加、使用和交付模式云計算的服務模式基礎設施即服務IaaSInfrastructureasaService平臺即服務PaaSPlatformasaService軟件即服務SaaSSoftwareasaService《物聯網概論》-韓毅剛78云計算的服務模式基礎設施即服務《物聯網概論》-韓毅剛78云計算的類型公共云私有云企業云《物聯網概論》-韓毅剛79云計算的類型公共云《物聯網概論》-韓毅剛79云計算的延伸云存儲云安全云電視云手機海計算框計算風計算《物聯網概論》-韓毅剛80云計算的延伸云存儲《物聯網概論》-韓毅剛8010.7.2云計算系統的組成和結構SOA層中間管理層資源池層物理資源層《物聯網概論》-韓毅剛8110.7.2云計算系統的組成和結構SOA層《物聯網概論》-云計算體系結構《物聯網概論》-韓毅剛82云計算體系結構《物聯網概論》-韓毅剛8210.7.3云計算系統實例1.亞馬遜云計算2.微軟云計算WindowsAzure《物聯網概論》-韓毅剛8310.7.3云計算系統實例1.亞馬遜云計算《物聯網概論》1.亞馬遜云計算彈性計算云EC2ElasticComputeCloud簡單存儲服務S3SimpleStorageService簡單數據庫服務SDBSimpleDB《物聯網概論》-韓毅剛841.亞馬遜云計算彈性計算云《物聯網概論》-韓毅剛84EC2基本架構《物聯網概論》-韓毅剛85EC2基本架構《物聯網概論》-韓毅剛85S3基本數據結構《物聯網概論》-韓毅剛86S3基本數據結構《物聯網概論》-韓毅剛86

2.微軟云計算WindowsAzure云計算操作系統SQLAzure云計算數據庫.NET服務《物聯網概論》-韓毅剛87

2.微軟云計算WindowsAzure云計算操作系統《WindowsAzure主要部分《物聯網概論》-韓毅剛88WindowsAzure主要部分《物聯網概論》-韓毅剛810.7.4云計算系統的開發1.開源云計算系統Hadoop2.開源云計算系統Spark3.云計算虛擬化技術4.云計算仿真器CloudSim《物聯網概論》-韓毅剛8910.7.4云計算系統的開發1.開源云計算系統Hadoo1.開源云計算系統HadoopHDFS分布式文檔系統MapReduce分布式平行計算框架Hbase分布式數據庫《物聯網概論》-韓毅剛901.開源云計算系統HadoopHDFS分布式文檔系統《物聯Hadoop的云計算架構《物聯網概論》-韓毅剛91Hadoop的云計算架構《物聯網概論》-韓毅剛91

2.云計算虛擬化技術全虛擬化半虛擬化硬件輔助虛擬化《物聯網概論》-韓毅剛92

2.云計算虛擬化技術全虛擬化《物聯網概論》-韓毅剛92

3.云計算仿真器CloudSim用戶代碼層CloudSim層GridSim層SimJava層《物聯網概論》-韓毅剛93

3.云計算仿真器CloudSim用戶代碼層《物聯網概論》CloudSim體系結構《物聯網概論》-韓毅剛94CloudSim體系結構《物聯網概論》-韓毅剛9410.8普適計算10.8.1普適計算技術的特征10.8.2普適計算的組成10.8.3普適計算的體系結構10.8.4普適計算的關鍵技術95《物聯網概論》-韓毅剛10.8普適計算10.8.1普適計算技術的特征95《物聯普適計算的概念《物聯網概論》-韓毅剛96普適計算的概念《物聯網概論》-韓毅剛9610.8.1普適計算技術的特征《物聯網概論》-韓毅剛97信息空間與物理空間間斷連接與輕量計算10.8.1普適計算技術的特征《物聯網概論》-韓毅剛97信信息空間與物理空間的融合《物聯網概論》-韓毅剛98信息空間與物理空間的融合《物聯網概論》-韓毅剛9810.8.2普適計算的組成普適計算設備普適計算網絡系統軟件人機交互《物聯網概論》-韓毅剛9910.8.2普適計算的組成普適計算設備《物聯網概論》-韓毅普適計算系統《物聯網概論》-韓毅剛100普適計算系統《物聯網概論》-韓毅剛10010.8.3普適計算的體系結構層次模型見仁見智4層模型8層模型《物聯網概論》-韓毅剛10110.8.3普適計算的體系結構層次模型《物聯網概論》-韓毅應用環境中的普適計算體系結構《物聯網概論》-韓毅剛102應用環境中的普適計算體系結構《物聯網概論》-韓毅剛10210.8.4普適計算的關鍵技術1.人機接口技術2.上下文感知計算3.服務的組合4.自適應技術《物聯網概論》-韓毅剛10310.8.4普適計算的關鍵技術1.人機接口技術《物聯網概論1.人機接口技術1）接口的自適應性2）不可見的用戶接口《物聯網概論》-韓毅剛1041.人機接口技術1）接口的自適應性《物聯網概論》-韓毅剛10

2.上下文感知計算上下文信息“5何”何時、何地、何人、何事、何因5Wwhen,where,who,what,why《物聯網概論》-韓毅剛105

2.上下文感知計算上下文信息《物聯網概論》-韓毅剛1053.服務的組合組合服務的發現服務的匹配服務的選擇服務協調器錯誤檢測與修復《物聯網概論》-韓毅剛1063.服務的組合組合服務的發現《物聯網概論》-韓毅剛1064.自適應技術對用戶情境自適應對設備資源自適應對系統資源狀態自適應保留系統《物聯網概論》-韓毅剛1074.自適應技術對用戶情境自適應《物聯網概論》-韓毅剛10710.9數據呈現10.9.1實時推送技術10.9.2數據可視化10.9.3HTML510.9.4數據呈現開發實例108