Hadoop大數據項目開發——Hadoop簡介目錄content0201Hadoop簡介Hadoop特點Hadoop簡介Hadoop是一個Apache軟件基金會旗下的開源軟件Hadoop簡介Hadoop具有旺盛的生命力免費極大的降低使用的復雜旺盛的生命力它對普通用戶屏蔽了技術底層實現的細節，只要按照它提供的接口做一些簡單的操作，后臺所有的工作全部有它整個系統技術自己去實現。Hadoop簡介Hadoop是用Java開發，但支持多種編程語言開發Hadoop是使用Java語言開發，但不是只能用Java語言去寫Hadoop的應用，在Hadoop平臺上開發它的應用可以使用任意語言。Hadoop簡介--兩大核心大數據項目的集合體，一整套解決方案的統稱分布式并行編程框架MapReduce海量數據的分布式計算分布式文件系統HDFS：海量數據的分布式存儲Hadoop簡介--解決兩大關鍵問題HDFS：海量數據的分布式存儲解決怎么用成百上千乃至上萬臺機器存儲PB乃至EB規模的數據。Hadoop解決了大數據時代最關鍵的兩個難題：MapReduce:海量數據的分布式處理解決上千臺服務器同時完成一個任務的分布式并行處理。Hadoop在各個領域得到了非常廣泛的應用，滿足了許多企業實際的需求，也成為各大知名公司的寵兒。。Hadoop簡介--應用國內點擊添加標題內容添加關鍵字Hadoop起源Hadoop平臺的兩大核心組件均來自于谷歌2008年1月，Hadoop正式成為Apache頂級項目；2008年4月，Hadoop用910個節點構成集群，對1TB的數據進行排序，僅用了209秒，一戰成名，Hadoop由此名聲大震。Hadoop最早是為了構建一個大型全網搜索引擎。谷歌2004年發布了并行編程框架MapReduce。2005年，Hadoop平臺把它作為自己的MapReduce的開源實現。谷歌2003年發布了分布式文件系統GFS，2004年，Hadoop把GFS應用到自己的平臺，即HDFS是GFS的開源實現。Hadoop簡介Hadoop的名字不是單詞的首字母縮寫Hadoop不是版本號最高就代表最新這是因為對于任何一個Apache開源項目，當需要開發某個特性時，會專門從主代碼線中延伸出一個分支。由于多個分支可能會同時進行研發，因此版本高的分支有時候會先于版本低的分支發布。Hadoop項目負責人曾經這樣描述過這個名字：“這是我的孩子給他的黃色毛絨小象玩具起得名字，簡短易于讀寫，沒有具體意義且沒有被別人使用過，這就是我對于項目命名的原則”。Hadoop特點低成本高效性高容錯性高可靠性支持多種編程語言高擴展性Hadoop特點高可靠性Hadoop采用冗余副本機制；當部分機器發生故障時，其他機器也可以保證集群正常對外提供服務。集群中的一臺機器有問題，其余機器繼續提供服務Hadoop特點高效性Hadoop以并行的方式工作，非常高效的處理海量數據。成百上千臺機器一起計算Hadoop特點高擴展性Hadoop實現了線性擴展，可以從單個服務器擴展到數千臺計算機，并且每臺計算機都提供了數據存儲功能和計算功能。Hadoop特點高容錯性Hadoop能夠自動保存數據的多個副本，并且能夠自動將失敗的任務重新分配，當其中一個副本出現故障時，不影響集群的整體運行。Hadoop特點低成本Hadoop使用廉價計算機搭建集群，從而降低了硬件成本，普通用戶也可以使用自己的個人計算機搭建和運行Hadoop。個人計算機搭建大數據集群Hadoop特點123支持多種編程語言支持多種編程語言完成Hadoop平臺的應用程序開發。

具有很好的跨平臺特性；Ha