Hadoop大數(shù)據(jù)開發(fā)基礎(chǔ)與案例實戰(zhàn)(微課版)課件 5.8 YARN安裝(完)_第1頁
Hadoop大數(shù)據(jù)開發(fā)基礎(chǔ)與案例實戰(zhàn)(微課版)課件 5.8 YARN安裝(完)_第2頁
Hadoop大數(shù)據(jù)開發(fā)基礎(chǔ)與案例實戰(zhàn)(微課版)課件 5.8 YARN安裝(完)_第3頁
Hadoop大數(shù)據(jù)開發(fā)基礎(chǔ)與案例實戰(zhàn)(微課版)課件 5.8 YARN安裝(完)_第4頁
Hadoop大數(shù)據(jù)開發(fā)基礎(chǔ)與案例實戰(zhàn)(微課版)課件 5.8 YARN安裝(完)_第5頁
已閱讀5頁,還剩10頁未讀 繼續(xù)免費閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)

文檔簡介

Hadoop大數(shù)據(jù)項目開發(fā)——YARN安裝目錄content01YARN的安裝簡介02YARN的安裝0%100%YARN不需要單獨安裝只需要修改Hadoop中的配置文件YARN的安裝簡介YARN:資源調(diào)度平臺主要作用:資源管理作業(yè)調(diào)度兩個進(jìn)程:ResourceManagerNodeManagerYARN的安裝簡介YARN集群部署規(guī)劃如下所示:ResourceManager很消耗內(nèi)存,不要和NameNode、SecondaryNameNode配置在同一個節(jié)點上。節(jié)點masterslave1slave2HDFS節(jié)點NameNodeDataNodeSecondaryNameNodeDataNodeDataNodeYARN節(jié)點NodeManagerNodeManagerResourceManagerNodeManagerYARN的安裝簡介是Yarn平臺的主節(jié)點;負(fù)責(zé)整個集群的所有資源的統(tǒng)一管理和調(diào)度;接收來自各個NodeManager節(jié)點的資源匯報信息;并把這些信息按照一定的策略分配給各個應(yīng)用程序。ResourManagerYARN的安裝簡介是Yarn平臺的從節(jié)點;每個節(jié)點都會有自己的NodeManager;整個集群有多個,負(fù)責(zé)每個節(jié)點上的資源和使用;負(fù)責(zé)接收處理來自ResourceManager的資源分配請求,分配具體的容器給應(yīng)用。NodeManagerYARN的安裝簡介步驟1:修改配置文件yarn-site.xml配置文件所在位置YARN的安裝修改core-site.xml配置文件內(nèi)容指定ResourceManager運(yùn)行在slave2節(jié)點YARN的安裝修改core-site.xml配置文件內(nèi)容需配置成mapreduce_shuffle,才可運(yùn)行MapReduce程序YARN的安裝YARN的安裝步驟2:拷貝yarn-site.xml到另外兩個節(jié)點,執(zhí)行如下命令:步驟3:啟動YARN集群在slave2節(jié)點上啟動YARN集群,執(zhí)行啟動命令,執(zhí)行成功之后會出現(xiàn)以下內(nèi)容:YARN的安裝步驟4:在三個節(jié)點上執(zhí)行jps命令master節(jié)點salve1的節(jié)點salve2的節(jié)點YARN的安裝步驟5:節(jié)點啟動成功,通過http://slave2:8088訪問Web界面,通過瀏覽器監(jiān)測YARN的運(yùn)行狀態(tài)salve2的節(jié)點YARN的安裝本章小結(jié)本節(jié)介紹YARN的

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

最新文檔

評論

0/150

提交評論