2023學年完整公開課版審計YARN操作_第1頁
2023學年完整公開課版審計YARN操作_第2頁
2023學年完整公開課版審計YARN操作_第3頁
2023學年完整公開課版審計YARN操作_第4頁
2023學年完整公開課版審計YARN操作_第5頁
已閱讀5頁，還剩6頁未讀， 繼續免費閱讀

下載本文檔

版權說明：本文檔由用戶提供并上傳，收益歸屬內容提供方，若內容存在侵權，請進行舉報或認領

文檔簡介

主講：侯磊審計YARN操作目錄0102Sentry和Hive授權審計YARN操作Sentry和Hive授權1Sentry和Hive授權當客戶端訪問Hive表時,受到的唯一限制就是HDFS文件權限，這些權限不是很強。用戶可以輕松地更改Hivemetastore。用戶創建表，將數據插入表或根據任何Hive表運行查詢的能力沒有被限制。通過Sentry進行Hive授權，可以使用精細授權策略。雖然Hive使用我們熟悉的數據庫術語(如表、行和分區)，但Hive表實際上是HDFS目錄，Hive表的分區是主HDFSHive目錄下的子目錄。可以在數據庫或表級別上為用戶、組或角色分配各種Hive權限，例如select、update和alter。Sentry和Hive授權但是，Hive在權限方面存在嚴重的缺陷：由于可以直接更改HDFS權限，因此Hive中沒有內置用來防止存儲在Hive.metastore中的元數據與HDFS文件權限不匹配的功能。Hive無法限制表數據部分的權限，也不能提供列級別權限或定義服務器級角色。在Sentry中能夠在服務器、數據庫和表級別創建角色。也可以使用這些角色為用戶提供對表數據的部分訪問權限。Sentry和Hive授權一個關鍵的安全問題是保護Hive元數據庫免受客戶任意改變。HiveServer2的目標是通過JDBC和ODBC用戶界面來支持來自客戶端的請求。HiveServer2訪問Hivemetastore以獲取元數據信息，并為客戶端執行必要的Hive操作。使用Sentry，可以確保所有HiveServer2聯系人都獲得授權，并且用戶必須使用HiveServer2才能訪問Hive數據庫。總而言之，在配置Hive的Sentry授權時，必須確保HiveServer2和Hive元數據庫的安全。審計YARN操作2審計YARN操作Hadoop用戶在兩個不同的日志文件中記錄YARN操作。ResourceManager日志文件包括ResourceManager執行的活動，例如提交應用程序請求和分配容器。NodeManager日志文件跟蹤YARN應用程序中的每個NodeManager做的事情，例如容器請求。可以在YARNperties文件中使用配置屬性來配置YARN審計事件跟蹤。審計YARN操作假設用戶sam通過YARN提交MapReduce應用程序。ResourceManager日志文件(部分)如下所示：審計YARN操作可以看到，YARN為用戶sam授權以下類型的YARN應用程序：■應用申請■分

溫馨提示

  • 1. 本站所有資源如無特殊說明，都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等，如果需要附件，請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙，網頁內容里面會有圖紙預覽，若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間，僅對用戶上傳內容的表現方式做保護處理，對用戶上傳分享的文檔內容本身不做任何修改或編輯，并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容，請與我們聯系，我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論