1、大數據技術在網絡安全分析中的應用作者：韋俊旭來源：衛星電視與寬帶多媒體2021年第 22期【摘要】21世紀我國已經進入了網絡建設的全新時代，在網絡的安全運行過程，對于大 數據技術的應用一定要重視起來。能夠注重對流量數據和分散日志的集中化管理，同時，通過 儲存，采集，檢索等方式來提高網絡數據的處理速度和效率，關注到網絡的安全問題，盡可能 地減少安全分析的時間。本文首先了解了大數據技術與網絡安全分析，隨后分析了大數據技術 在網絡安全分析領域的應用意義，最后探究了大數據技術在網絡安全分析中的應用。【關鍵詞】大數據技術;網絡安全分析;重要意義;應用中圖分類號：TN92 文獻標識碼：A DOI : 10

2、.12246/j.issn.l673-0348.2021.22.033結合網絡信息技術發展特點，在網絡信息技術發展的背景下，網絡框架呈現出復雜性的發 展變化，網絡資源內容呈現出細致性以及多元化的變化，若在網絡信息技術使用中，缺少網絡 安全意識，會降低網絡安全性，無法滿足不同行業的信息化發展需求。所以，在網絡安全分析 中，通過大數據技術的運用，不僅可以實現數據量大、速度快的使用優勢，也可以滿足網絡系 統利用的安全性，展現網絡安全防護的價值。1 .大數據技術在網絡安全分析領域的應用意義網絡安全分析應用大數據技術的重要性為了改善和提高互聯網網絡信息安全的精確度和準確率，就必須采取更多的方法。網絡安

3、全分析中，利用大數據技術在網絡上的應用主要集中于分析數據，傳統的對于數據信息進行傳 遞的技術已經滿足不了越來越多人日益擴展的需求。而且大數據技術可以在海量、沒有一定規 律的信息處理中仍舊能夠很好地保證其效率與準確度，這些都是傳統的信息技術所做不到的。 因此為了有效地保障信息安全，就必須要求大數據技術在企業中得到廣泛的運用。大數據技術 可以有效地提升網絡安全性分析系統的內部存儲和管理能力。由于網絡的信息復雜、巨大，要 把這些海量信息進行集中、分析和存儲，這就必然需要互聯網和大數據技術的協助。并且，大 數據技術在網絡安全方面的運用，可以有效地降低網絡維護和安全管理的成本。大數據所采用 的結構化數據

4、庫方式較之于傳統結構化的數據庫方式效率更好，對硬件的要求低，成本更低。1 .2大數據技術在網絡安全分析領域的應用優勢分析資料更加詳實網絡安全問題涉及到諸多影響因素，涉及到與整個網絡運行密切相關的各種流程和節點。 它要求我們廣泛收集和分析網絡世界中可能產生的各種海量信息數據。然而，傳統的大數據分 析技術不能完全滿足這項技術的要求。一般只圍繞具體問題收集和分析數據，這嚴重制約了網 絡安全分析結果的準確性，其工作價值無法得到保證。大數據技術的發展是為了有效解決網絡上數量眾多的、非結構化數據的采集和處理問題。 利用這項技術，我們可以廣泛收集和處理網絡世界中人類產生的各種海量信息，這顯然在很大 程度上增

5、加了豐富的分析數據，我們的研究結論也變得更加可靠。提升分析效率與其他大數據技術方法相比，傳統的數據處理方法和手段主要是處理具有結構和形態多樣 性的大規模復雜信息，分析和處理這些數據的效率相對較低。我們的網絡安全分析基于移動互 聯網的應用領域。網絡世界的每一個地方都會收集到大量與安全密切相關的信息，這就導致了 以往傳統數據處理技術中所存在的不利局面，阻礙了我們工作效率的提高。基于此，要加強大 數據技術在互聯網安全分析等新技術領域的實際應用，特別是加強基于大數據技術的信息分析 平臺的建設和運營，通過分布式數據采集獲得的各種海量異構數據資源進行分布式存儲和并行 計算，全面提升大數據的綜合處理能力和效

6、率。降低數據處理成本信息數據的采集可以通過對現有的網絡基礎設施進行微小的改動直接實現，信息數據的采 集可以通過移動終端直接完成。由于大部分數據處理任務都安裝在云端，本地人員無需部署大 量計算機和計算機分析資源，有效降低了系統的運營成本。2. 大數據技術在網絡安全分析中的應用2.1 信息的采集在對數據分析過程中可以將信息的采集作為基本條件，需要結合網絡安全的需求科學合理 的采集數據信息，大數據技術在信息采集階段的應用十分必要，信息采集作為信息整合與分析 的前提基礎，完善采集工作板與后續工作的順利開展。在大數據技術的采集階段應用匯總，其 常見的技術手段有Flume、Kafka、Storm技術，以便

7、于大數據進行各種分布式的采集。這種數 據采集的方式比較高效，其采集的速度可以達到每秒內數百兆左右，從而使得它們在對各種日 志數據信息等進行處理的過程中得以獲得顯著成效。這幾項信息采集技術的應用會將所采集信 息中有價值的信息分離出來，再講分離出來的價值信息進行重新整合與分析，最終生成數據報 告和完成數據傳輸工作。需要強調的是，在最終生成的數據傳輸工作前，其數據要進行檢查和 分類，確保數據格式的正確性能夠符合消費者所需服務的要求。2.2 信息的儲存能否有效地存儲安全的信息和數據，是我們衡量網絡安全分析的一個重要環節，信息的收 集和存儲對于互聯網網絡安全的分析來講很重要，而且在實際中運用到了大數據技

8、術就能夠通 過多種形式采取不同的存儲手段來處理和應對不同類型的信息和數據，從而大幅度地提升了數 據的查詢與存儲的順利性以及其工作效率。在信息的存儲過程中，必須要考慮到數據信息的類 別和數量，信息的存儲一方面要確保數據信息分類的科學性，另外，在存儲量上一定要確保容 量，確保數據存儲的安全穩定不易丟失，只有明確好這些才能夠選擇最為合適的存儲方法，以 便提高數據的查詢速度和存儲效率。在網絡組織架構的計算過程中，必須要考慮到安全實施的 標準，把分布式作為依據，在數據的設置和分析過程中，要注重節點上的計算，使用腳本挖掘 來更好地分析網絡的安全級別，通過列式的方式存儲數據，把需要分析的數據資源放到每一個

9、計算的節點中，系統在此就會對其進行快速的分析，并且完成信息的統計工作，最后再通過流 式的方式把分析的結果放在數據庫當中。數據的檢索數據的檢索是在數據分類存儲的基礎上進行的，通過對數據信息進行檢索有利于促進網絡 安全數據分析工作的順利進行，科學合理的檢索信息，從而使得使用者通過查找關鍵詞的方式 即可查詢到所需數據信息，能夠提升網絡安全分析的性能，同時在數據分析質量提升方面起著 舉足輕重的作用。在開展網絡安全分析工作過程中，有必要檢索數據信息，通常使用 MapReduce 方法對數據進行檢索，把提出的查詢請求傳送到各個處理節點，然后將查詢請求進 行有效處理，接著采用分布式計算，可以加快相關數據信息

10、的檢索。檢索速度的提高有利于促 進網絡安全數據分析工作的順利進行，同時在網絡安全性能提升方面發揮著至關重要的作用。數據的分析數據信息的分析是指對于收集存儲信息的梳理和預判，數據的整理和預判大致可以劃分為 兩類，一種是對于實時數據的整理和預判，另一種則是對于歷史資料的整理和預判。結合考慮 到網絡安全問題，對于網絡中實時信息和數據的分析我們可以采取流式進行計算，然后利用關 鍵分析算法、CEP技術等手段來輔助進行分析，最終分辨出當下傳播的信息是否屬于或可能成 為網絡安全問題。對于歷史數據的分析，主要使用分布式存儲和計算方法。為了深入分析網絡 中的歷史數據，我們還可以考慮在處理時使用分布式存儲和計算方

11、法。這種信息處理方法是為 了更好地深入收集數據，規避風險，從而有效判斷當前或未來需要收集的信息，實現網絡安全 控制。構建基于大數據分析技術的網絡安全平臺在了解各種網絡安全設備、構建一套網絡安全防護體系的基礎上，我們還需要構建基于大數據分析技術的網絡安全平臺。網絡安全平臺的建設分為數據采集層和數據處理層。數據信息采集層分為數據信息分析采集層和大數據技術信息存儲層，數據處理層分為數據挖掘層、分析 層和顯示層。在這些層面內能夠對所得到用戶各式各樣的數據信息展開逐一分類，以方便對這 海量數據的量化存儲。至于展示層就是通過大數據分析技術對數據進行特定的檢索，并將其可 視化，最后將安全規范數據多維度的空間

12、模型來呈現網絡的安全性。基于大數據分析技術網絡 安全平臺的構建在運行期間通常會采用Hive的方式來統計和分析所得到的海量數據，通過分 析、檢索得到的數據可存儲在HDFS內。對于數據挖掘層而言，可采取基于Hadoop技術的機 械化數據挖掘技術（對于海量的靜態數據而言，Hadoop技術對數據的處理速度要遠遠大于 Spack技術），對于海量數據進行深度挖掘與整理，并且能夠按照數據分析所引用的事件流來 進行特殊化分析工作。在最后可以采用CPE技術來對平臺內的不同類型、不同時間的數據加 以分析，并且能夠較好幫助建設關系庫，從而更好實現平臺對數據處理的整體性，以保障網絡 環境的安全與防范。我們國家的經濟社

13、會正在蓬勃發展，科技也正在飛躍。而這種網絡安全的問題其實也就是 一種網絡信息安全的問題。任何一項個人信息在互聯網上的披露對我們個人、社會都有很大的 威脅。傳統網絡安全分析方法采用的技術已經不適合當今時代的技術水平。大數據技術的深入 應用已經是中國移動互聯網迅猛發展的一個重要象征。大數據技術目前應用廣泛，效果明顯， 能有效提高工作效率，節約成本。將先進的大數據技術應用于網絡安全分析，可以有效提高網 絡安全性，為用戶提供良好的生活和工作環境。參考文獻：王昱輝，溫志鵬淺談網絡安全分析中的大數據技術運用J.大科技，2018, 000 （024）：316-317.丁晨大數據和人工智能技術在銀行網絡安全風險管理中的實踐一一日志安全審計分析 業務J中國信息化，2019 （5）：023.趙川，孫華利，王國平基于大數據的電力信息系統網絡安全分析J.電子設計工程， 2019， 27 （23）： 148-152.4董超，劉雷大數據背景下安全分析的網絡安全技術發展趨勢研究