網絡空間安全概論 實驗7網絡爬蟲 新冠疫情爬蟲及詞云與可視化地圖_第1頁
網絡空間安全概論 實驗7網絡爬蟲 新冠疫情爬蟲及詞云與可視化地圖_第2頁
網絡空間安全概論 實驗7網絡爬蟲 新冠疫情爬蟲及詞云與可視化地圖_第3頁
網絡空間安全概論 實驗7網絡爬蟲 新冠疫情爬蟲及詞云與可視化地圖_第4頁
網絡空間安全概論 實驗7網絡爬蟲 新冠疫情爬蟲及詞云與可視化地圖_第5頁
已閱讀5頁,還剩16頁未讀 繼續免費閱讀

下載本文檔

版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領

文檔簡介

中國礦業大學計算機學院2019級本科生課程報告課程名稱信息內容安全報告題目新冠疫情爬蟲及詞云與可視化地圖報告時間2022.6.30姓名丁文翔學號08193072任課教師曹天杰2021-2022(二)《信息內容安全》評分表考核類別考核內容支撐課程目標試題類型與分值比例分數結課考核課程報告(論文綜述、設計、實現、寫作規范)目標3:掌握信息內容安全的基礎知識,針對具體問題和要求選擇正確的技術路線,通過在實驗環境中進行仿真實驗并能根據算法特點進行攻擊測試和綜合性能評價,得到具有參考價值的結論。課程報告,100%過程考核1.基本概念、原理目標1:掌握信息內容安全的基本概念、分類、原理和相關技術,能夠根據課程基本知識對信息內容安全領域出現的問題進行歸類、分析、并有初步分析和解決問題的能力。系統演示及解說,30%2.系統設計與分析目標2:掌握信息內容安全處理相關的理論、技術以及健全的評價體系,能夠根據具體問題分析算法、設計算法、實現算法并能綜合評價算法。PPT講解與答辯,50%3.基本概念、原理目標1作業或測試,20%結課考核與過程考核比例結課考核:60%過程考核:40%評閱人:2022年7月10日報告摘要始于2019年的全球新冠疫情,是人類百年工業文明快速發展、全球化進程加快進程中突然遭遇的重大傳染性疫病,近3年來,已經改變、還在繼續改變幾十億人類的生命、生活、生態和生產方式。為了更直觀的查看以及分析各地疫情,本項目將利用爬蟲技術,爬取中國各地以及世界各個國家的新冠疫情數據,生成詞云,疫情地圖等可視化圖片或網頁,供用戶觀看。關鍵詞:爬蟲;新冠疫情;疫情地圖 AbstractTheCOVID-19pandemic,whichstartedin2019,isamajorinfectiousdiseasesuddenlyencounteredinthecourseofrapiddevelopmentofindustrialcivilizationandacceleratedglobalization.Inthepastthreeyears,ithaschangedandcontinuestochangethewaybillionsofpeoplelive,live,andwork.Inordertoviewandanalyzetheepidemicsituationindifferentplacesmoredirectly,theprojectwillusecrawlertechnologytocrawltheCOVID-19epidemicdataofdifferentplacesinChinaandothercountriesaroundtheworld,andgeneratewordcloud,epidemicmapandothervisualpicturesorwebpagesforuserstowatch.Keyword:crawler;COVID-19;Theoutbreakmap

報告正文1、項目背景正在發生的全球新冠疫情,所造成的風險在公共化、全球化,給這個世界帶來巨大的不確定性,預示著人類文明發展存在總體性危機。全球新冠肺炎疫情的爆發,使當今世界局勢發生劇烈復雜變化,一場可能會影響全球格局的巨大變革正在發生。各國采取不同的措施應對全球新冠肺炎疫情,美、歐、中等各經濟圈分裂的趨勢在加強。以美國為代表的西方國家,從對外擴張轉變為向內收縮或退守,體現在本土主義的興起、貿易保護主義的反彈以及其他一些“逆全球化”的跡象。面對突如其來的全球性新冠肺炎疫情,西方社會的內部矛盾,包括經濟與文化方面的問題,開始全面爆發,民眾的挫折與失望感越來越廣泛。所謂“發達社會”,也呈現出一副失序狀態:經濟失調、政治失序、安全失控、制度失靈。移民和難民大量涌入,對各國的本地傳統價值、生活方式以及民族認同都會造成沖擊。經濟利益的沖突與文化訴求的矛盾相互交織、彼此糾葛,造成了西方社會嚴重的政治極化現象。對中國這些發展中國家來說,外部環境變化的不確定性也非常明顯。西方打破了現有國際體系的穩定性,并導致國際體系出現快速、急劇的變化,這就給中國的外部環境帶來巨大挑戰。如何處理與西方國家之間的問題、與國際秩序之間的問題,亦成為中國需要面對的挑戰。同時,新技術革命,尤其是人工智能、生物技術的迅即發展,對現有的生產、勞動和消費結構沖擊,以及對文化變遷的深遠影響,都可能超越既有“現代秩序”的有效框架,蘊含著巨大的未知風險。有專家指出,新冠肺炎疫情帶來的這場全球性危機,不僅表現為生態和環境危機、資源和氣候危機,而且還表現為深重的經濟、金融危機和社會危機。上世紀“二戰”之后確定的國際政治經濟秩序在某種程度上處于內外交困的局面。世界正在滑向各種影響深遠的沖突和戰爭:軍事沖突、貿易戰爭、政治和外交戰、金融戰爭等等,世界很可能進入了一個“巨變”的時期。2、項目介紹該項目使用了爬蟲技術,通過url獲取網頁html代碼,保存為json文件,在json文件中提取我們需要的數據,獲取到數據之后,使用python庫中的worldcloud制作詞云圖,pyecharts制作疫情地圖3、項目實現3.1、使用爬蟲獲取數據我們首先將使用requests方法獲得整個網頁的html代碼,并保存為txt文件,便于分析,這里我們需要注意偽造一下請求頭獲得html文件后,我們需要找到,我們需要的數據,下面藍色的部分包含著我們需要的數據,它是以字典和列表的來回穿插的形式保存的,我們通過取下標0和對應的鍵就可以獲得全部的疫情信息然后我們使用xpath方法來解析數據獲得數據后,為了更加直觀的觀察數據和制作詞云,我們將它們保存到data.xlsx的excel文件中,下圖可以看到我們成功保存國內各個省份的相關信息和以大州為分類的各個國家信息中國各個省份數據亞洲國家數據實現代碼如下我們也將解析的數據保存到json文件中,方便以后做整個中國及每個省份地圖和世界地圖做準備json文件如下:3.2、制作詞云這里我們使用wordcloud庫來實現,將excel中數據中的省份或國家作為鍵,累計確診人數作為鍵值放到字典中,再根據該字典,使用wordcloud.generate_from_frequencies()方法生成云,保存為圖片即可3.3、制作疫情地圖制作地圖我們使用pyecharts官網,map上面使用的代碼,再將我們需要的參數添加進去就可以,網址如下:/#/zh-cn/geography_charts?id=map%ef%bc%9a%e5%9c%b0%e5%9b%be中國地圖Demo:廣東地圖Demo:中國地圖實現如下:將省份和累計人數作為元組,反應到地圖上,其余地圖同理中國各省份地圖實現:世界地圖實現如下:世界地圖添加了三種,分別為累計確診人數,累計治愈人數和當前確診人數:最后為各個地圖添加獲取時間,獲取時間使用正則表達式在html頁面獲取4、項目成果4.1詞云展示中國詞云:世界詞云:4.

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間,僅對用戶上傳內容的表現方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容,請與我們聯系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論