1、廈門大學計算機科學系 2020版林子雨 博士/副教授廈門大學計算機科學系E-mail: ziyulin主頁： /post/linziyu 大數據導論課程介紹（PPT版本號：2020年秋季學期） 大數據導論教材官網： /post/bigdata-introduction/溫馨提示：編輯幻燈片母版，可以修改每頁PPT的廈大?；蘸偷撞课淖謷咭粧咴L問教材官網提綱1.課程體系2.課程定位3.開課對象4.課程內容5.內容提要6.教學大綱7.課程教材百度搜索廈門大學數據庫實驗室網站訪問平臺主講教師主講教師：林子雨中國高校首個“數字教師”提出者和建設者2009年7月從事教師職業以來累計免費網絡發布超過1000

2、萬字高價值教學和科研資料網絡瀏覽量超過1000萬次數字教師LOGO2018年國家精品在線開放課程2018年福建省教學成果二等獎廈門大學建設的大數據課程體系大數據技術原理與應用Spark編程基礎大數據實習實訓案例入門進階實訓理工科課程（專業課）文科課程(全校公共課)大數據導論（通識課版）廈門大學建設的大數據課程體系（每門課程均有配套教材和教學資源）了解全部教材信息請訪問：/post/bigdatabook/大數據導論導論課程定位大數據專業的導論課面向大數據專業人才的培養一門為學生“統攬全局、指明方向”的重要課程，通過這門課程的學習，學生可以對自己所學習的專業建立一個全局的認知，包括專業培養目標、

3、畢業生就業崗位、專業知識體系、專業課程體系、大數據知識體系等全面培養學生的數據素養：數據意識、數據思維、數據能力和數據倫理開課對象授課對象是大數據專業的學生（主要包括本科院校設立的“數據科學與大數據技術專業”和高職院校設立的“大數據技術與應用”專業）也可以面向計算機和軟件工程專業的學生課程內容提要第1章介紹數據的概念、大數據時代到來的背景、大數據的發展歷程、世界各國的大數據發展戰略、大數據的概念與影響、大數據的應用、大數據產業以及高校大數據專業；第2章介紹云計算、物聯網、人工智能、區塊鏈的概念和應用，并闡述大數據與云計算、物聯網、人工智能、區塊鏈之間的緊密關系；第3章介紹與培養大數據人才的數據

4、素養息息相關的一系列大數據基礎知識，包括大數據安全、大數據思維、大數據倫理、數據共享、數據開放、大數據交易和大數據治理；第4章介紹大數據在各大領域的典型應用，包括互聯網、生物醫學、物流、城市管理、金融、汽車、零售、餐飲、電信、能源、體育、娛樂、安全、政府和日常生活等領域；課程內容提要第5章介紹數據采集的概念、要點、數據源、數據采集方法、網絡爬蟲以及數據清洗、數據轉換與數據脫敏；第6章介紹傳統的數據存儲與管理技術（包括文件系統、關系數據庫、數據倉庫、并行數據庫等）以及大數據時代的數據存儲與管理技術（包括分布式文件系統、NoSQL數據庫、云數據庫等）；第7章介紹數據處理與分析的概念、機器學習和數據

5、挖掘算法、大數據處理與分析技術、大數據處理與分析領域具有代表性的產品；第8章介紹數據可視化的概念、可視化工具和典型的可視化案例；第9章介紹一個大數據分析綜合案例, 幫助讀者對大數據分析形成一個全局性的輪廓認識，從而可以了解大數據理論和技術的綜合運用方法。教學大綱第1章 大數據概述2第2章 大數據與其他新興技術的關系4第3章 大數據基礎知識6第4章 大數據應用4第5章 數據采集與預處理2第6章 大數據存儲與管理4第7章 大數據處理與分析6第8章 數據可視化2第9章 大數據分析綜合案例2共計32學時課程教材林子雨 編著大數據導論人民郵電出版社，2020年8月第1版ISBN:978-7-115-54

6、446-9 定價：49.80元教材官網：/post/bigdata-introduction/掃一掃訪問教材官網附錄A：主講教師林子雨簡介單位：廈門大學計算機科學系E-mail: ziyulin個人網頁：/post/linziyu數據庫實驗室網站：主講教師：林子雨林子雨，男，1978年出生，博士（畢業于北京大學），全國高校知名大數據教師，現為廈門大學計算機科學系副教授，曾任廈門大學信息科學與技術學院院長助理、晉江市發展和改革局副局長。中國計算機學會數據庫專業委員會委員，中國計算機學會信息系統專業委員會委員。國內高校首個“數字教師”提出者和建設者，廈門大學數據庫實驗室負責人，廈門大學云計算與大數

7、據研究中心主要建設者和骨干成員，2013年度、2017年度和2020年度廈門大學教學類獎教金獲得者，榮獲2019年福建省精品在線開放課程、2018年廈門大學高等教育成果特等獎、2018年福建省高等教育教學成果二等獎、2018年國家精品在線開放課程。主要研究方向為數據庫、數據倉庫、數據挖掘、大數據、云計算和物聯網，并以第一作者身份在軟件學報計算機學報和計算機研究與發展等國家重點期刊以及國際學術會議上發表多篇學術論文。作為項目負責人主持的科研項目包括1項國家自然科學青年基金項目(No.61303004)、1項福建省自然科學青年基金項目(No.2013J05099)和1項中央高?；究蒲袠I務費項目(

8、No.2011121049)，主持的教改課題包括1項2016年福建省教改課題和1項2016年教育部產學協作育人項目，同時，作為課題負責人完成了國家發改委城市信息化重大課題、國家物聯網重大應用示范工程區域試點泉州市工作方案、2015泉州市互聯網經濟調研等課題。中國高校首個“數字教師”提出者和建設者，2009年至今，“數字教師”大平臺累計向網絡免費發布超過1000萬字高價值的研究和教學資料，累計網絡訪問量超過1000萬次。打造了中國高校大數據教學知名品牌，編著出版了中國高校第一本系統介紹大數據知識的專業教材大數據技術原理與應用，并成為京東、當當網等網店暢銷書籍；建設了國內高校首個大數據課程公共服務

9、平臺，為教師教學和學生學習大數據課程提供全方位、一站式服務，年訪問量超過200萬次，累計訪問量超過1000萬次。掃一掃訪問個人主頁附錄B：大數據學習路線圖大數據學習路線圖訪問地址：/post/10164/附錄C：林子雨大數據系列教材了解全部教材信息：/post/bigdatabook/附錄D：大數據導論（通識課版）教材本課程旨在實現以下幾個培養目標：引導學生步入大數據時代，積極投身大數據的變革浪潮之中了解大數據概念，培養大數據思維，養成數據安全意識認識大數據倫理，努力使自己的行為符合大數據倫理規范要求熟悉大數據應用，探尋大數據與自己專業的應用結合點激發學生基于大數據的創新創業熱情教材官網：/p

10、ost/bigdataintroduction/開設全校公共選修課的優質教材高等教育出版社 ISBN:978-7-04-053577-8 定價：32元附錄E：大數據技術原理與應用教材歡迎訪問大數據技術原理與應用概念、存儲、處理、分析與應用教材官方網站：/post/bigdata掃一掃訪問教材官網大數據技術原理與應用概念、存儲、處理、分析與應用（第2版），由廈門大學計算機科學系林子雨博士編著，是國內高校第一本系統介紹大數據知識的專業教材。人民郵電出版社 ISBN:978-7-115-44330-4 定價：49.80元全書共有15章，系統地論述了大數據的基本概念、大數據處理架構Hadoop、分布式

11、文件系統HDFS、分布式數據 庫HBase、NoSQL數據庫、云數據庫、分布式并行編程模型MapReduce、Spark、流計算、圖計算、數據可視化以及大數據在互聯網、生物醫學和物流等各個領域的應用。在Hadoop、HDFS、HBase和MapReduce等重要章節，安排了入門級的實踐操作，讓讀者更好地學習和掌握大數據關鍵技術。本書可以作為高等院校計算機專業、信息管理等相關專業的大數據課程教材，也可供相關技術人員參考、學習、培訓之用。附錄F：大數據基礎編程、實驗和案例教程本書是與大數據技術原理與應用（第2版）教材配套的唯一指定實驗指導書步步引導，循序漸進，詳盡的安裝指南為順利搭建大數據實驗環境

12、鋪平道路深入淺出，去粗取精，豐富的代碼實例幫助快速掌握大數據基礎編程方法精心設計，巧妙融合，五套大數據實驗題目促進理論與編程知識的消化和吸收結合理論，聯系實際，大數據課程綜合實驗案例精彩呈現大數據分析全流程林子雨編著大數據基礎編程、實驗和案例教程清華大學出版社 ISBN:978-7-302-47209-4 定價：59元附錄G：Spark編程基礎（Scala版）Spark編程基礎（Scala版）廈門大學 林子雨，賴永炫，陶繼平 編著披荊斬棘，在大數據叢林中開辟學習捷徑填溝削坎，為快速學習Spark技術鋪平道路深入淺出，有效降低Spark技術學習門檻資源全面，構建全方位一站式在線服務體系本書以Sc

13、ala作為開發Spark應用程序的編程語言，系統介紹了Spark編程的基礎知識。全書共8章，內容包括大數據技術概述、Scala語言基礎、Spark的設計與運行原理、Spark環境搭建和使用方法、RDD編程、Spark SQL、Spark Streaming、Spark MLlib等。本書每個章節都安排了入門級的編程實踐操作，以便讀者更好地學習和掌握Spark編程方法。本書官網免費提供了全套的在線教學資源，包括講義PPT、習題、源代碼、軟件、數據集、授課視頻、上機實驗指南等。人民郵電出版社出版發行，ISBN:978-7-115-48816-9教材官網：/post/spark/附錄H：Spark編

14、程基礎（Python版）Spark編程基礎（Python版）廈門大學 林子雨，鄭海山，賴永炫 編著披荊斬棘，在大數據叢林中開辟學習捷徑填溝削坎，為快速學習Spark技術鋪平道路深入淺出，有效降低Spark技術學習門檻資源全面，構建全方位一站式在線服務體系本書以Python作為開發Spark應用程序的編程語言，系統介紹了Spark編程的基礎知識。全書共8章，內容包括大數據技術概述、Spark的設計與運行原理、Spark環境搭建和使用方法、RDD編程、Spark SQL、Spark Streaming、Structured Streaming、Spark MLlib等。本書每個章節都安排了入門級的編程實踐操作，以便讀者更好地學習和掌握Spark編程方法。本書官網免費提供了全套的在線教學資源，包括講義PPT、習題、源代碼、軟件、數據集、上機實驗指南等。人民郵電出版社出版發行，ISBN:978-7-115-52439-3教材官網： /post/spark-python/附錄I：高校大數據課程公共服務平臺掃一掃訪問平臺主頁/post/bigdata-teaching-platform/掃一掃觀看3分鐘FLASH動畫宣傳片附錄J：高校大數據實訓課程系列案例教材掃一掃訪問大數據實訓課程系列案例教材主頁為了更好滿足高校開設大數據實訓課程的教材需求，廈門大學數據庫實驗室