1、大大數據數據演講者：李艷艷組員：白文婷、霍昱瑾、侯麗娜2 一一. .認識大數據時代認識大數據時代 二二. .大數據的應用領域大數據的應用領域 三. .大數據時代的機遇與挑戰大數據時代的機遇與挑戰 4一. .認識大數據時代p 大數據很抽象，表示數據規模的龐大。p 大數據泛指巨量的數據集，因可從中挖掘出有價值的信息而受到重視。華爾街日報將大數據時代、智能化生產、無線網絡革命大數據時代、智能化生產、無線網絡革命稱為引領未來繁榮發展的重大技術變革。目前對大數據尚未有一個公認的定義，不同的定義基本上是從特征出發，試圖給出大數據的定義。5一. .認識大數據時代 紐約時報2012年2月的一篇專欄中所稱 ，“

2、大數據”時代已經降臨，在商業、經濟及其他領域中，決策將日益基于數據和分析決策將日益基于數據和分析而作出，而并非基于經驗和直覺。而作出，而并非基于經驗和直覺。 亞馬遜前任首席科學家Andreas Weigend說：“數據是新的石油數據是新的石油。” 哈佛大學社會學教授加里金說：“這是一場革命，龐大的數據資源使得各個領域開始了量化進程量化進程，無論學術界、商界還是政府，所有領域都將開始這種進程。” 一. .認識大數據時代6 隨著一系列標志性事件的發生和建立，人們越發感覺到大數據時代的力量。因此2013年被許多國外媒體和專家稱為“大數據元年大數據元年”。當今“大社會”，三分技術，七分數據，得數據者得

3、天下。7 一. .認識大數據時代硬件成本的降低網絡帶寬的提升云計算的興起網絡技術的發展智能終端的普及電子商務、社交網絡、 電子地圖等的全面應用物聯網大數據時代到來的必然性：大數據時代到來的必然性：8一. .認識大數據時代維基百科給出的定義： 大數據是指利用常用軟件工大數據是指利用常用軟件工具捕獲、管理和處理數據所耗時具捕獲、管理和處理數據所耗時間超過可容忍時間的數據集。間超過可容忍時間的數據集。“3V”定義規模性（Volume）多樣性（Variety）高速性（Velocity）“4V”定義價值性（Value）真實性（Veracity）（IDC）（IBM）9一. .認識大數據時代全球流量累計達到

4、1EB（即10億GB）的時間一年（2001）一個月（2004）一周（2007）一天（2013）一天產生的信息量可刻滿1.881.88億億張DVD光盤全球網民平均每月使用流量：1M（1998）10M（2000）100M（2003）1G（2008）10G10G（20142014）大數據有多“大”？10一. .認識大數據時代我國網民數量居世界之首，每天產生的數據量也位于世界前列。淘寶網站u單日數據產生量超過5 5萬萬GBGBu存儲量40004000萬萬GBGB百度公司u目前數據總量1010億億GBGBu存儲網頁1 1萬億頁萬億頁u每天大約要處理6060億次億次搜索請求一個8Mbps的攝像頭u一小時能

5、產生3.6GB3.6GB的數據u一個城市每月產生的數據達上千萬上千萬GBGB醫院u一個病人的CT影像數據量達幾十幾十GBGBu全國每年需保存的數據達上百億百億GBGB11二.大數據的應用領域天文學天文學生物醫學生物醫學電子政務電子政務氣候學氣候學企業管理企業管理教育學教育學金融學金融學市場營銷市場營銷公共服務公共服務商業智能商業智能傳媒業傳媒業生活娛樂生活娛樂天文學天文學生物醫學生物醫學電子政務電子政務氣候學氣候學企業管理企業管理教育學教育學金融學金融學市場營銷市場營銷公共服務公共服務商業智能商業智能傳媒業傳媒業生活娛樂生活娛樂總統選舉總統選舉總統選舉總統選舉情報學情報學情報學情報學圖書館學圖

6、書館學圖書館學圖書館學12二. .大數據的應用領域政治領域 大數據的發展，將極大地改變政府的管理模式，有利于節約政府投資、加強市場監管能力、提高政府決策能力、提升公共服務能力，實現區域化管理。重“一站式”服務輕“激勵型”服務我國電子政務的發展現狀我國電子政務的發展現狀:重性質性政務信息輕量化性政務數據政府門戶網站信息以文本、圖片、視頻等非結構化信息為主，但沒有關于財政稅收、醫療保險等可量化分析的結構化數據。“一站式”服務包括申請、辦證、審批等，忽略了開放原生態數據激發社會主體的創造性、主動性。大數據在我國電子政務領域的應用大數據在我國電子政務領域的應用 13二. .大數據的應用領域政治領域 目

7、前，我國有60多個城市，將構建“智慧城市”的目標列入“十二五規劃”中。智慧城市即利用大數據的整合和分析來治理社會。2013年兩會期間，有代表提議將發展大數據上升為國家戰略發展大數據上升為國家戰略。大數據背景下，我國電子政務創新模式的轉變：大數據背景下，我國電子政務創新模式的轉變： 關注焦點從信息向數據轉變1增值基礎從公開向發布、開放轉變2行為方式從獨立向協同轉變314二. .大數據的應用領域政治領域數據是數據是生成信生成信息和知息和知識的原識的原生素材生素材 如將我國城鎮居民醫療數據與保險數據對比分析可以優化保險企業報銷比例，發現虛假報銷行為；與制藥廠數據比對分析可以調節藥品的生產量與銷售渠道

8、。但醫療政策信息并不能發揮這樣的作用。數據是數據是輿情監輿情監督的有督的有利依據利依據 2008年，政府公布4萬億元的經濟刺激計劃，但社會對資金的具體去向及其準確數額卻無從得知；汶川地震災后重建近2億資金的用途也因沒有準確的數據公開而被暗箱操作，違規使用當今電子政務中，信息公開實質是性質性信息的公開，而數據才是輿情監督的真正證據。關注焦點關注焦點從信息向數據轉變從信息向數據轉變 15二. .大數據的應用領域政治領域增值基礎從公開向發布、開放轉變 大數據時代，數據增值的關鍵在于數據的整合與分析，整合的前提就是數據的開放。數據公開是意識上的、被動的；數據發布是行動上的、主動的。數據公開、發布是一條

9、一條的；數據開放是一片一片的。政府態度從被動轉為主動；政府態度從被動轉為主動；數據從點對點轉為面對面。數據從點對點轉為面對面。二. .大數據的應用領域政治領域16行為方式行為方式從獨立向協同轉變從獨立向協同轉變 如濟南電子政務數據交換平臺實現了工商、國稅、質檢、公安、社保等20多個部門涉稅數據的共享，國稅局與地稅局通過數據比對，發現了25000條數據差異，落實納稅企業5000多戶，補繳稅款2700多萬元。內部協同內部協同：各地區政府、各層級政府和各部門之間外部協同外部協同：政府與社會之間自上而下、自下而上的互動17二. .大數據的應用領域金融領域 華爾街“德溫特資本市場”公司首席執行官保羅霍廷

10、每天的工作之一，就是利用電腦程序分析全球3.43.4億微博賬戶的億微博賬戶的留言留言，進而判斷民眾情緒，再以“1”到“50” 進行打分。根據打分結果，霍廷再決定如何處理手中數以百萬美元計的股票。霍廷的判斷原則很簡單：如果所有人似乎都高興，那就買入；如果大家的焦慮情緒上升，那就拋售。 這一招收效顯著當年第一季度，霍廷的公司獲得了7%7%的收益率的收益率。 18二. .大數據的應用領域金融領域大數據助力推進高頻金融交易和小額信貸大數據助力推進高頻金融交易和小額信貸高頻交易高頻交易：實時性要求高、數據規模大。目前滬深兩市每天4個小時交易時間會產生3億條以上逐筆成交數據，通過對歷史和實時數據的挖掘創新

11、，以創造和改進數量化交易模型，并將之應用于基于計算機模型的實時證券交易過程中。小額信貸小額信貸：阿里巴巴和建行在2007年推出一個專注于小企業的貸款計劃e貸通貸通，阿里巴巴利用擁有的用戶信息及交易數據，通過大數據技術自動判定是否給予企業貸款；而建行坐擁巨額資金，希望貸款給無信用記錄但發展勢頭良好的小企業。到2012年底，阿里在累計服務小微企業超過20萬家，放貸300多億元，壞賬率僅為0.3%左右，低于商業銀行水平。19二. .大數據的應用領域金融領域大數據協助金融企業精準營銷大數據協助金融企業精準營銷 招商銀行通過數據分析識別出招行信用卡高價值客戶經常出現在星巴克、DQ、麥當勞等場所后，通過“

12、多倍積分累計多倍積分累計”“”“積分店面兌換積分店面兌換”等活動吸引優質客戶；通過構建客戶流失預警模型，對流失率等級前20%的客戶發售高收益理財產品予以挽留，使得金卡和金葵花卡客戶流失率分別降低了15個和7個百分點；通過對客戶交易記錄進行分析，有效識別出潛在的小微企業客戶，并利用遠程銀行和云轉介平臺實施交叉銷售，取得了良好成效。20二. .大數據的應用領域金融領域 雖然目前大數據的研究與應用在金融業還處于初級階段，但是價值已經顯現出來。未來，大數據可能成為最大的金融交易產品。未來金融大數據將會如基礎設施基礎設施一樣，有金融數據提供方、金融監管者，金融大數據的交叉復用等，最終將成為金融業進行重要

13、活動的基礎設施。21215學習成績1入學率2輟學率3識字的準確率5升學率4作業的正確率6考試時答題的順序11師生互動的時長與頻率回答問題的時長、正確率課堂舉手次數回答問題的次數平均每道題花費的時間1278910學校教育中的學校教育中的“大數據大數據”二.大數據的應用領域教育領域現在，大數據分析已經被應用到美國的公共教育中，成為教學改革的重要力量。22二. .大數據的應用領域生活娛樂方面 40天，天，36億人次。億人次。這是2014年春運的總時間和總出行人數。在這場堪稱人類歷史上最大規模的短期遷徙中，人群從哪兒去了哪兒？哪些線路最熱門？人群從哪兒去了哪兒？哪些線路最熱門？在以往，這些問題可能難以

14、精確回答。但隨著技術進步，通過應用“大數據”這一技術利器，人們已經接近“在迷宮中感受全局”地看見春運的全景。大數據首次播報春運遷徙實況大數據首次播報春運遷徙實況23二. .大數據的應用領域生活娛樂方面 國內有2億手機用戶使用百度地圖，用戶每次位置變化，百度都能得到數據。把手機網民的定位信息匯總成大數據進行分析，就能勾勒出人們的遷徙軌跡。 此次百度圖景化地展示春運情況，是基于LBS(基于地理位置的服務)技術的一次創新。它的數據每8小時更新一次，囊括了全國鐵路、公路和航空在內的線路。 新聞視頻：新聞視頻：2014年年1月月25日，日，“據據”說春運說春運24三. .大數據時代的機遇和挑戰 今天，大

15、數據似乎成了“靈丹妙藥”，“包治百病”，無所不能。但千萬別把“大數據”用做解決世界上所有問題的全能辦法，無論是管理城市到消除貧困，制止恐怖襲擊、疾病流行到拯救地球環境等，以為有了“大數據”，就沒有解決不了的問題，這也是一種誤解。人類的思想、個人的文化和行為模式、不同國家及社會的存在發展都非常復雜、曲折和獨特，顯然不能全部由計算機來“數字自己說話”。無論到何時，其實都還是人在思考和無論到何時，其實都還是人在思考和“說話說話”。25三. .大數據時代的機遇和挑戰大數據技術促進國家和社會發展大數據技術促進國家和社會發展大數據藍海成為企業競爭的新焦點大數據藍海成為企業競爭的新焦點大數據時代呼喚創新型人

16、才大數據時代呼喚創新型人才大數據技術的運用仍有困難大數據技術的運用仍有困難大數據給信息安全帶來新挑戰大數據給信息安全帶來新挑戰26三. .大數據時代的機遇和挑戰機遇機遇大數據技術促進國家和社會發展大數據技術促進國家和社會發展 大數據技術的運用前景是十分光明的。當前，我國正處在全面建成小康社會征程中，工業化、信息化、城鎮化、農業現代化任務很重，建設下一代信息基礎設施，發展現代信息技術產業體系，健全信息安全保障體系，推進信息網絡技術廣泛運用，是實現四化同步發展的保證。大數據分析對我們深刻領會世情和國情，把握規律，實現科學發展，做出科學決策具有重要意義，我們必須重新認識數據的重要價值。27三. .大

17、數據時代的機遇和挑戰 大數據所能帶來的巨大商業價值，被認為將引領一場足以與20世紀計算機革命匹敵的巨大變革。大數據正在對每個領域都造成影響，包括商業、經濟等領域。大數據正在促生新的藍海，催生新的經濟增長點，正在成為企業競爭的新焦點。 在今天的大數據時代，商業的生態環境在不經意間發生了巨大的變化：網民和消費者的界限正在變得模糊，無處不在的智能終端，隨時在線的網絡傳輸，互動頻繁的社交網絡讓以往只是網頁瀏覽者的網民的面孔從模糊變得清晰，對于企業來說，他們第一次有機會進行大規模的精準化的消費者行為研究：作為保持著持續變革欲望的企業，主動地主動地擁抱這種變化，從戰略到戰術層而開始自我的蛻變擁抱這種變化，

18、從戰略到戰術層而開始自我的蛻變和進化將會讓他們更加適應這個新的時代，大數據和進化將會讓他們更加適應這個新的時代，大數據藍海成為未來競爭的制高點。藍海成為未來競爭的制高點。機遇機遇大數據藍海成為企業競爭的新焦點大數據藍海成為企業競爭的新焦點28三. .大數據時代的機遇和挑戰機遇機遇大數據時代呼喚創新型人才大數據時代呼喚創新型人才 蓋特納咨詢公司預測大數據將為全球帶440萬個IT新崗位和上千萬個非IT崗位。麥肯錫公司預測美國到2018年需要深度數據分析人才44萬49萬，缺口14萬19萬人；需要既熟悉本單位需求又了解大數據技術與應用的管理者150萬，這方面的人才缺口更大。中國 是人才大國，但能理解與

19、應用大數據的創新人才更是稀缺資源。29三. .大數據時代的機遇和挑戰數據收集數據收集 要對來自網絡包括物聯網和機構信息系統的數據附上時空標志，去偽存真去偽存真，盡可能收集異源甚至是異構的數據，還可與歷史數據對照，多角度多角度驗證數據的全面性和可信性。數據存儲數據存儲 要達到低成本、低成本、低能耗、高可靠低能耗、高可靠性目標性目標，要用到冗余配置、分布化和云計算技術，存儲時對數據進行分類，通過過濾和去重，減少存儲量，并加入便于檢索的標簽。數據處理數據處理 大數據的復雜性使得難以用傳統的方法描述與度量，需要將高維圖像等多媒體數據降維后度量與處理，利用上下上下文關聯文關聯進行語義分析，從大量動態及可能模棱兩可的數據中綜合信息，并導出可導出可理解的內容理解的內容。結果的可視化呈現結果的可視化呈現 使結果更直觀以使結果更直觀以便于洞察便于洞察。目前，盡管計算機智能化有了很大進步，但還只能針對小規模、有結構或類結構的數據進行分析，談不上深層次的數據挖掘，現有的數據挖掘算法在不同行業中難以通用。挑戰挑戰大數據技術的運用仍有困難大數據技術的運用仍有困難 目前，大數據技術的運用仍