1、數(shù)據(jù)分析(方法與案例)作者 賈俊平 版權(quán)所有 違者必究統(tǒng)計(jì)學(xué)基礎(chǔ)(第三版) Fundamental Statistics第 1 章 統(tǒng)計(jì)學(xué)和統(tǒng)計(jì)數(shù)據(jù)1.1 統(tǒng)計(jì)學(xué)及其應(yīng)用領(lǐng)域1.2 數(shù)據(jù)的類型1.3 數(shù)據(jù)的來(lái)源1.4 統(tǒng)計(jì)中的幾個(gè)基本概念1.5 Excel【數(shù)據(jù)分析】工具的安裝2016-12-25學(xué)習(xí)目標(biāo)統(tǒng)計(jì)學(xué)的含義統(tǒng)計(jì)的應(yīng)用領(lǐng)域統(tǒng)計(jì)數(shù)據(jù)的類型統(tǒng)計(jì)數(shù)據(jù)的來(lái)源統(tǒng)計(jì)中的幾個(gè)基本概念1.1 統(tǒng)計(jì)學(xué)及其應(yīng)用領(lǐng)域 1.1.1 什么是統(tǒng)計(jì)學(xué) 1.1.2 統(tǒng)計(jì)學(xué)的應(yīng)用領(lǐng)域第 1 章 統(tǒng)計(jì)學(xué)和統(tǒng)計(jì)數(shù)據(jù)1.1.1 什么是統(tǒng)計(jì)學(xué)1.1 統(tǒng)計(jì)學(xué)及其應(yīng)用領(lǐng)域2016-12-25什么是統(tǒng)計(jì)學(xué)? (statistics)

2、1. 收集數(shù)據(jù)：取得數(shù)據(jù)2. 處理數(shù)據(jù)：圖表展示 分析數(shù)據(jù)：利用統(tǒng)計(jì)方法分析數(shù)據(jù)數(shù)據(jù)解釋：結(jié)果的說(shuō)明得到結(jié)論：從數(shù)據(jù)分析中得出客觀結(jié)論收集、處理、分析、解釋數(shù)據(jù)并從數(shù)據(jù)中得出結(jié)論的科學(xué) 2016-12-25統(tǒng)計(jì)方法統(tǒng)計(jì)方法描述統(tǒng)計(jì)推斷統(tǒng)計(jì)參數(shù)估計(jì)假設(shè)檢驗(yàn)2016-12-25描述統(tǒng)計(jì)(descriptive statistics)研究數(shù)據(jù)收集、整理和描述的統(tǒng)計(jì)學(xué)方法 內(nèi)容搜集數(shù)據(jù)整理數(shù)據(jù)展示數(shù)據(jù)描述性分析 目的描述數(shù)據(jù)特征找出數(shù)據(jù)的基本規(guī)律02550Q1Q2Q3Q4￥x = 30 s2 = 1052016-12-25推斷統(tǒng)計(jì) (inferential statistics)研究如何利用樣本數(shù)據(jù)來(lái)

3、推斷總體特征的統(tǒng)計(jì)學(xué)方法內(nèi)容參數(shù)估計(jì)假設(shè)檢驗(yàn)?zāi)康膶?duì)總體特征作出推斷樣本總體1.1.2 統(tǒng)計(jì)學(xué)的應(yīng)用領(lǐng)域1.1 統(tǒng)計(jì)學(xué)及其應(yīng)用領(lǐng)域2016-12-25統(tǒng)計(jì)學(xué)的應(yīng)用領(lǐng)域 企業(yè)發(fā)展戰(zhàn)略 產(chǎn)品質(zhì)量管理 市場(chǎng)研究 財(cái)務(wù)分析 經(jīng)濟(jì)預(yù)測(cè) 人力資源管理2016-12-25統(tǒng)計(jì)的誤用與濫用統(tǒng)計(jì)濫用不好的樣本過(guò)小的樣本誤導(dǎo)性圖表局部描述故意曲解1.2 數(shù)據(jù)的類型 1.2.1 類別數(shù)據(jù)、順序數(shù)據(jù)、數(shù)值數(shù)據(jù) 1.2.2 觀測(cè)的數(shù)據(jù)和實(shí)驗(yàn)數(shù)據(jù) 1.2.3 截面數(shù)據(jù)和時(shí)間序列數(shù)據(jù) 第 1 章 統(tǒng)計(jì)學(xué)和統(tǒng)計(jì)數(shù)據(jù)2016-12-25統(tǒng)計(jì)數(shù)據(jù)的分類2016-12-25統(tǒng)計(jì)數(shù)據(jù)的分類 (按計(jì)量尺度分)類別數(shù)據(jù)(categoric

4、al data) 只能歸于某一類別的非數(shù)字型數(shù)據(jù)對(duì)事物進(jìn)行分類的結(jié)果，數(shù)據(jù)表現(xiàn)為類別，用文字來(lái)表述例如，人口按性別分為男、女兩類；產(chǎn)品分為一等品、二等品、三等品、次品等 分為無(wú)序類別數(shù)據(jù)和有序類別數(shù)據(jù)數(shù)值數(shù)據(jù)(metric data) 按數(shù)字尺度測(cè)量的觀察值結(jié)果表現(xiàn)為具體的數(shù)值，對(duì)事物的精確測(cè)度例如：身高為175cm、168cm、183cm2016-12-25統(tǒng)計(jì)數(shù)據(jù)的分類(按收集方法分)觀測(cè)數(shù)據(jù)(observational data) 通過(guò)調(diào)查或觀測(cè)而收集到的數(shù)據(jù)在沒有對(duì)事物人為控制的條件下而得到的有關(guān)社會(huì)經(jīng)濟(jì)現(xiàn)象的統(tǒng)計(jì)數(shù)據(jù)幾乎都是觀測(cè)數(shù)據(jù)試驗(yàn)數(shù)據(jù)(experimental data) 在試

5、驗(yàn)中控制試驗(yàn)對(duì)象而收集到的數(shù)據(jù)比如，對(duì)一種新藥療效的試驗(yàn)，對(duì)一種新的農(nóng)作物品種的試驗(yàn)等自然科學(xué)領(lǐng)域的數(shù)據(jù)大多數(shù)都為試驗(yàn)數(shù)據(jù)2016-12-25統(tǒng)計(jì)數(shù)據(jù)的分類(按時(shí)間狀況分)截面數(shù)據(jù)(cross-sectional data) 在相同或近似相同的時(shí)間點(diǎn)上收集的數(shù)據(jù)描述現(xiàn)象在某一時(shí)刻的變化情況比如，2005年我國(guó)各地區(qū)的國(guó)內(nèi)生產(chǎn)總值數(shù)據(jù)時(shí)間序列數(shù)據(jù)(time series data) 在不同時(shí)間上收集到的數(shù)據(jù)描述現(xiàn)象隨時(shí)間變化的情況比如，2000年至2005年國(guó)內(nèi)生產(chǎn)總值數(shù)據(jù)1.3 數(shù)據(jù)的來(lái)源 1.3.1 數(shù)據(jù)的間接來(lái)源 1.3.2 數(shù)據(jù)的直接來(lái)源 1.3.3 調(diào)查方案設(shè)計(jì) 1.3.4 設(shè)計(jì)質(zhì)量

6、第 1 章 統(tǒng)計(jì)學(xué)和統(tǒng)計(jì)數(shù)據(jù)1.3.1 數(shù)據(jù)的間接來(lái)源1.3 數(shù)據(jù)的來(lái)源2016-12-25二手?jǐn)?shù)據(jù)的來(lái)源Internethttp/WWW.中國(guó)統(tǒng)計(jì)年鑒2001中國(guó)人口統(tǒng)計(jì)年鑒中國(guó)市場(chǎng)統(tǒng)計(jì)年鑒世界發(fā)展報(bào)告世界經(jīng)濟(jì)年檢工業(yè)普查數(shù)據(jù)中國(guó)統(tǒng)計(jì)出版社統(tǒng)計(jì)部門和政府部門公布的有關(guān)資料，如各類統(tǒng)計(jì)年鑒各類經(jīng)濟(jì)信息中心、信息咨詢機(jī)構(gòu)、專業(yè)調(diào)查機(jī)構(gòu)等提供的數(shù)據(jù)各類專業(yè)期刊、報(bào)紙、書籍所提供的資料各種會(huì)議，如博覽會(huì)、展銷會(huì)、交易會(huì)及專業(yè)性、學(xué)術(shù)性研討會(huì)上交流的有關(guān)資料從互聯(lián)網(wǎng)或圖書館查閱到的相關(guān)資料 2016-12-25二手?jǐn)?shù)據(jù)的特點(diǎn)收集容易，采集成本低作用廣泛分析所要研究的問題提供研究問題的背景幫助研究者更好

7、地定義問題檢驗(yàn)和回答某些疑問和假設(shè)尋找研究問題的思路和途徑收集二手資料在研究中應(yīng)優(yōu)先考慮2016-12-25二手?jǐn)?shù)據(jù)的評(píng)估數(shù)據(jù)是誰(shuí)收集的？可信度評(píng)估為什么目的而收集的？數(shù)據(jù)是怎樣收集的？ 什么時(shí)候收集的？ 1.3.2 數(shù)據(jù)的直接來(lái)源1.3 數(shù)據(jù)的來(lái)源2016-12-25數(shù)據(jù)的直接來(lái)源(原始數(shù)據(jù))調(diào)查數(shù)據(jù)通過(guò)調(diào)查方法獲得的數(shù)據(jù)通常是對(duì)社會(huì)現(xiàn)象而言通常取自有限總體 實(shí)驗(yàn)數(shù)據(jù)通過(guò)實(shí)驗(yàn)方法得到的數(shù)據(jù)通常是對(duì)自然現(xiàn)象而言 也被廣泛運(yùn)用到社會(huì)科學(xué)中如心理學(xué)、教育學(xué)、社會(huì)學(xué)、經(jīng)濟(jì)學(xué)、管理學(xué)等 2016-12-25抽樣調(diào)查(sampling survey) 1.從總體中隨機(jī)抽取一部分單位作為樣本進(jìn)行調(diào)查，并根

8、據(jù)樣本調(diào)查結(jié)果來(lái)推斷總體特征的數(shù)據(jù)收集方法 總體隨機(jī)樣本2. 具有經(jīng)濟(jì)性、時(shí)效性強(qiáng)、適應(yīng)面廣、準(zhǔn)確性高等特點(diǎn)2016-12-25普查(census) 為特定目的專門組織的非經(jīng)常性全面調(diào)查通常是周期性的我國(guó)進(jìn)行的普查主要有人口普查，每10年進(jìn)行一次，末尾數(shù)字為“0”的年份進(jìn)行農(nóng)業(yè)普查，每10年進(jìn)行一次，每逢“6”的年份進(jìn)行經(jīng)濟(jì)普查，每5年進(jìn)行一次，每逢“3”和“8”的年份進(jìn)行包括工業(yè)普查第三產(chǎn)業(yè)普查建筑業(yè)普查基本單位普查2016-12-25統(tǒng)計(jì)報(bào)表(statistical report forms) 1.統(tǒng)計(jì)調(diào)查方式之一2.過(guò)去曾經(jīng)是我國(guó)主要的數(shù)據(jù)收集方式3.按照國(guó)家有關(guān)法規(guī)的規(guī)定、自上而下地統(tǒng)

9、一布置、自下而上地逐級(jí)提供基本統(tǒng)計(jì)數(shù)據(jù)4.有各種各樣的類型2016-12-25訪問調(diào)查 (personal interview)1.調(diào)查者與被調(diào)查者通過(guò)面對(duì)面地交談而獲得資料2.有標(biāo)準(zhǔn)式訪問和非標(biāo)準(zhǔn)式訪問標(biāo)準(zhǔn)式訪問通常按事先設(shè)計(jì)好的問卷進(jìn)行非標(biāo)準(zhǔn)式訪問事先一般不制作問卷2016-12-25郵寄調(diào)查 (mail survey)也稱郵寄問卷調(diào)查是一種標(biāo)準(zhǔn)化調(diào)查調(diào)查者與被調(diào)查者沒有直接的語(yǔ)言交流，信息的傳遞依賴于問卷通過(guò)某種方式將調(diào)查表或問卷送至某調(diào)查者手中，由被調(diào)查者填寫，然后將問卷寄回指定收集點(diǎn)問卷或表格的發(fā)放方式有郵寄、宣傳媒介傳送、專門場(chǎng)所分發(fā)三種2016-12-25電話調(diào)查 (teleph

10、one survey)調(diào)查者利用電話與被調(diào)查者進(jìn)行語(yǔ)言交流以獲得信息時(shí)效快、成本低問題的數(shù)量不宜過(guò)多 您好!我是調(diào)查公司的調(diào)查員2016-12-25電腦輔助調(diào)查 (computerassisted telephone interviewing)又稱電腦輔助電話調(diào)查電腦與電話相結(jié)合完成調(diào)查的全過(guò)程一般需借助專門的軟件進(jìn)行硬件設(shè)備要求較高問卷2016-12-25座談會(huì) (colloquia)1.也稱集體訪談2.將一組被調(diào)查者集中在調(diào)查現(xiàn)場(chǎng)，讓他們對(duì)調(diào)查的主題發(fā)表意見以獲得資料3.參加座談會(huì)的人數(shù)不宜過(guò)多，一般為610人4.側(cè)重于定性研究2016-12-25個(gè)別深度訪問 (personal Inte

11、rviewing)一次只有一名受訪者參加、針對(duì)特殊問題的調(diào)查適合于較隱秘的問題，如個(gè)人隱私問題；或較敏感的問題，如政治方面的問題側(cè)重于定性研究2016-12-25觀察法 (observational method)1.就調(diào)查對(duì)象的行動(dòng)和意識(shí)，調(diào)查人員邊觀察邊記錄以收集所需信息2.調(diào)查人員不是強(qiáng)行介入3.能夠在被調(diào)查者不察覺的情況下獲得資料2016-12-25實(shí)驗(yàn)法 (experimental method)1.在設(shè)定的特殊實(shí)驗(yàn)場(chǎng)所、特殊狀態(tài)下，對(duì)調(diào)查對(duì)象進(jìn)行實(shí)驗(yàn)以獲得所需資料2.有室內(nèi)實(shí)驗(yàn)法和市場(chǎng)實(shí)驗(yàn)法1.3.3 調(diào)查方案設(shè)計(jì)1.3 數(shù)據(jù)的來(lái)源2016-12-25調(diào)查目的 (objective

12、 of survey)1.調(diào)查要達(dá)到的具體目標(biāo)回答“為什么調(diào)查？”調(diào)查之前必須明確2016-12-25調(diào)查對(duì)象和調(diào)查單位 (Respondent and Survey unit)調(diào)查對(duì)象：調(diào)查研究的總體或調(diào)查范圍調(diào)查單位：需要對(duì)之進(jìn)行調(diào)查的單位。可以是調(diào)查對(duì)象的全部單位(全面調(diào)查)，也可以是調(diào)查對(duì)象中的一部分單位(非全面調(diào)查)回答“向誰(shuí)調(diào)查？”調(diào)查對(duì)象調(diào)查單位？2016-12-25調(diào)查項(xiàng)目 (Survey items)調(diào)查的具體內(nèi)容通常表現(xiàn)為表格或問卷回答“調(diào)查什么？”Q1 Q2 Q3 Q4 2016-12-25方案設(shè)計(jì)中的其他問題1.明確調(diào)查所采用的方法2.確定調(diào)查資料的所屬時(shí)間和調(diào)查工作的

13、期限3. 調(diào)查的組織與實(shí)施細(xì)則1.3.4 數(shù)據(jù)質(zhì)量1.3 數(shù)據(jù)的來(lái)源2016-12-25統(tǒng)計(jì)數(shù)據(jù)的誤差統(tǒng)計(jì)數(shù)據(jù)與客觀現(xiàn)實(shí)之間的差距有登記性誤差和代表性誤差兩類登記性誤差：由于調(diào)查者或被調(diào)查者的人為因素所造成的誤差。理論上講可以消除代表性誤差：用樣本數(shù)據(jù)進(jìn)行推斷時(shí)所產(chǎn)生的誤差。通常無(wú)法消除，但事先可以進(jìn)行控制和計(jì)算2016-12-25統(tǒng)計(jì)數(shù)據(jù)的質(zhì)量要求1. 精 度：最低的抽樣誤差或隨機(jī)誤差2. 準(zhǔn) 確 性：最小的非抽樣誤差或偏差3. 關(guān) 聯(lián) 性：滿足用戶決策、管理和研究的需要4. 及 時(shí) 性：在最短的時(shí)間里取得并公布數(shù)據(jù)5. 一 致 性：保持時(shí)間序列的可比性6. 最低成本：以最經(jīng)濟(jì)的方式取得數(shù)據(jù)

14、1.4 統(tǒng)計(jì)中的幾個(gè)基本概念 1.4.1 總體和樣本 1.4.2 參數(shù)和統(tǒng)計(jì)量 1.4.3 變量第 1 章 統(tǒng)計(jì)學(xué)和統(tǒng)計(jì)數(shù)據(jù)2016-12-25總體和樣本總體(population)所研究的全部個(gè)體(數(shù)據(jù)) 的集合，其中的每一個(gè)個(gè)體也稱為元素分為有限總體和無(wú)限總體有限總體的范圍能夠明確確定，且元素的數(shù)目是有限的無(wú)限總體所包括的元素是無(wú)限的，不可數(shù)的樣本 (sample)從總體中抽取的一部分元素的集合構(gòu)成樣本的元素的數(shù)目稱為樣本容量或樣本量 (sample size)2016-12-25參數(shù)和統(tǒng)計(jì)量參數(shù)(parameter)描述總體特征的概括性數(shù)字度量，是研究者想要了解的總體的某種特征值所關(guān)心的

15、參數(shù)主要有總體均值()、標(biāo)準(zhǔn)差()、總體比例()等總體參數(shù)通常用希臘字母表示 統(tǒng)計(jì)量(statistic)用來(lái)描述樣本特征的概括性數(shù)字度量，它是根據(jù)樣本數(shù)據(jù)計(jì)算出來(lái)的一些量，是樣本的函數(shù)所關(guān)心的樣本統(tǒng)計(jì)量有樣本均值(x)、樣本標(biāo)準(zhǔn)差(s)、樣本比例(p)等樣本統(tǒng)計(jì)量通常用小寫英文字母來(lái)表示 2016-12-25統(tǒng)計(jì)中的幾個(gè)基本概念平均數(shù)標(biāo)準(zhǔn)差比 例參數(shù)統(tǒng)計(jì)量x s p總體樣本2016-12-25變 量(variable) 說(shuō)明現(xiàn)象某種特征的概念如商品銷售額、受教育程度、產(chǎn)品的質(zhì)量等級(jí)等變量的具體表現(xiàn)稱為變量值，即數(shù)據(jù)變量可以分為無(wú)序類別變量(categorical variable) ：說(shuō)明事物類別的名稱有序類別變量(rank variable)：說(shuō)明事物有序類別的名稱數(shù)值變量(metric variable) ：說(shuō)明事物數(shù)字特