1、1人人 員員 素質測素質測 評評王青王青中國人民大學中國人民大學勞動人事學院勞動人事學院2問題：下面這個圖形是用磚堆起來的，還問題：下面這個圖形是用磚堆起來的，還需要幾塊磚，才能使它成為一個三角錐？需要幾塊磚，才能使它成為一個三角錐？3最大多數人的答案：最大多數人的答案：54另一種答案：05引導案例引導案例請思考并回答下面的問題：請思考并回答下面的問題： 1 你對你的工作滿意嗎？表現在哪些你對你的工作滿意嗎？表現在哪些方面？請具體說明。方面？請具體說明。 2 一個合格的人力資源部經理應具備一個合格的人力資源部經理應具備什么條件（請列出什么條件（請列出5條最重要的）？條最重要的）？6討論題討論題

2、 1 這兩個問題的回答難度一樣嗎？為這兩個問題的回答難度一樣嗎？為什么？什么？ 2 如何測量一個概念？如何測量一個概念？ 3 測評要解決什么問題？測評要解決什么問題？7第一章第一章 素質測評概述素質測評概述一一 為什么要測評？為什么要測評？二二 測評什么？測評什么？三三 測評的含義與特性及其原理測評的含義與特性及其原理四四 測評的一般原則測評的一般原則五五 測評的主要類型測評的主要類型六六 測評的基本方法測評的基本方法七七 測評方法的標準測評方法的標準8一一 為什么要測評為什么要測評 工作特性工作特性 個人特點（個別差異）個人特點（個別差異） “面目僅半尺，竟無一人肖面目僅半尺，竟無一人肖”；

3、 “人心不同，恰如其面人心不同，恰如其面” 人與工作的匹配（人適其事，事宜其人）人與工作的匹配（人適其事，事宜其人） 是否需要測評（效用）？是否需要測評（效用）？9國內的調查報告：國內的調查報告： 對對6000名經理人的調查：名經理人的調查： 認為公司吸引了有才能的人：認為公司吸引了有才能的人：23 認為認為 公司留住了有才能的人：公司留住了有才能的人：10 認為公司明白哪些是有才能的人：認為公司明白哪些是有才能的人：16 認為公司有效地開發了員工的潛能的人：認為公司有效地開發了員工的潛能的人：3 10二二 測評什么測評的內容測評什么測評的內容素質素質行為行為11素質分析素質分析素質：個體完成

4、一定活動（工作）和任務所具素質：個體完成一定活動（工作）和任務所具備的基本條件和基本特點。備的基本條件和基本特點。 身體素質身體素質 知識技能素質知識技能素質 個性素質（個性傾向性和個性特征）個性素質（個性傾向性和個性特征） 綜合素質綜合素質12 知識（知識（knowledge）經學習獲得的對事實經學習獲得的對事實 的認識的認識 技能（技能（Skills）經學習獲得的完成活動的經學習獲得的完成活動的 操作方式操作方式v 動作操作技能動作操作技能v 心智操作技能心智操作技能13心理現象心理現象心理過程心理過程個性心理個性心理認識過程（記憶、思維、想象、語認識過程（記憶、思維、想象、語言等）言等）

5、情感過程（情緒、情感和情操）情感過程（情緒、情感和情操）意志過程（克服困難、完成任務）意志過程（克服困難、完成任務）個性傾向性個性傾向性需要、動機、興需要、動機、興趣、理想、信念、價值趣、理想、信念、價值觀、世界觀觀、世界觀個性心理特征個性心理特征 能力、氣質能力、氣質和性格和性格14個性：個性： 個人所具有的區別于他人的獨特個人所具有的區別于他人的獨特而穩定的思維方式和行為風格。而穩定的思維方式和行為風格。v 影響人在工作中對事物的理解影響人在工作中對事物的理解v 影響人處理事物的方式影響人處理事物的方式v 影響人和他人溝通的方式影響人和他人溝通的方式v 影響工作績效（任務績效和關系影響工作

6、績效（任務績效和關系績效）績效）15行為分析行為分析 行為的特點行為的特點 行為分析的維度行為分析的維度16行為的特點行為的特點 人的行為是動態的人的行為是動態的 人的行為是可控制的、可改變的人的行為是可控制的、可改變的 人的行為是多樣的人的行為是多樣的 人的行為是有原因（動機）的人的行為是有原因（動機）的 人的行為受環境的制約人的行為受環境的制約 B=F（P，E）17三三 測評的含義與特性測評的含義與特性 測評是測量與評價的簡稱測評是測量與評價的簡稱 測量測量 用數字或符號對人的特點進行用數字或符號對人的特點進行描描述述， 而不論其價值的大小而不論其價值的大小 評價評價是依據定量描述或直覺經

7、驗來確是依據定量描述或直覺經驗來確定某種特點的定某種特點的價值價值。 測量和評價都要依賴某種法則測量和評價都要依賴某種法則18測量測量 測量：測量： 根據一定的法則對事物用數字加以確定。根據一定的法則對事物用數字加以確定。 測量的三個元素：測量的三個元素： 法則；法則； 數字或符號；數字或符號； 事物事物 測量的兩個要素：參照點與單位測量的兩個要素：參照點與單位19素質測量：素質測量： 用數字或符號按照一定法則對人的特用數字或符號按照一定法則對人的特點進行點進行描述描述，是一種間接的測量。用，是一種間接的測量。用定量分定量分析描述個體差異的方法。析描述個體差異的方法。“權，然后知輕重；度，然后

8、知長短。物皆然，心權，然后知輕重；度，然后知長短。物皆然，心為甚。為甚。”20物理測量物理測量 心理測量（對抽象概念的測量）心理測量（對抽象概念的測量）直接測量直接測量 間接測量（借助測量另一事物間接測量（借助測量另一事物來推知所要測量事物的屬性）來推知所要測量事物的屬性）21測量與測驗：測量與測驗： 心理測驗心理測驗：是測量的一種工具和手段。通過觀察、調查人的少數有代表性的行為，對于貫穿在人的行為活動中的心理特征，依據確定的原則進行推論和數量化分析的一種科學手段。 行為樣本的客觀的和標準化的測量。安娜斯塔西22評價（評定）評價（評定） 評價是一種價值判斷評價是一種價值判斷 評價的三個要素：評

9、價的三個要素： 搜集信息并定量描述；加權；搜集信息并定量描述；加權；價值判斷價值判斷23 測評的原理測評的原理 人的素質是有差異的人的素質是有差異的 人的素質是穩定的人的素質是穩定的 人的素質是可以測量的人的素質是可以測量的 人的素質會影響工作績效人的素質會影響工作績效 24 刺激反應刺激反應 心理反應心理反應 行為反應行為反應 情境反應情境反應慣常反應慣常反應 投射投射25四四 測評的一般原則測評的一般原則 普遍性與特殊性相結合普遍性與特殊性相結合 測量和評定相結合測量和評定相結合 主觀與客觀相結合主觀與客觀相結合 精確與模糊結合精確與模糊結合 靜態與動態結合靜態與動態結合26測評的一般原則

10、（續）測評的一般原則（續） 科學性和實用性結合科學性和實用性結合 公正，標準化（方法、程序、公正，標準化（方法、程序、評分，解釋）評分，解釋） 測評與開發結合測評與開發結合27有待解決的幾個問題有待解決的幾個問題 全時空與有限性全時空與有限性 精確與模糊精確與模糊 量化的必要性與困難性量化的必要性與困難性 主觀與客觀主觀與客觀 描述與預測描述與預測 經驗與科學經驗與科學 真實與虛假真實與虛假28五五 測評的主要類型測評的主要類型 選拔性測評（差異性）選拔性測評（差異性） 預測性測評（有效性）預測性測評（有效性） 配置性測評（合適性）配置性測評（合適性） 診斷性測評（準確性）診斷性測評（準確性）

11、 開發性測評（實用性）開發性測評（實用性） 考核性測評（公正性）考核性測評（公正性）29選拔性測評選拔性測評：選拔優秀人員為目的。：選拔優秀人員為目的。 特點：特點： 強調測評的區分功能強調測評的區分功能 測評標準剛性最強測評標準剛性最強 強調客觀性（公平，公正）強調客觀性（公平，公正） 測評指標具有可選擇性測評指標具有可選擇性 測評結果或是分數或是等級測評結果或是分數或是等級預測性測評預測性測評：以預測為目的，強調測評指標具有預測性以預測為目的，強調測評指標具有預測性30配置性測評：以人事合理配置為目的。 針對性：以事擇人針對性：以事擇人 客觀性：測評以職位的客觀要求為標準客觀性：測評以職位

12、的客觀要求為標準 嚴格性：嚴格性：診斷性測評診斷性測評：了解素質現狀或者素質開發中的問題為目的了解素質現狀或者素質開發中的問題為目的 測評內容或者精細，或者全面測評內容或者精細，或者全面 診斷過程尋根究底診斷過程尋根究底 測評結果不公開測評結果不公開 具有較強的系統性具有較強的系統性31開發性測評開發性測評：以開發人員素質為目的。以開發人員素質為目的。 勘探性勘探性 配合性配合性 促進性促進性考核性測評考核性測評（鑒定性測評）： 以鑒定與驗證某種（某些）素質是否具備或者具備程度大小為目的。結合選拔性測評和配置性測評。 全面性全面性 充足性：評介結論有充足證據充足性：評介結論有充足證據 可信性可

13、信性 權威性或者公眾性權威性或者公眾性32六六 測評的基本方法測評的基本方法 心理測驗（能力測驗，人格測驗，職業興心理測驗（能力測驗，人格測驗，職業興趣測驗，動機測驗等）趣測驗，動機測驗等） 面試（結構化面試和非結構化面試等）面試（結構化面試和非結構化面試等）評價中心（無領導小組討論，角色扮演，評價中心（無領導小組討論，角色扮演，公文筐測驗，演講，面談等）公文筐測驗，演講，面談等）33七 測評方法的標準 信度信度 效度效度 普遍適用性普遍適用性 效用效用 合法性合法性34第二章第二章 測評的基本理論測評的基本理論 測量水平測量水平 誤差誤差 信度與效度信度與效度 項目分析項目分析 常模與常模參

14、照常模與常模參照 效標參照效標參照35測量的水平與量表分類測量的水平與量表分類 命名量表命名量表 （Nominal scale） 順序量順序量表表 (Ordinal scale) 等距量表（等距量表（Interval scale） 比率量表比率量表(Ratio scale)36命名（名義）量表命名（名義）量表 歸類時用歸類時用 要求：一個集合中所有成員都應要求：一個集合中所有成員都應分派到相同的數字，且沒有兩個分派到相同的數字，且沒有兩個集合被分派給相同的數字；標準集合被分派給相同的數字；標準必須明確。必須明確。 適用的統計方法：分布次數檢驗；適用的統計方法：分布次數檢驗；百分比；點二列相關；

15、百分比；點二列相關；X 檢驗檢驗37順序（等級）量表順序（等級）量表 對一個集合中的成員排列順序對一個集合中的成員排列順序 沒有相等的單位，沒有絕對零點沒有相等的單位，沒有絕對零點 不提供等級間的距離或差距不提供等級間的距離或差距 原則上不能進行加減乘除，但是有原則上不能進行加減乘除，但是有時為了方便，假定等級數據近似于時為了方便，假定等級數據近似于等距數據等距數據 統計分析：中位數；百分位數；等統計分析：中位數；百分位數；等級相關系數級相關系數38等距尺度等距尺度 有相等的單位，但無絕對零點有相等的單位，但無絕對零點 只能做加減運算，不能做乘除運算只能做加減運算，不能做乘除運算 統計分析：平

16、均數、標準差、積差統計分析：平均數、標準差、積差相關、相關、F檢驗；檢驗；T檢驗；方差分析等檢驗；方差分析等39比率（等比）尺度比率（等比）尺度 有絕對零點，是最高級別的測量有絕對零點，是最高級別的測量尺度尺度 具有所有其他尺度的功能具有所有其他尺度的功能 可以加減，也可以乘除可以加減，也可以乘除 統計分析：全部適用統計分析：全部適用40什么是誤差什么是誤差 誤差是在測量中與目的無關的變誤差是在測量中與目的無關的變量（原因）所產生的不準確或不量（原因）所產生的不準確或不一致效應。一致效應。 任何測量都不是絕對準確的，不任何測量都不是絕對準確的，不準確的數據就有誤差。準確的數據就有誤差。41誤差

17、的兩層含義誤差的兩層含義 由與測量目的無關的變因引起由與測量目的無關的變因引起 系統誤差、隨機誤差和過失誤差系統誤差、隨機誤差和過失誤差 會導致不準確或不一致的測量結會導致不準確或不一致的測量結果果42準確性與一致性的關系準確性與一致性的關系不準，不一致不準，不一致 不準，一致不準，一致 準，一致準，一致43隨機誤差（可變誤差）隨機誤差（可變誤差） 由與測量目的無關的偶然因素引起，由與測量目的無關的偶然因素引起，不易控制，使多次測量產生了不一不易控制，使多次測量產生了不一致的結果。致的結果。 例如：稱重量的時候，不同人對秤桿高例如：稱重量的時候，不同人對秤桿高度的掌握不同。度的掌握不同。44系

18、統誤差（恒定誤差系統誤差（恒定誤差） 由與測量無關的變量引起的一種恒由與測量無關的變量引起的一種恒定而有規律的誤差，穩定地存在于定而有規律的誤差，穩定地存在于每一次測量中，測值一致，但不準。每一次測量中，測值一致，但不準。 在秤砣上搞鬼，就形成了系統誤差在秤砣上搞鬼，就形成了系統誤差。45過失誤差過失誤差 不正確使用測量工具、記錄錯誤、儀器不正確使用測量工具、記錄錯誤、儀器失靈等失誤造成的誤差稱為過失誤差。失靈等失誤造成的誤差稱為過失誤差。 收集資料時，避免過失誤差；收集資料時，避免過失誤差； 處理數據時，必須把包含過失誤差的數處理數據時，必須把包含過失誤差的數據去除。據去除。46不同誤差的影

19、響不同誤差的影響 系統誤差只影響測值的準確性，系統誤差只影響測值的準確性，與效度有關與效度有關 隨機誤差既影響準確性，又影響隨機誤差既影響準確性，又影響一致性。與效度和信度都有關。一致性。與效度和信度都有關。47誤差的來源誤差的來源 測驗內部（測量工具本身）引起測驗內部（測量工具本身）引起的誤差的誤差 施測過程引起的誤差施測過程引起的誤差 被試本身引起的誤差被試本身引起的誤差 主試本身引起的誤差主試本身引起的誤差 主被試交互作用引起的誤差主被試交互作用引起的誤差48被試本身引起的誤差被試本身引起的誤差 測驗的技巧與練習因素測驗的技巧與練習因素 焦慮和動機因素：焦慮和動機因素： 焦慮：狀態焦慮和

20、特質焦慮焦慮：狀態焦慮和特質焦慮 49 反應定式反應定式（獨立于測驗內容的反應傾向） 求求“快快”和求和求“精確精確”的反應定式的反應定式 偏好正面描述的反應定式偏好正面描述的反應定式 偏好特殊位置的反應定式偏好特殊位置的反應定式 偏好較長選項的反應定式偏好較長選項的反應定式 猜測的反應定式猜測的反應定式50主試對測驗結果的影響 主試的態度主試的態度 主試的動機主試的動機 主試的人格主試的人格 主試的期望主試的期望 羅森塔爾效應羅森塔爾效應51協調關系協調關系： 指主試和被試之間一種友好、合作、指主試和被試之間一種友好、合作、能促使被試最大限度的做好測驗的能促使被試最大限度的做好測驗的一種關系

21、一種關系52真分數真分數 定義：一個測量工具在測量沒有誤定義：一個測量工具在測量沒有誤差時所得到的值。差時所得到的值。 操作定義：經過無數次測量所得到操作定義：經過無數次測量所得到的平均值。的平均值。 真分數是構想出來的一個概念，實真分數是構想出來的一個概念，實際上得不到際上得不到。53真分數的意義真分數的意義 一個人在某測驗上的分數，是其一個人在某測驗上的分數，是其真分數和誤差之和。真分數和誤差之和。 X=T+E 這里的誤差指隨機誤差，因為系這里的誤差指隨機誤差，因為系統誤差不影響分數的改變。統誤差不影響分數的改變。54關于偶然誤差的假設關于偶然誤差的假設 如果對一個人接受無數次測量，如果對

22、一個人接受無數次測量，其平均誤差為零。其平均誤差為零。 許多人的一次測驗分數加以平均，許多人的一次測驗分數加以平均，平均誤差為零。平均誤差為零。 真分數和測量誤差是相互獨立的。真分數和測量誤差是相互獨立的。55信度的含義信度的含義 測量結果的一致性程度測量結果的一致性程度 能夠回答：測量工具是否穩定；能夠回答：測量工具是否穩定；測量結果是否可以推論（概化測量結果是否可以推論（概化能力），即從一次測量來推論能力），即從一次測量來推論總體的正確程度。總體的正確程度。 信度只受隨機誤差的影響信度只受隨機誤差的影響56操作定義操作定義 在測量理論中，信度是指一組測驗分數的真在測量理論中，信度是指一組測

23、驗分數的真變異數與總變異數的比率。變異數與總變異數的比率。 rXX =rXT2=ST2/ SX2 1SE2 / SX2 rXT 也稱為信度指數也稱為信度指數 在實際應用中，通常以同一樣本所得的兩組在實際應用中，通常以同一樣本所得的兩組資料的相關作為測量一致性的指標資料的相關作為測量一致性的指標57信度的作用信度的作用 解釋真實分數與實得分數的相關（信解釋真實分數與實得分數的相關（信度系數）度系數） 比較信度可以接受的水準（信度系數）比較信度可以接受的水準（信度系數） 解釋個人分數的意義（測量標準誤）解釋個人分數的意義（測量標準誤）58信度系數信度系數 同一樣本所得的兩組資料的相關同一樣本所得的

24、兩組資料的相關 信度系數（信度系數（ rXX ）表示真分數與實）表示真分數與實得分數之間的決定系數，可以解得分數之間的決定系數，可以解釋為在實得分數的變異數中有多釋為在實得分數的變異數中有多大比例是由真分數的變異引起的大比例是由真分數的變異引起的。59信度系數的意義信度系數的意義 一般能力和學績測驗一般能力和學績測驗 0.9 個性、價值觀個性、價值觀 .75 - .85 .75時，可用于團體間的比較。時，可用于團體間的比較。 .85時，可用于鑒別個人時，可用于鑒別個人。60測量標準誤測量標準誤 誤差分數分布的標準差誤差分數分布的標準差 估計真實分數的范圍，了解實得分數估計真實分數的范圍，了解實

25、得分數再測時可能的變化情形。再測時可能的變化情形。 SE SX(1-rxx)1/2 X1.96SE XT X+1.96SE 真實分數是在其分數附近變化的一段真實分數是在其分數附近變化的一段數值數值。61信度的種類信度的種類 重測信度重測信度 （穩定性系數）（穩定性系數） 復本信度復本信度 （等值性系數）（等值性系數） 分半信度分半信度 （內部一致性系數）（內部一致性系數） 同質性信度同質性信度 （同質性系數）（同質性系數） 評分者信度評分者信度 （肯德爾和諧系數）（肯德爾和諧系數）62重測信度重測信度： 對同一測驗，在不同時間對同一群對同一測驗，在不同時間對同一群體施測兩次，體施測兩次， 兩次

26、測驗分數的相關系數兩次測驗分數的相關系數（采用積差相關系數）（采用積差相關系數） 就是重測系數，就是重測系數，又稱穩定性系數。又稱穩定性系數。重測間隔重測間隔63復本信度（等值性系數）復本信度（等值性系數）： 以兩個測驗以兩個測驗復本復本（功能等值但題目（功能等值但題目內容不同）內容不同） 來測量同一群體，然后求應來測量同一群體，然后求應試者在這兩個測驗上得分的相關系數。試者在這兩個測驗上得分的相關系數。64分半信度（內部一致性系數）分半信度（內部一致性系數）： 通過將測驗分成等值的兩半，計算這兩通過將測驗分成等值的兩半，計算這兩半測驗之間的相關性而獲得的信度系數。半測驗之間的相關性而獲得的信

27、度系數。 分半信度的矯正分半信度的矯正： 斯皮爾曼布朗公式：斯皮爾曼布朗公式： rtt= 2rhh / 1+rhh 盧倫公式盧倫公式 ： rxx1Sd2 / Sx265同質性信度同質性信度(庫德理查遜信度）：庫德理查遜信度）： 測驗內部的各個題目在多大程度上考察測驗內部的各個題目在多大程度上考察了同一內容。了同一內容。 同質性：指所有測驗題目測量的只是同質性：指所有測驗題目測量的只是單一內容或者特質，表現為所有測驗題目單一內容或者特質，表現為所有測驗題目得分的一致性。得分的一致性。66Note： 所有測驗都應該保證只測量一種特質或所有測驗都應該保證只測量一種特質或內容；如果需要在一個測驗中測量

28、不同內容；如果需要在一個測驗中測量不同的內容，就應該將測驗分成幾個分測驗，的內容，就應該將測驗分成幾個分測驗，每個分測驗測量一種內容。每個分測驗測量一種內容。67評分者信度評分者信度： 指對不同評分者對同樣對象進行評指對不同評分者對同樣對象進行評定時的一致性。定時的一致性。 可以用積差相關，也可以用斯皮爾可以用積差相關，也可以用斯皮爾曼等級相關曼等級相關 評分者三人以上，又采用等級計分，評分者三人以上，又采用等級計分，需要用肯德爾和諧系數需要用肯德爾和諧系數68各種信度系數相應的誤差來源各種信度系數相應的誤差來源信度系數類型信度系數類型誤差方差來源誤差方差來源重測信度重測信度時間取樣時間取樣復

29、本信度復本信度內容取樣內容取樣分半信度分半信度內容取樣內容取樣同質性信度同質性信度內容的異質性內容的異質性評分者信度評分者信度評分者之間的差異評分者之間的差異69影響信度的因素影響信度的因素q 樣本團體的性質樣本團體的性質 相關系數受到團體中分數分布（個體差相關系數受到團體中分數分布（個體差異范圍）的影響異范圍）的影響 信度系數受到團體異質性的影響（異質，信度系數受到團體異質性的影響（異質，高估信度）高估信度） 不同團體間能力水平的影響不同團體間能力水平的影響 70q測驗的長度測驗的長度 測驗越長，則試題取樣或內容取測驗越長，則試題取樣或內容取樣越恰當樣越恰當 測驗越長，測驗結果越不易受測驗越

30、長，測驗結果越不易受猜測的影響猜測的影響q 測驗的難度測驗的難度71效度效度 效度的含義效度的含義 效度的特性效度的特性 效度的種類效度的種類72效度的含義效度的含義 效度是指測量的正確性，即一個效度是指測量的正確性，即一個測量能夠測出所要測的東西的程測量能夠測出所要測的東西的程度。度。 能夠回答：一個工具測評什么東能夠回答：一個工具測評什么東西？對于所要測評的東西測得有西？對于所要測評的東西測得有多準？多準？73效度的操作定義效度的操作定義 在一系列測量中，與測量目的有關的真實變在一系列測量中，與測量目的有關的真實變異數（與測量目的有關的有效變異）與總變異數（與測量目的有關的有效變異）與總變

31、異數（實得變異數）的比率異數（實得變異數）的比率 。rXY=rXT2=SV2/ SX2 一組測驗分數的總變異包括：真實的、與測一組測驗分數的總變異包括：真實的、與測量目的有關的變異；真實的、出自無關來源量目的有關的變異；真實的、出自無關來源的變異；隨機誤差的變異的變異；隨機誤差的變異 SX2=ST2+SE2=SV2+SI2+SE2 74效度的特性效度的特性效度具有相對性效度具有相對性效度都是針對特定用途而言的，效度效度都是針對特定用途而言的，效度并沒有普遍意義上泛指的效度值。并沒有普遍意義上泛指的效度值。效度具有連續性效度具有連續性 效度不是效度不是“全全”或或“無無”的離散變的離散變量，它只

32、是一個連續變量，測驗的有量，它只是一個連續變量，測驗的有效性只有程度上的差別效性只有程度上的差別。75效度的類型效度的類型 內容效度內容效度 構想效度構想效度 效標關聯效度效標關聯效度 聚合效度聚合效度 辨別效度辨別效度76內容效度內容效度(專家效度和邏輯效度專家效度和邏輯效度)： 系統檢查測驗的內容，從而確定測驗系統檢查測驗的內容，從而確定測驗是否是所預測量的行為領域的代表性取樣。是否是所預測量的行為領域的代表性取樣。主要是用于成就測驗。主要是用于成就測驗。 回答兩個問題：回答兩個問題： 該測驗是否包括某種技能知識的代表該測驗是否包括某種技能知識的代表性性 樣本樣本 測驗的成績是否受無關因素

33、的影響測驗的成績是否受無關因素的影響7778行為目標行為目標內容內容準備準備 編制編制 實施實施 計分計分 概念知識概念知識工作分工作分析析簡答題簡答題暈輪效暈輪效應應計分鍵計分鍵具體事實具體事實知識知識理解理解應用應用79表面效度表面效度： 并非真正的測驗效度，而是外行人對并非真正的測驗效度，而是外行人對測量對象的臆斷，可用來操作施測對象的測量對象的臆斷，可用來操作施測對象的測驗動機。測驗動機。 最高作為測量，表面效度越高越好最高作為測量，表面效度越高越好 典型作為測量，表面效度越低越好典型作為測量，表面效度越低越好80構想效度：構想效度： 它主要涉及的是心理學的理論概念它主要涉及的是心理學

34、的理論概念問題，指心理測驗對某一理論概念或特問題，指心理測驗對某一理論概念或特質測量的程度。質測量的程度。 81確定構想效度的確定構想效度的步驟步驟： 建立理論框架，以解釋被試在測驗建立理論框架，以解釋被試在測驗上的表現上的表現 依據理論框架，推演出各種有關測依據理論框架，推演出各種有關測驗成績的假設驗成績的假設 以邏輯和實證的方法來驗證假設以邏輯和實證的方法來驗證假設82常用指標：常用指標：v 發展變化發展變化v 與其它測驗的相關與其它測驗的相關 相容效度：一個新測驗與相似的舊相容效度：一個新測驗與相似的舊 測驗之間的相關。測驗之間的相關。83v 因素分析因素分析v 內部一致性內部一致性v

35、會聚效度（會聚效度（convergent validity ）和區分效度（和區分效度（discriminant validity）84會聚效度與區分效度會聚效度與區分效度 相同的特質用不同的方法施測所相同的特質用不同的方法施測所得結果的相關程度。得結果的相關程度。 不同特質用相同方法施測所得結不同特質用相同方法施測所得結果的相關程度。果的相關程度。 MTMM（Multi-trait-multi-methods）85 方法一 方法二 方法三特質 A1 B1 C1 A2 B2 C2 A3 B3 C3 方法一A1 B1 C1 方法二方法三A2 B2 C2A3 B3 C386效標效度效標效度指測驗總分

36、與外在標準（效標）的相關指測驗總分與外在標準（效標）的相關程度，程度，一個測驗對處于特定情境中的個一個測驗對處于特定情境中的個體行為進行預測時的有效性（準確性）。體行為進行預測時的有效性（準確性）。衡量測量有效性的參照衡量測量有效性的參照標準，就是效標。標準，就是效標。被預測的行為是檢驗測驗效度的標準，被預測的行為是檢驗測驗效度的標準，就是效標。就是效標。87 實證（效標）效度強調的是效標行實證（效標）效度強調的是效標行為，因此，測驗內容是次要的，測驗為，因此，測驗內容是次要的，測驗題目不需要與效標有明顯關系，只要題目不需要與效標有明顯關系，只要測驗分數能預測效標行為。測驗分數能預測效標行為。

37、88效標與效標測量效標與效標測量 效標：觀念效標和效標測量效標：觀念效標和效標測量 效標測量要求能準確測量觀念效標，效標測量要求能準確測量觀念效標，還要具有很高的信度。還要具有很高的信度。89效標測量的客觀性：效標測量的客觀性： 避免偏見避免偏見 防止效標污染防止效標污染效標污染：效標污染： 指個人的效標成績由于評定者知指個人的效標成績由于評定者知道測驗分數而受到影響的情形道測驗分數而受到影響的情形90同時效度與預測同時效度與預測效度效度 同時效度同時效度：效標材料和測驗分數差不多同時收集。效標材料和測驗分數差不多同時收集。 預測效度：效標材料在一段時間后搜集到預測效度：效標材料在一段時間后搜

38、集到 區分的標準不是時間，而是區分的標準不是時間，而是測驗目的測驗目的 同時效度多用于診斷現狀：同時效度多用于診斷現狀：“某人成功了嗎？某人成功了嗎？” 預測效度多預測未來：預測效度多預測未來：“某人會成功嗎？某人會成功嗎？”91常見效標常見效標 學術成就學術成就 特殊訓練成績特殊訓練成績 實際工作表現實際工作表現 等級評定等級評定 團體對照團體對照 先前有效的測驗先前有效的測驗92確定實證效度的方法確定實證效度的方法 相關法（積差相關）。問題：相相關法（積差相關）。問題：相關系數的平方表示什么？關系數的平方表示什么？ 區分度：預測源分數是否能區分區分度：預測源分數是否能區分由效標測量所定義的

39、群體。由效標測量所定義的群體。 命中率：根據測驗所做的正確決命中率：根據測驗所做的正確決定的比率定的比率。9321xyrSDySest94命中率的含義命中率的含義 效標成績效標成績 失敗失敗 成功成功測驗預測測驗預測 成功成功 失誤失誤A 命中命中B 失敗失敗 命中命中C 失誤失誤D95命中率種類命中率種類 總命中率總命中率 B+C A+B+C+D B 正命中率正命中率 A+B96測驗效果分析測驗效果分析 錄取線錄取線工工作作 錯誤拒絕錯誤拒絕 正確錄取正確錄取 成成成成 功功績績 合格線合格線 正確拒絕正確拒絕 錯誤錄取錯誤錄取 失敗失敗 測測 驗驗 分分 數數97影響效度的因素影響效度的因

40、素9899100信度與效度的關系信度與效度的關系 信度是效度的必要條件，但非充分條件信度是效度的必要條件，但非充分條件 測量的信度只受隨機誤差因素的影響，測量的信度只受隨機誤差因素的影響，不受系統誤差因素的影響不受系統誤差因素的影響 測量的效度既受隨機誤差因素的影響，測量的效度既受隨機誤差因素的影響，又受系統誤差因素的影響又受系統誤差因素的影響 因此，測量的效度總低于信度因此，測量的效度總低于信度101項目分析項目分析 難度難度： 通過（答對）某個題目的人數占總人數的百通過（答對）某個題目的人數占總人數的百分比。分比。 高分組和低分組的通過率的平均值。高分組和低分組的通過率的平均值。 區分度區分度 ： 測驗項目對于所測查的心理特測驗項目對于所測查的心理特性的鑒別能力和區分程度性的鑒別能力和區分程度102 項目效度分析項目效度分析：以效標為依據，考察被試在每個試題上的反應與其在效標上表現的相關情形。v 相關系數：點二列或者二列相關v 鑒別度指數：比較效標得分高和得分低的兩組被試在該項目通過率的差別內部一致性分析內部一致性分析： 項目與總