1（Validity）2效度的概念效度評估的方法影響效率的因素一、效度的概念（一）效度的定義信度S2

=

S2

+

S2X

T

E效度S2

=

S2

+

S2

+

S2X

V

I

E隨機誤差有效方差S2V系統誤差S2I3與測驗目的有關的有效SV2和實得SX2的比值效度效度定義4效度是一個相對的概念。效度具有連續性。效度是針對測驗結果的。5（二）效度的性質ST2信度高，給

S2

增加提供可能V能否提高效度，再看S2I大小信度高不一定效度高效度要高，S2

須占較大比重，S2

↑V

T效度高，信度必高6（三）信度與效度的關系（三）信度與效度的關系信度是效度的必要條件非充分條件7二、效度評估的方法根據人們對測驗目的解釋的不同:內容效度結構效度效標效度考研題8（一）內容效度9(content

validity)概念評估方法特性（一）內容效度1、概念定義：測驗對于應測內容的代表性程度。內容高的條件:內容范圍明確取樣有代表性應用：成就測驗職業選擇測驗102、特性11特定性：測驗編制者與使用者的關系避免與表面效度（

face

validity

）混淆一個測驗看上去適合欲測目的的程度，而非實際適合欲測目的的程度。測驗在使用者或被試主觀上感覺有效的程度。編制測驗應適當考慮表面效度。最高作為測驗表面效度可高些其他測驗則希望表面效度低些1）專家判斷法（邏輯分析法）含義專家按測題和假設內容范圍作出的符合度判斷。作法與程序確定總體范圍；編制雙向細目表；選擇測驗項目；制定評定量表。123、評估方法局限不同專家對內容范圍會有不同的理解。不同專家對同一測驗內容效度的判斷可能不一致；無良好的數量指標描述這種符合性的程度；132）經驗推測法14檢查不同年級被試總分與每題分數變化情況若隨年級增高總分和每題通過率也升高，可 推論該測驗基本測量了教學內容和目標。檢查不同年齡兒童測驗分數的變化情況是否隨年齡增長而增加。信度指標復本信度r高：內容效度高（也可能兩個都低）r低：至少一個缺乏內容效度再測信度首測---訓練---再測---成績提高153）統計分析法（二）構想效度16(construct

validity)定義確定步驟估計方法（二）構想效度1、定義構想（結構）解釋行為的理論框架或心理特質的抽象概念。結構效度測驗在多大程度上測量了所要測的理論構想。應用智力測驗和人格測驗172、確定步驟提出理論提出假設檢驗假設解釋被試的測驗表現測驗成績的假設邏輯和實證檢驗方法183、估計方法19測驗內方法測驗間方法效標效度實驗法或觀察法的證實3、估計方法201）對測驗本身的分析——測驗內方法研究測驗內部構造分析測驗的結構效度。具體方法內容效度法內部一致性法分析解題的心理過程①內容效度法21確定取樣內容范圍后，利用這些資料 定義測驗欲測的結構性質韋氏智力測驗言語：常識、理解、算術、相似性、詞匯、記憶廣度操作：譯碼、填圖、積木圖案、圖片排列、圖形拼湊②內部一致性法22目的推斷測驗是否測量單一特質方法極端組比較法（extreme-group

method）二列相關法：求題目與總分的相關分測驗與總分的相關2）測驗間的相互比較——測驗間方法23含義同時考慮幾個測驗間的關聯，考察是否測同一結構。常用方法相容效度區分效度因素效度①相容效度24concurrent

validity含義測相同結構的各種測驗間應有較高的相關。求一個新編測驗與另一已知結構測驗間的相關。②區分效度25含義某一特定測驗的分數與已知測量不同結構的測驗分數無關。相關高說明新測驗的效度有問題。③因素效度26含義通過對一組測驗進行因素分析，找到影響測驗分數的共同因素，每個測驗在共同因素上的負荷量即每個測驗與共同因素的相關，稱作測驗的因素效度。基本原理總變異=共同因素+特殊因素+誤差（美）霍爾津格（Holzinger）和斯溫福德（Swineford）的因素分析取樣：芝加哥校區被試：145名7～8年級學生內容：實施24個心理測驗結果：4個基本因素圖--詞測驗和數--圖測驗的功能不明顯。2724個心理測驗的因素歸類28詞語速

度推

理記

憶加法編碼計數點子直-曲算術問題視知覺

15.數字游戲體積

16.問題推理面積

17.系列填空打旗

18.演繹推理詞匯識別數字識別圖形識別實物-數一般知識段落理解句子填空詞匯分類詞義解釋23.圖－詞24.數－圖3）效標效度的研究證明29測驗

效標效標效度資料：提供與結構效度有關的信息。4）實驗法和觀察法的證實30考察實驗變量對X的影響比較實驗處理：前后分數的差異搜集某些變異上的證據。（三）效標效度31criterion-related

validity定義效標估計方法1、定義32效標效度是指一個測驗對處于特定情境中的個體行為進行估計的有效性。一個測驗是否有效，應以實踐的效果來作為檢驗標準。符號：rxy又稱統計效度或實證效度。2、效標及其標準1）定義33衡量測驗效度的外在標準。它是獨立于測驗并可以從實踐中直接獲得我們所感興趣的行為。做預測所依據的標準。檢驗效度的參照標準。測驗所要測的或要預測的行為特質。思考？34能夠考上大學的學生是否是能力強、素質好、有發展前途的人？我們可以通過他們的哪些方面來衡量？可見，一個測驗的效標是不唯一的。具有多樣性、復雜性、特殊性和時間性。2）良好效標的選擇依據35反映測驗的目標；較高的信度；可客觀地測量；測量方法簡單，省時省力，經濟實用。測驗類型常

見

效

標成就學年平均分，教師評定結果，學習量，知識應用力，評判知識的批判力，自學能力…智力學科成績，教師評定結果，學生總成績能力傾向特殊課程或訓練成績，工作或學習成績職業興趣從業者的實際成績或工作表現人格主試主觀標準，被試以后行為，臨床資料36各類測驗的可用效標3）效標效度的類型①同時效度37含義根據測驗分區分已有的狀態或預測已知的效標表現來評估測驗效度的方法。對同組對象求新編測驗得分與現有測驗得分（效標值）之間的相關。應用：效標分和新編測驗分能同時得到。度量指標：測驗分與效標分的相關系數②預測效度38定義根據測驗分數預測其在效標上將來成績來考察測驗效度的方法。一個測驗對被試心理特質或未來績效所作預測的準確程度。應用：測驗分與效標分不能同時得到。度量指標：測驗分與效標分的相關系數。3、估計方法39相關法區分法命中率功利率１）相關法40效度系數測驗分（新編）與效標分的相關系數計算方法積差相關法二列相關、點二列相關，多系列相關等2）區分法41含義：檢驗測驗分數能否有效區分由效標所定義的團體的一種方法。該方法的思路是：被試接受測驗后，讓他們工

作一段時間，再根據工作成績（效標測量）的好壞分成兩組。這時再回過頭來分析這兩組被

試原先接受測驗的分數差異，若這兩種人的測

驗分數差異顯著，則說明該測驗有較高的效度。缺點：組間均數差異顯著性取決于團體大小。3）命中率42含義：正確決策的比例。用途人才選拔方法正確決策的結果正命中率總命中率表：命中表總命中率=命中/（命中+失誤）=（B+C）/（A+B+C+D）正命中率=成功人數/選擇人數=B/（A+B）當測驗用于提高工作效率時考察正命中率；如果強調公平，考察總命中率。43效標成績測驗成績失敗（-）成功（+）成功（+）A（失誤）B（命中）失敗（-）C（命中）D（失誤）4）功利率44使用測驗所帶來的好處應大大高于使用測驗所耗費

的時間、精力和經費，還要比較用測驗與不用測驗

的效益之差，若差別不大，則沒有使用測驗的必要。總之，一個好的測驗，根據其測驗的目的和性質，往往需要多個效度指標達到相當高的水平。三、影響效度的因素45測驗組成測驗實施樣本團體的性質效標的性質（一）測驗組成46試題的質量。測驗長度、試題難度和鑒別力及編排方式。增加新試題對信度的影響大于效度。測驗長度與信度和效度的關系47題數與原測驗題數之比信度效度1010.3000.4002020.4620.4963030.5620.5486060.7200.619120120.8370.688240240.9110.697480480.9540.713測驗長度與效度關系的計算公式：

=例：已知

RXX為0.31,

RXY為0.42,若把效度系數提高到0.65和0.70,則測驗的長度要增加幾倍?48（二）測驗實施49主試測驗情境的控制按測驗手冊各項規定實施測驗。施測過程場地布置材料準備作答方式說明時間的限制等被試人格：興趣、動機、情緒、態度身心健康狀況作答真實性：是否充分合作與盡力50（三）樣本團體的性質51異質性越異質，分數分布越廣，效度越高；越同質，分數分布越窄，效度越低；2、干涉變量52相同測驗對不同團體的測量功能不同。干涉變量因性質不同（性別、興趣、職業、年齡等）使不同團體具有不同的預測能力。（四）效標的性質53效標本身的