實驗設計的信度和效度實驗心理學教研室梁麗娟Tel-mail:lianglijuan_2005@163.com一.實驗設計的效度一.實驗設計的信度一.實驗設計的效度和信度的關系一.實驗設計的效度推廣性——實驗效度指實驗方法能達到實驗目的的程度，也就是實驗結果的準確性和有效性程度。效度包括：（一）內部效度（二）外部效度實驗表情與情緒的感染:請拿出一支筆,把它咬在嘴里……看卡通片,并對卡通平進行評價（一）內部效度內部效度:實驗數據偏離真值的程度,或系統誤差的大小,自變量和因變量之間關系的明確程度。（一）內部效度影響內部效度的因素：歷史（經歷）歷史事件指那些在實驗過程中，與實驗變量同時發生，并對實驗結果產生影響的特定事件。周期比較長的實驗容易歷史因素的影響。例如，很多教育實驗往往需要較長周期，所以歷史事件對實驗結果的影響應該得到關注和考慮。（一）內部效度影響內部效度的因素：成熟或自然發展的影響在長期實驗中，被試隨著年齡的增長，將會變得日益成熟，經驗和能力都會得到提高。參與時間較短的實驗，被試也會發生疲倦、困倦、無聊、饑餓或其它變化，這些變化也會改變他們在實驗中的行為。如：練習效應、學習效應、疲勞效應（一）內部效度影響內部效度的因素：選擇選擇因素指由于沒有用隨機取樣和隨機分配的方法來選擇兩組或幾組被試，因而在實驗處理之前各被試組在各方面就事先存在著差異。隨機化選擇和分配被試的必要性、教育研究中的自然班的問題（一）內部效度影響內部效度的因素：測驗指由于實驗處理之前所施行的前測量可能積極地或消極地影響著實驗處理后的測量，進而混淆實驗的結果。在有前測的實驗中，被試可能會由于在前測中獲得了經驗，從而提高了在后測中的答題能力；也可能會由于前測帶來疲勞而影響到后測的成績（前測和后測間隔時間很短）。（一）內部效度影響內部效度的因素：被試亡失在一個延續時間較長的研究中，被試的更換、淘汰或中途退出可能會對實驗結果產生顯著影響。例如，在有實驗組和控制組的兩組實驗中，由于控制組在中途有優秀生轉學進來，結果實驗組效果很好，這就可能是由于被試更換造成兩組被試不等而造成的，而不一定就是實驗處理的效果。周期比較長的實驗容易發生（一）內部效度影響內部效度的因素：統計回歸指由于選用在某一特征方面具有極端分數（最優或最差）的被試，到了實驗后期測驗時分數通常會發生自然向群體的平均值靠攏的趨勢（集中趨勢）——變得不再是最優或最劣，在重復測量中分數向平均分靠攏。例：提高非洲裔兒童的閱讀成績的計劃?（一）內部效度影響內部效度的因素：儀器使用指實驗中測試手段、技術和工具的失效或缺乏一致性。這可能是測試工具發生了變化（如儀器失靈、問卷涂損等），或者是在實驗過程中由于試驗者主觀情緒狀態發生變化（如變得更嚴格、疲倦或粗心等），或者是評判標準發生了變化（如前后難度不同，不同班用不同的測驗，或者評判者的差異等），這些情況帶來的可能結果是測量和評級的精確性的會受到嚴重影響。

（二）外部效度外部效度:外部效度是指實驗結果能夠普遍推論到樣本的總體和其它同類現象中去的程度，即實驗結果的普遍代表性和適用性

。

實驗設計的核心在于實驗控制，但是，在人為控制創設的實驗情景下得出的規律，其推論也往往有相當的局限性。（二）外部效度影響外部效度的因素：實驗環境的人為性被試樣本缺乏代表性測驗工具的局限性（二）外部效度影響外部效度的因素：實驗安排的反作用霍桑效應（安慰劑效應）：美國學者羅茨里伯格和迪克森（1939）在芝加哥市郊霍桑地區的西部電器工廠進行有關工作條件與生產效率關系的實驗研究。照明條件進一步改善，生產效率又隨之提高。研究者抱著嚴謹的態度，為了進一步證實其科學結論，在把燈光轉暗，但是這是出乎意料的結果出現了，生產效率仍然跟著提高?。ǘ┩獠啃Ф扔绊懲獠啃Ф鹊囊蛩兀簩嶒炚呋驅嶒炛砣藛T的偏向

皮格馬利翁效應（期望效應）：在美國心理學家羅森塔爾和雅各布（1968）一項針對實驗者的期望對被試帶來的影響所進行的一項實驗中，被預測為將有較大進步的學生在下一學年中卻果然進步神速，在學業考試中出類拔萃。（三）.

內部效度和外部效度的關系1.內部效度跟所得結果的唯一解釋性有關，外部效度跟結果的可推廣性有關。研究的內部效度與外部效度之間存在既統一又排斥的關系。2.內部效度是外部效度的必要條件，但不是充分條件。3.不同的研究,側重點不一樣,但是最好是先保證內部效度，然后才是外部效度二.實驗設計的信度可信度——實驗信度指的是實驗結論的可靠性和前后一致性程度。（一）影響實驗信度的因素1.觀察量。觀察量越大就越有理由相信樣本統計值接近總體參數值，也就是樣本更能代表其所在的總體。2.對結果的統計檢驗。偶然因素造成結果的概率低于5%；但仍有5%的犯錯誤的概率。實驗信度和效度應用——實驗評價實驗假設：二戰期間研究者假設訓練中懲罰比獎勵更有效。實驗材料：雷達屏幕中的敵，我飛機剪影。實驗任務：飛機剪影出現按鍵反映敵或我。實驗過程：第一天，被試在每個刺激辨別后告知成績；第二天起，隨機分配到2個組。A組爭取辨認后獲得10美分獎勵，錯誤不給懲罰；B組的被試每個錯誤辨認都會遭到電擊，而正確反應不獎勵。這個程序持續3~4天，到第5天A組5%，B組35%退出實驗。結果：1