1、測驗品質考驗與測驗品質考驗與TestGraf 98的應用的應用楊志強博士國立臺北教育大學.tw.tw/cyang良好的測驗品質良好的測驗品質 關聯性：測驗能適切地評量所期望的學習結果。 平衡性：涵蓋的教材內容要符合雙向細目表預定的比率。 有效性：測驗的編製、評分方式及作答時間要經濟有效。 客觀性：該領域的專家應可得滿分或接近滿分。 特殊性：未具備該領域知識者僅能憑猜測作答。 適當的難度：測驗的難易度要適中。 良好的鑑別度：能區別高低學習成就者。 信度：測驗的結果要一致性或可靠性。 效度：測驗內容能真正測量到所欲測量的特質。

2、公平性：每一位受試者都有相等的機會，來表現他真正的學習成就。施測前施測前質化分析質化分析雙向細目表教學目標教材內容知識理解應用分析綜合評鑑題數百分比加法132101820%減法221111820%乘法4230211230%除法3322111230%題數1010844440100%百分比25%25%20%10%10%10%100%100%施測後施測後量化分析量化分析假設班上有30位學生。某次數學月考，計有20人答對第一題試題。則其試題難度指數為難度分析試題難度指數67.030201P評鑑原則：個別試題：0.40.8。整體試題：平均0.5左右。內部一致性分析：探討個別試題和整個測驗總分之間的一致性

3、。外在效度分析：以外在效標為依據，檢驗每一個試題是否具有預定的某種鑑別功能。鑑別度分析假設某次數學月考的第五題試題，高分組的難度指數為0.8；低分組的難度指數為0.2。則其鑑別度指數為鑑別度指數6 . 02 . 08 . 05D評鑑原則：0.40以上：非常優良。 0.300.39：優良；但可能需要修改。0.200.29：尚可；但需做局部修改。0.19以下：劣；需要刪除或修改。求出每一試題與總分之點二系列相關/二系列相關，以了解每一試題與總分之間的相關性/一致性。點二系列相關係數/二系列相關係數相關係數的解釋r=1r=-1r=0r=0.9r=-0.8r=0.5SIZE40383634323028

4、2624IQ150140130120110100908070選項誘答力分析評鑑原則：至少有一位低分組受試者選擇任何一個不正確選項。選擇不正確選項的低分組受試者應比高分組多。TestGraf 98 Ramsay （1991 ）結合高低試題鑑別指數與核平滑估算法，發展出正確選項與誘答選項均可分析的核平滑化無參數試題特徵曲線估算法（Kernel Smoothing Approaches to Nonparametric Item Characteristic Curve Estimation）。 估計受試者分數排序（ranks）的函數和試題選項的選答情形之間的關係。 完全根據受試者實際作答資料進行分析，無需假設任何試題模式，是一種無參數的試題反應理論。 根據上述理論，以受試者的潛在能力為橫軸，選答率為縱軸，得一選項特徵曲線（option characteristic curve，OCC）。 軟體下載處：http:/www.psych.mcgill.ca/faculty/ramsay/TestGraf.html選項特徵曲線選項特徵曲線結語結語 現有的學生測驗