1、 資料內容僅供您學習參考，如有不當或者侵權，請聯系改正或者刪除。WEB 研究報告劉利俊一研究背景和意義現代遠程教育經過幾年的快速發展取得了前所未有的成就, 產生了良好的社會效益, 同時, 也面臨著嚴峻的挑戰, 其中最為突出的就是遠程教育的教學質量問題。因此, 現代遠程教育的聚焦點必須從各類資源量的建設轉移到教學質量的控制上, 構建適用的遠程教育教學質量控制體系, 這樣才能使現代遠程教育真正實現高等教育大眾化和推進素質教育的總體目標。考試是教學質量控制的重要環節, 歷來受到各學校各方面的高度重視, 考試過程的組織和實施不斷規范化、 科學化, 考試結果能客觀地反映教學、 管理的質量和水平。同時,

2、也存在以下幾個問題: ( 1) 認識上重視考試的組織實施, 對考試結果缺乏測量分析( 2) 行動上沒有從質量控制體系的高度進行考試工作的建設。在當前教育信息化的背景下, 多數高校都進行了相關考試系統及試題庫的開發, 實現了試題試卷的數字化, 取得了良好的應用效果, 但還普遍存在以下幾個方面的問題:1標準與規范問題: 試題資源的建設沒有在建設初期制定統一的標準, 造成試題數據的統一管理困難; 考試系統的設計和開發基本采用二層模式即B/S或C/S, 題庫及功能擴展相對困難。2資源利用率問題: 試題的利用率普遍不高, 學科間存在不平衡。3實現了考試的組織和實施, 缺乏考試測量與評價。缺乏對測試數據進

3、行統計與分析, 發現試題庫中所存在的問題, 發現教師教學過程中的問題, 發現學生學習過程中的問題; 缺乏對試題及試卷使用情況進行綜合分析, 沒有為遠程教育教學質量評價提供必要的依據。為了探索上述問題的解決方法, 逐步構建適合電大遠程教育的試題資源綜合使用平臺, 我們向浙江省遠程教育學會申請對”現代遠程教育環境下基于WEB的試題資源綜合使用平臺的構建”這一課題進行研究。第 1 頁 共 17 頁 資料內容僅供您學習參考，如有不當或者侵權，請聯系改正或者刪除。二研究方法與內容本課題綜合運用了多種研究方法: ( 1) 經過文獻分析法收集考試系統、 試題庫設計、 教育測量評價的相關研究成果; ( 2)

4、經過調查研究法和個案研究法對我校某專業的考試數據進行整理分析, 并根據學校遠程教育的實際情況進行方案設計和系統開發。制定了研究計劃及進度表, 如下:第第第第第第月月月在研究的過程中, 要求課題組成員嚴格按照時間表及任務進行相關研究工作。研究的主要內容闡述如下:1 理論基礎探索課題組圍繞試題數據統一管理、 試題數據分析、 試題應用分析等幾個方面進行資料的收集和整理。資料的主要來源有( 1) 清華同方全文數據庫 CNKI( 2)互聯網相關專題文章 URL( 3) 著作, 主要有統計學、 教育測量與評價、 知識管理、 數據庫及數據倉庫、 數據挖掘、 WEB 程序設計等。( 4) 培訓及會議資料:省遠

5、程學會 課題負責人會議及杭州遠程教育學會課題負責人會議。2 系統建設方案課題組在理論學習的基礎上, 結合學校的實際提出系統建設整體方案:1) 從系統數據源的角度設計硬件環境、 軟件環境、 系統架構、 數據表結構/關系、 功能拓撲圖、 約束條件、 校園網絡架構。2) 確定了數據分析的模型描述( 維度) 、 數據模型創立工具及創立過程、數據模型功能列表。第 2 頁 共 17 頁 資料內容僅供您學習參考，如有不當或者侵權，請聯系改正或者刪除。3) 確定相關的應用分析工具: SQL SERVER 、 OLAP、 EXCEL。4) 確定ASP.NET和PHP為主要前臺開發工具。方案確定后, 課題組進行了

6、合理分工, 確定了課題研究的整體方案。3 系統評估分析近年來, 開展遠程教育的高校均花大力進行了網絡基礎設施、 教學資源、 應用系統的建設和開發, 積累了許多寶貴的經驗和教訓。對這些經驗和教訓及時進行共享和分析能夠提高系統建設的效率和質量。主要包括以下幾個方面的內容:數據/模型/分析/架構/應用/經驗教訓。4 教學質量管理分析教學質量管理是一個綜合系統, 必須考慮諸多方面主觀和客觀的因素。在本課題中, 主要經過教育統計和測量學的方法對考試質量進行分析和研究。三研究過程1. 題庫建庫理論試題資源綜合使用系統中, 要用到試題庫, 它是評測系統好壞的重要指標。題庫( ITEM BANK) 是”按照一

7、定的教育測量理論, 在計算機系統中實現的某個學科題目的集合”, 它是嚴格遵循教育測量理論, 在精確的數學模型基礎上建立起來教育測量工具。當前, 試題庫建庫的理論主要有兩種: 一為經典測量理論,二為項目反映理論。二者都有一套完整的試題分析指標體系和評價標準。首先為表示試題難易程度的值, 其次為表示區分度的題目與測試的相關系數, 還有估計分數真值的標準誤差及由此推算出來的信度公式等, 并對建立試卷、 考分轉換與等值等均有一套較為完整的方法。相比之下, 經典測量理論會有不夠完善的地方,如考生分數和題目難度有著密切關系, 題目難度是相對于考生而言; 而項目反映理論則有可使題目參數穩定準確, 不受受測樣

8、本的影響, 它還定義了信息函數這一綜合質量指標, 用來全面解決考試等值問題。故從更科學地挑選題目作為標準,在試題綜合使用系統開發過程中主要運用項目反映理論。建立試題資源綜合使用系統是一個復雜的系統工程, 首先要建立系統的數學模型, 然后確定試題的屬性指標以及試題的組成結構, 再組織優秀的學科教師編寫試題, 為了保證這些試題的科學性和有效性, 還要組織大量的被試樣本, 進行第 3 頁 共 17 頁 資料內容僅供您學習參考，如有不當或者侵權，請聯系改正或者刪除。抽樣測試, 對試題參數標注的有效性進行校正。試題綜合使用系統作為一個教育測量工具, 它不但僅是只有試題管理、 在線考試和組卷的功能, 它更

9、重要的功能是收集測試數據, 并對這些測試數據進行統計與分析, 發現題庫中所存在的問題,發現教師教學過程中的問題, 發現學生學習過程中的問題。這些問題都隱藏在考試分數的后面, 試題資源綜合使用系統應該經過分析考試數據, 發掘信息, 提供給教師以更多的教學過程信息。2. 組卷理論在試題資源綜合使用系統建設中, 試題質量控制與參數設置、 組卷策略是最重要的兩個環節; 題庫建成后, 我們需要輸入一些查詢參數, 系統將根據這些參數抽出最適合參數要求的試題, 組成能夠實際使用的試卷, 定義這種查詢參數以及對這些參數進行變換算法, 我們稱之為組卷策略。組卷策略的實質是將對人比較直觀明了的組卷參數變換成計算機

10、能夠直接操作的試題屬性項, 然后根據這些屬性項, 在題庫中抽取試題組成試卷。因此, 完整的組卷策略應該由三部份組成:試題屬性項定義、 組卷參數的定義、 變換算法的說明。自動組卷只需要設置試卷的一些整體屬性參數和題型結構參數, 便能夠組出一份滿意的試卷, 它對題目的知識點難度分布沒有特殊要求, 只設平均難度和平均區分度參數, 參數設置簡單直觀, 其組卷的基本步驟為:1) 設置總體參數: 試卷標題, 考試時間, 總題數, 滿分值, 曝光時間、考察的知識點, 平均難度、 平均區分度;2) 設置題型比例表, 檢查約束條件, 生成最終組卷參數原型表;3) 題型與知識點分布對應: 根據題型比例表, 來計算

11、某知識點某類題型所出的試題數, 并預寫最終組卷參數表( 填寫參數表的知識點列) ;4) 試卷難度比例的分配: 在平均難度計算模式表中隨機取一模式值,得出這份試卷的試題的難度比例, 將此難度比例變換成最終組卷參數表中的難度級別參數。5) 試卷區分度比例的分配: 在平均區分度計算機模式表中隨機取一模式值, 得出這份試卷的試題的區分度比例, 并將此區分度比例變換成最終組卷參數表中的區分度級別參數。6) 形成最終抽題的組卷參數表第 4 頁 共 17 頁 資料內容僅供您學習參考，如有不當或者侵權，請聯系改正或者刪除。3. 設計系統的整體架構本系統的采用數據庫系統、 應用服務器、 客戶瀏覽器三層體系結構。

12、其結構示意圖如下:學生學科教師瀏覽器用戶注冊TCP/IP 網應用服務器數據庫服務器考試成績試卷檔案學生答卷作業檔案個人信息歷史記錄試系統參數T典題 題T典題 題參數答案參數答案應用服務器TCP/IP 網瀏覽器確認修訂系統參數系統管理員學科課程專家數據庫服務器端采用的是SQL Server , 這有利于提高大批量數據的吞吐時間, 使整個系統管理規范化, 數據的完整性、 安全性得到保障。應用服務器端采用可擴展的通用組件對象模型計算模式( COM) , 采用分模塊層次結構, 多模塊分立, 允許系統的分布式并行處理提高系統的工作效率。各功能模塊之間經過TCPIP、 HTTP、 RMI等多種協議進行消息

13、和數據交換。用戶運行環境為標準的中文瀏覽器環境( Netscape6.0 或以上版本或 IE6.0或以上版本, 不需要特殊的插件) 。4. 系統的功能設計1)考試A. 考試組卷: 教師經過在瀏覽器中輸入相應的組卷參數( 主要參數有: 試第 5 頁 共 17 頁 資料內容僅供您學習參考，如有不當或者侵權，請聯系改正或者刪除。卷標題、 考試時間、 總題數、 滿分值、 考察的知識點, 平均難度、 平均區分度、 題型結構等) , 系統自動組出一份符合要求的試卷及其標準答案, 試卷是以HTML的方式呈現, 即將一份試卷形成一個HTML文件顯示,教師可經過查詢的方式在線修改試題, 若想使用組卷結果, 直接

14、打印或者另存為HTML文件。組成滿意的試卷后, 能夠存成正式的考卷, 供學生考試用。B. 個人組卷: 學生能夠針對自己學習特點, 輸入組卷參數( 參數項與教師組卷不同) , 形成針對性的練習試卷, 能夠打印, 或另存為HTML文件。C. 在線考試: 學生選擇組號, 并指定要考試的試卷, 調出該試卷, 系統在瀏覽器中以HTML的方式呈現該試卷, 并經過表單來輸入試卷答案, 學生提交答卷后, 系統將學生答案存入學生檔案之中, 教師在閱卷時, 可以調出學生的答卷記錄進行批閱。選擇已經組出的試卷, 進行在線考試,提交所做的試卷后, 系統將自動保存學生的做題答案, 并轉給教師批改。D. 教師閱卷: 教師

15、經過網絡批改學生考過的試卷。教師登錄后, 選擇要批閱的試卷, 再選擇參加考試的學生, 調出該學生的考卷及答案, 客觀題由系統自動判別, 非客觀題由教師判定給分, 教師確認提交后, 判卷信息便存入學生的檔案之中。E. 考試結果查詢: 學生登錄后, 選擇自己考過的試卷, 便可調出該試卷,顯示出該試卷的內容、 標準答案、 學生的答卷記錄、 教師的評分情況等。2)數據分析數據分析大致分為四類:A. 試卷統計: 包括試卷的信度、 效度、 平均難度; 考生群體的最高分、最低分、 各個分數段的積累人數、 平均分、 標準差; 各個考生的原始分數和經過轉換后的分數。B. 試題分析: 包括題目難度、 區分度、 效

16、度、 知識點得分。C. 學生情況分析: 幫助學生澄清對分數的認識 對分數的解釋能夠幫助學生確定自己在所感興趣的群體中處于什么樣的位置, 它讓學生明白分數的含義是相正確, 而不是絕正確; 單純的分數并不能說明全部問題; 獲知學生變化趨勢 學生如果希望知道自己是否進步了, 就需要按時間軸作一個關于考試成績的歷史追蹤。然而直接比較原始分第 6 頁 共 17 頁 資料內容僅供您學習參考，如有不當或者侵權，請聯系改正或者刪除。數是沒有意義的, 必須要經過轉換后的標準分數、 百分等級分數等相比較, 才能夠得出是前進還是后退的結論。D. 學生知識和能力的分析: 題庫系統與學生之間經過聯機測試界面進行交互,

17、計算機記錄并分析學生有意義的反應信息。對于紙筆測驗來說,學生在試卷上做出的反應情況, 也能夠經過手工的方式錄入到庫中,作為分析的數據。E. 教學過程分析: 經過多次考試成績的累積, 能夠以知識點為單位, 分析學生在各知識點上的得分布, 若在某個知識點上, 學生的反應普遍異常, 則說明教師在些知識單元上的教學存在較大問題, 必須改進教學。3)自測練習A. 在線測試: 學生能夠輸入組卷參數( 參數項與教師組卷相同, 只能抽出客觀題) , 形成模擬的練習試卷, 然后進行聯機測試, 提交所做的試卷后, 系統將自動評閱, 并給出標準答案, 對做錯的試題給出詳細解答。B. 個人測試: 學生能夠針對自己學習特點, 輸入組卷參數( 參數項與教師組卷不同, 只能抽出客觀題) , 形成針對性的練習試卷, 并可讓學生進行聯機測試, 學生提交所做的試卷后, 系統將自動評閱, 并給出標準答案, 對做錯的試題給出詳細解答。4)題庫管理A. 添加試題: 在試題庫中加入編好的試題; 有兩種方式加入: 單題錄