GB/T40552—2021/ISO29992:2018教育服務效果測評指南Guidanceforassessmentofoutcomesoflearningservices國家市場監督管理總局國家標準化管理委員會IGB/T40552—2021/ISO29992:2018 Ⅲ 1 13術語和定義 1 2 46測評實施 7 8 89測評倫理 9附錄A(資料性)測評文件 ⅢGB/T40552—2021/ISO29992:2018本文件按照GB/T1.1—2020《標準化工作導則第1部分：標準化文件的結構和起草規則》的規定本文件等同采用ISO29992:2018《教育服務效果測評指南》。本文件做了以下最小限度的編輯性改動： 請注意本文件的某些內容可能涉及專利。本文件的發布機構不承擔識別專利的責任。本文件由全國教育服務標準化技術委員會(SAC/TC443)提出并歸口。研究院。GB/T40552—2021/ISO29992:20181GB/T40552—2021/ISO29992:2018教育服務效果測評指南本文件適用于針對學員學習效果和進步情況的測評；不適用于針對教育服務項目和教育服務提供2規范性引用文件下列術語和定義適用于本文件。3.1基于(教育或專業方面的)參照點或標準，用以判斷被測人員在特定領域的知識、能力或表現的測3.2測評者assessor對被測人員在測評過程中的表現進行評估，為被測人員和顧客提供測評報告與咨詢反饋的個人或組織。3.3運用知識和技能取得預期效果的能力。注：運用知識和技能的能力指的是學員能夠獨立自主地、負責任地在不同環境或情景中表現恰當的態度與行為。3.4用于判斷學員已掌握內容和/或可能面臨困難的測評。3.5監考官invigilator2GB/T40552—2021/ISO29992:20183.6評分人員scorer打分人員rater3.73.8在測評過程中進行的或在測評結束后立即進行的人工評分。3.9依托信息技術實現的對評分項的自動評分。3.103.113.123.134測評策劃測評遴選或開發宜滿足測評主辦方的需求、符合預期用途。在測評遴選或開發前，宜開展需求分件和其他資料宜記錄在案。 3GB/T40552—2021/ISO29992:2018——擬基于測評結果做出的決策；——目標被測人員群體及因其能力障礙所需配給的條件；——測評的地點與環境；——測評的約束與局限；——測評分數的有效期。——測評安全保證；方案以需求分析結果為基礎，對4.2的有關內容進行回應。——測評范圍；——測評結果應用的預期影響；——測評形式與測評目標的一致性說明；——向利益相關方告知測評分數時所采用的方式。——測評時間與費用要求；——測評實施的所有必備條件； ——質量保證機制；——測評行為守則(見8.5); 既有測評的有效性及其與測評方案的一致性。測評方案宜由測評主辦方批準。4GB/T40552—2021/ISO29992:20185測評開發測評內容測評時間既有知識和能力水平學習活動開始前知識和能力方面的進步學習活動過程中的恰當時機學習目標達成情況學習活動結束后本測評時間安排表僅適用于與學習活動對應的測評。任所承擔的測評開發工作和任務。測評開發者宜明確所有測評開發人員的崗位職責與任職資格并記錄在案，無論測評開發人員是測評開發者的內部人員或是外請人員。——接受過測評過程有效性相關培訓；測評者宜根據需求分析結果(見4.2)、測評目標和測評內容選擇不同的測評形式。圖1給出了測評5GB/T40552—2021/ISO29992:2018知識·習題操作用知識和技能)●實操/案例分析●模擬操作●角色扮演●游戲●其他表現用知識和技能)●真實情境觀察·同行評議5.5測評規范宜在測評實施過程中以及相關技術要求中，明確測評實施管理人員的培訓與資格要求，以及測評實——測評的物理環境或設施；——測評實施的時間安排；——測評實施管理人員的培訓與資格要求；—-—被測人員或測評實施管理人員所需的文件、材料和工具；——測評報告的保存期限。測評宜具有客觀性、高信度和高效度。測評宜按照商定的統一規則評分，盡可能減少不同評分人員的評分差異。測評宜具有高信度。信度是反映不同測評時間、地點、形式和人員之間測評分數一致性的指標。在重復測評信度方面：在較短時間內重復接受同一測評的被測人員，其測評結果宜具有一致性。在評分信度方面：重復評分時，所得分數宜具有一致性。對于手動評分(非機器評分)而言，評分人6GB/T40552—2021/ISO29992:2018致性。數宜具有高信度。——實際測評內容是否符合預期；——測評結果的應用是否達到預期效果。測評題型包括但不限于選擇型題目、建構型題目(包括題干、評分標準和/或預期回答)、任務型題目。測評題目宜符合測評規范(見5.5)。接受嚴格審查。實時評分宜采用明確的評分方案。——設定評分技術的最低要求；——通過手動評分定期核驗機器評分的準確性。分材料的存儲安全。測評開發者宜為評分人員提供參考答案、評分指南和分數等級，并告知評分的規定動作和禁止事項。7GB/T40552—2021/ISO29992:2018測評開發者宜設定并說明分數的有效期。利益相關方宜保存相關技術文件(見附錄A)。——個人信息保密要求；——安全監管人員崗位職責；——安全監管人員培訓要求；——物理環境和在線環境的安全要求；——安全漏洞應急預案；措施等。監考人員宜避免利益沖突，例如監考人員不宜由被測人員的親屬或指導過被測人員學習的人員的——確保測評環境完好；8GB/T40552—2021/ISO29992:2018——驗證被測人員身份；——負責與測評實施管理人員溝通；評分人員/打分人員可能參與測評開發與管理，宜： 經培訓合格，能夠依據測評規范或標準對被測人員的能力水平做出判斷：——具有相關專業知識和經驗。7測評審核與優化測評審核旨在保持測評的信度與效度，并將相關內容記錄在案，審核方案宜包含以下內容：——測評與題目審核流程、測評實施與題目執行情況的統計分析流程、評分人員再培訓及認證測評宜按照審核方案定期接受審核。若審核結果為建議優化，宜按照以下步驟進行優化：-—設定題目調整的相關要求(例如題目更新范圍與比例、題目更新后分數線的相應調整等);-——設定在測評內容不變的條件下分數線的調整規定；——設定測評者名錄的可調整范圍與比例；——設定新增題目的審核要求與流程； 明確測評優化所需資源。8測評公平8.1正式協議正式的書面協議可避免誤解，并為妥善處理投訴提供依據。正式協議宜至少包括以下內容：——測評費用； 相關人員的責任和權利：——開展測評必需的所有前提條件；——測評說明；9GB/T40552—2021/ISO29992:2018——為被測人員提供測評結果的時限。——存在能力障礙的被測人員和其他被測人員在相同時限內完成測評是否公平；——為存在能力障礙的被測人員單獨組織測評，測在測評過程中，各相關方均宜全程維護被測人員的尊嚴和體面。當測評結果可能對被測人員造成在理想情況下，指導過被測人員學習的人員不宜兼任評分人員或監考人員。當有與被測人員在學束后的離場時限等進行規定，為被測人員創造公平的測評環境。測評主辦方宜確保行為守則有效落實。8.6為被測人員提供的信息測評開發者宜為被測人員提供以下信息：——監考安排；——測評對象；——測評等級；——咨詢聯系方式。關方均需注意自身和他人行為所產生的倫理影響。9.2信息準確性信息。GB/T40552—2021/ISO29992:2018——所采集信息的保密性；——信息管理體系有效運行并配有操作手冊；GB/T40552—2021/ISO29992:2018(資料性)測評文件A.1文件A.1.1技術文件測評策劃與測評開發文件包括但不限于：——需求分析的原始資料；測評應用與測評績效文件包括但不限于：——質量保證定期記錄；明測試的標準化水平；——出題人和測評內容方面的專家對于建構型題目的審核記錄；——手動評分方案；——機器評分準確性的記錄；——申訴與仲裁政策及記錄；——重新測評的觸發條件及相應記錄。A.1.2使用者支持文件考人員等。可在測評的不同階段分批為使用者提供使用者支持文件，亦可一次性為使用者提供全部使用者支持文件。A.1.3記錄/分數存檔(記錄管理)包括測評審核結果記錄在內的所有技術文件均宜妥善保存，并便于各利益相關方查詢。在調整或擴展測評以適用于其他用途、人員或情境時，亦宜對文件進行定期更新和補充。更新和補充的形式包括增加補充文件和更新原有文件。GB/T40552—2021/ISO29992:2018[1]ISO10667-1:2011Assessmentservicedelivery—Proceduresandmethodstoassesspeopleinworkandorganizationalsettings—Part1:Requirementsfortheclient[2]ISO/IEC17024:2012Conformityassessment—Generalrequirementsforbodiesoperatingcertificationofpersons[3]ISO/IEC/TS17027:2014Conformityassessment—Vocabularyrelatedtocompetenceofpersonsusedforcertificationofpersons[4]ISO29990:2010Learningservicesfornon-formaleducationandtraining—Basicrequire-mentsforserviceproviders[5]ISO/IEC23988:2007Informationtechnology—Acodeofpracticefortheuseofinforma-tiontechnology(IT)inthedeliveryofassessments[6]ISO29991:2014Languagelearningservicesoutsideformaleducation—Requirements[7]AmericanPsychologicalAssociation.TheStandardsforEducationalandPsychologicalTes-ting.TheAmericanPsychologicalAssociation,Washington,DC,2013[8]European