基於評價的命題資源配置優化策略研究

《基於評價的命題資源配置優化策略研究》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、基於評價的命題資源配置優化策略研究［摘要］在充分調研考試中心命題管理業務基礎上，本文分析命題組卷過程中以及考試實施後反饋的命題質量數據，針對影響組卷命題質量的各種因素，將影響命題質量的相容和不相容的因素進行綜合考慮，建立瞭命題質量綜合評價基元模型。在命題質量綜合評價模型基礎上提煉出命題專傢資源決策因子，設計命題管理資源優化配置服務平臺，幫助命題機構合理管理並優化命題資源［關鍵詞］命題；質量管理；優化策略［中圖分類號］TP314［文獻標識碼］A［文章編號］1005-6432(2011)35-0135-02考試是教學工作的一個重要環節

2、，是評價教學質量、實現教學計劃和教學目的的一種手段，在教學過程中實施瞭“教考分離”考試制度模式，通過考試反饋信息準確地反映教師教學質量，能切實提高教學質量，充分發揮師生的教學及學習積極性，更好地實現以考促教、以考促學、以考促管和以考促改的考試目的實施“教考分離”不是單純的考試模式改革，本文將從教育現代化管理模式的觀點出發，通過對命題管理的基本任務和重要性的評述及對命題管理的目標分析,設計瞭科學合理的統一命題過程命題質量和命題資源評價方法，並在此基礎上提出命題資源優化配置方案，以促使考試管理工作的各環節向標準化、規范化、目標化方向發

3、展在命題實施過程中，命題質量可能受到任務目標、方案設計和組卷加工等因素影響，這些因素有些是定性為主，而另外一些是定量為主，有些對質量產生正面的影響，而另一些則會產生負面的影響，為得到更加客觀的評價結果，必須將一些矛盾因素進行綜合考慮通過跟蹤和監控教考分離過程，對命題的業務質量數據進行分析，發現數據背後的知識，能夠找出業務特性值與命題質量間的聯系，如命題目標及其反饋結果之間、分析命題與命題之間，命題與命題專傢之間的關系。對統一命題質量評價依據主要來自組卷過程中的相關數據和答卷批閱結果的明細數據，其中答卷批閱數據是海量數據，需要建立數

4、據倉庫，在已建立的數據倉庫基礎上，采用多維分析模型分別對命題過程中的問題數據及閱卷反饋數據進行多維分析，然後采用數據挖掘方法對用戶指定的試卷質量進行評價，計算命題業務統計數據，根據評價結果提供給命題資源配置優化決策者參考使用1命題質量分析評價為瞭讓命題管理機構更科學的實現資源配置優化，必須首先直觀的瞭解和發現命題過程缺陷。對於某次考教分離下的命題質量來說，主要受到三大方面的因素的影響，包括考試目標設計因素、命題方案設計因素和命題組卷加工因素，從多角度分析對可能造成命題缺陷的因素有更深入瞭解，可以利用OLAP技術通過主題確定、OLA

5、P建模和編程實現三個步驟建立的命題質量多維分析模型其中OLAP主題包括命題過程數據分析和命題實施數據分析兩類。命題過程數據分析主題可以從試題、組卷工序、素材、缺陷發生類型來分析采集的信息，命題實施缺陷數據從試卷、時間、缺陷的類型、缺陷的原因、閱卷情況來分析，可以讓命題管理者更加直觀的查看考試實施後命題缺陷的情況在已建立的數據分析主題多維模型基礎上，可以采用基於決策樹算法和基於關聯規則方法的命題質量數據分析方法，分析各命題判卷反饋數據，判斷各命題質量，分析命題反饋結果及其相關聯命題反饋結果，分析命題與命題之間、命題與命題專傢之間的關

6、系，發現命題資源庫中關聯規則。分析結果部分規則如表1所示：2命題資源評價從表1規則可以看出命題質量主要取決於命題專傢的命題能力。為瞭使命題機構對命題質量狀況有一個總體的把握,提高命題管理的效率，有必要對命題資源配置進行評價和篩選，即在公正、公開、公平的考試命題背景下從待選命題教師資源庫中挑出最適合本次命題任務的命題專傢隊伍如果沿用傳統方式，即經驗型的、手工作坊式的命題資源進行評價，在提高考試命題的質量和效率方面是無法取得突破性的進展，走在信息化前列的上海自考中心采取試題管理軟件+試卷的題庫模式，建立命題教師管理系統、卷庫管理系統和

7、試卷考後分析評價系統。其中試卷考後分析評價系統可根據需要選擇經典測驗理論和項目反應理論對數據進行統計分析，包括試題的平均分、標準差、信度、區分度、難度、效度、項目信息量、被試能力估計等等；能夠最終生成並輸出標準化的分析評價報表。通過考後分析評價,為進一步提高自考命題質量和管理水平指明方向；可與通用題庫考前初評系統的評估報表進行對比分析，及時反饋；為其他信息系統提供必要的數據支持，如命題教師管理系統中的教師評價部分等的支持命題管理隊伍的專傢由本學科領域內具有較高的業務水平，教學經驗豐富，治學嚴謹，作風正派，善於合作的教師組成。命題專

8、傢的命題能力也可以通過定性和定量評價，判斷其合格程度。具體包括命題專傢專業命題業務能力、歷史參與數量、歷史完成質量，表2是命題專傢資源決策因子及其計算方法為瞭能有效處理和分析不確定的數據，避免數據的不完整和不精確，就需要使用定性與定量相結合的評價方