(南京审计学院 教务处， 江苏南京210029)
摘要： 考试质量分析是高校教学质量监控的重要环节，也是反思教学、评价教学效果的重要信息。长期以来由于方法手段的制约，大量原始数据不能转化为考试质量分析的有效信息。本文在教学管理与质量监控的操作层面上，设计了考试质量分析的管理目标框架、信息流向结构、量化分析标准、质性分析模块和信息反馈路径，构建了为教师、管理者、决策者服务的、基于教学管理信息平台的考试质量分析系统。
关键词： 管理信息； 考试； 质量分析； 系统框架； 质量监控
中图分类号： G642.47 文献标识码： A文章编号： 1673-8381(2007)01-0073-04考试质量分析是高校日常教学管理工作之一，是评价学生学习效果和教师教学质量的重要依据，更是教学质量分析和监控的重要环节。长期以来，由于考试质量分析数据采集和分析工作量大、质性分析不规范等原因导致考试质量分析简单化，甚至流于形式。网络技术的普及为突破传统的考试质量分析方式提供了技术支持，
本文讨论在信息化管理背景下，课程考试质量分析在教学管理各个层面的不同作用和不同的信息呈现要求，明确了考试质量分析的管理目标、反馈流程、量化标准、分析内容等，设计了较为实用的基于教学管理信息平台的高校课程考试质量分析系统。
一、考试质量分析的目标原则和系统要求
考试质量分析的目标定位为四个层面：教师通过考试质量分析了解成绩分布、教学效果、试卷质量等；课程组通过考试质量分析了解各班的总体成绩分布、教学目标达成、课程组的总体教学效果和业务能力等；教学院系通过考试质量分析了解各课程教学效果和师资业务水平，作为课程建设和队伍建设的重要依据；教务处以考试质量分析为教学质量监控的主要手段，为课程建设、队伍建设、教学过程管理、教学质量持续提高，提供评估分析的信息和改进决策。
对应于考试质量分析的目标层次定位，考试质量分析的工作流程为：试卷的单班分析（从试题质量分析过渡到试卷质量分析，并追溯到与试卷蓝图的吻合度分析）；单门课程的横向分析（从课程考试单班分析延伸到所有开课班级的横向汇总分析）；相关课程的纵向分析（从单门课程的横向分析拓展到相关课程的纵向比较分析）；院系课程考试质量分析报告；全校课程考试质量综合分析报告。
考试质量分析系统应满足的性能要求：
1．成绩管理、考试质量分析、课程评估等子系统之间信息共享；
2．自动完成定量指标数据计算，智能同步显示参考诊断结论；
3．支持教师网上定性分析作业；
4．提供特殊分析技术定制服务；
5．满足质量分析报告的三种反馈形式要求：上传至教学信息管理数据库，制成网页且汇编成册供教师、学生、管理者和决策者随时查阅；转入课程评估数据库，作为课程评估的重要信息；转入教师个人教学电子档案，作为教师教学质量考核的重要信息。
6.为考试质量分析的各类参与者——任课教师、课程负责人、二级院系教学负责人、学校质量评估中心主任等提供最便捷的网上操作环境。
二、考试质量分析的管理流程和信息流向
基于网络平台的考试质量分析是由任课教师、课程负责人、专门业务和技术人员通过系统平台按一定时间顺序相互衔接共同完成的工作，在管理目标和分析手段上有别于传统的试卷分析，需要科学地设计与之相匹配的管理流程和信息流向（如图1所示)
（一）建立原始成绩数据库
依托网络成绩管理系统，由教师录入学生考试成绩，在线提交。学生成绩数据库同时支持成绩管理及考试质量分析。系统后台自动完成统计分析和结果诊断。
学生成绩信息流向学生个人信息子系统供学生查询；考试质量数据分析结果和参考诊断结论等信息流向教师信息系统，供教师作考试质量定性分析。
（二）生成班级考试质量分析表
系统提供已经完成定量分析和参考诊断的班级考试质量分析表，任课教师依据量化分析诊断，结合课程教学实际，完成定性分析并在线提交。教师若需要特殊质量分析技术支持可在线申请。
班级考试质量分析表信息既流向教学管理信息平台，供课程负责人和教学管理人员查阅，同时也流向教师个人信息系统，存入个人教学档案。
（三）生成课程考试质量分析表
系统以课程为单位生成考试质量分析表，提供课程开设班级横向汇总的成绩分布和质量数据。课程负责人在调阅课程组每个任课教师填写的班级考试质量分析表的基础上，参考系统提供的数据，对试卷和课程总体教学效果进行综合质量分析，在线提交。
课程考试质量分析表信息流向教学管理信息平台，供课程组成员和教学管理人员查阅，同时也分别流向教师个人信息系统，供课程评估和后续课程教学参考。
（四）生成院（系）考试质量综合分析报告
班级和课程考试质量分析表在线提交后，系统平台提供其全部信息，各二级院系负责人或学科负责人依据各相关课程的考试质量分析报告及系统提供的量化分析数据，对本院（系）开设课程进行全面分析与总结，完成考试质量综合分析报告，在线提交。
部门考试质量分析综合报告信息流向管理信息平台，进入教学质量评估数据库，供学校决策层参阅。
（五）生成全校考试质量分析报告和课程质量分析报告
学校教学信息与评估中心的管理人员、研究人员和学科专家共同分析和总结前三类考试质量分析信息数据，参考教学管理信息系统中记录的其他教学过程动态数据，对全校的考试质量、课程教学质量进行全面分析与评估，形成全校考试质量分析报告和课程质量分析报告，在线提交。该报告信息流向教学管理信息平台，向学校各决策层、组织层和操作层反馈。
三、定量分析的指标与诊断
在考试质量分析中，学生的成绩分布是重要的分析基础和诊断依据。根据教育测量学理论和考试质量分析的需要，在量化分析中设计两类指标：一是反映学生成绩分布状态的描述性统计指标（最高分、最低分、平均分、标准差、频数分布、成绩分布、偏度、峰度）；二是评估试卷质量的诊断性指标（信度、效度、区分度）。
本文采用的定量分析诊断标准见表1 [1]。
影响考试效度的原因很多，效度数值一般不高，该值只能作为教师定性分析的参考，最重要的是内容效度（试题内容与教学内容和教学大纲一致性）分析。内容效度是试卷定性分析中不可或缺的重要部分。
3.“相关度”是专门设计的一个指标，定义为期末考试成绩与平时成绩的相关系数，用来衡量学生平时成绩与考试成绩吻合程度，作为评价平时成绩合理性的一个参考指标，以控制平时成绩评定随意或用平时成绩人为调整考核成绩的不正常做法。
考试结果是多个复杂因素综合作用的结果，抽象化的统计指标数据只能反映一般的统计特征，这些特征所蕴含的内在规律要借助于对试卷的定性分析才有所依附，故以上评价标准只能作为教师定性分析的参考，而不能作为定论。
四、定性分析的项目与要求
系统自动完成的量化数据给出了考试质量分析的结构性结果，这些结果需要通过教师对试卷的定性分析来加以具体判断和解释。定性分析是考试质量分析的主体，定量分析只能为定性分析提供辅助的参考依据，两者结合能够产生互为补充的放大优势。一般来说考试质量的定性分析范围因课程而异，分析质量与教师的素质、经验、归纳能力和责任心等有很大关系，在实践中经常出现定性分析简单化、走过场的现象，因此归纳定性分析的常规项目在考试质量分析中有一定的参考与规范的意义。
定性分析常规项目一般为：
1.整体情况分析。依据成绩分布总结归纳共性特征，比较差异，分析差异形成的主要原因。
2.考试有效性分析。依据试卷信度和效度统计值，分析试卷编制形式和抽样选取的考核知识点能否充分体现教学目标，是否符合教学大纲和试卷蓝图的要求；题型、题量和试题难度的设计是否能达到考核目的；命题的内容是否适当。
3.反思与总结。教师通过考试质量分析对自己的教学活动、教学设计、教学水平、教学效果进行审视，反思教学得失，提出建议和改进措施。
如何把试卷的定量分析与定性分析结合起来，如何将计算机自动分析与任课教师个案分析在时间维、空间维和表达维上顺畅地衔接起来，如何将按班进行的考试质量分析与按课程进行的汇总分析在操作层面上有机地结合起来，需要有一个科学的程序设定和合理的考试质量分析表达形式。笔者根据系统设置要求和质量分析目标，经过实践摸索与改进，设计了由系统和分析人共同完成的按班分析的考试质量分析表和按课程汇总分析的考试质量分析表（表略）。
虽说考试质量分析是教学质量监控的重要环节之一，但考试质量分析毕竟是事后监控，如果考试的目的、方法本身出了问题，不能与人才培养目标相适应，不能促进学生创新能力和应用能力的发展，即便试卷的质量参数显示很好，也不能算是一次高质量的考试，充其量只能算是一个成功的应试教育考试。提高教育考试质量的前提是要进行考试改革，采用与人才培养规格相适应的考试方式，特别是在以培养应用型人才为主的高校，更要通过考试促进学生应用能力的提高。教学管理者必须在建立考试质量分析系统的同时，注重推动考试改革研究和实践，从源头抓起，关注事前监控，充分发挥教育考试的作用，全面提高教育教学质量。
参考文献
［1]胡中锋. 教育测量与评价［M]．广州：广东高等教育出版社，1999：31-55．
［2]张敏强. 教育测量学［M]．北京：人民教育出版社，1998：108-119．
(责任编辑汪再非)
Quality analysis system of university tests based on teaching management information platform
ZHANG Qian, WANG Li, DING Guoyong
(Dean’s Office, Nanjing Audit University, Nanjing, Jiangsu 210029, China)Abstract:Test quality analysis is an essential tool to monitoring the teaching quality at universities, as well as providing necessary information concerning the reflection and evaluation of teaching quality. Due to the limited means in the past, large quantity of firsthand data cannot be transformed into effective information for test quality analysis. Based on the operation layer of teaching management and quality monitoring, the paper proposes a managementtargeted framework, an informationflow structure, quantitative analysis standards, a qualityanalysis module and an informationfeedback system for test quality analysis, thus developing for teachers, managerial personnel and policymakers a test quality analysis system based on teaching management information platform.
Key words: management information;test;quality analysis;system framework;quality monitoring