论文部分内容阅读
[摘 要]历经3年研发和4年规模应用，南方医科大学形成了包含228门课程、36万道试题的大型题库，实施了975场近20万人次的网络考试，网考人次已经占学校学期总考核人次的50%以上，题库被全国15家高校和医院所采用。该成果被单位教师誉为“最成功的教育信息化系统”，它创建了一种多方促进、协作共赢的教育管理模式，开辟了一条生命力、拓展力较强的教学改革新途径，构建了一个多向、全程、高效的评价体系。
[关键词]网络题库 网络考试 教学改革
[中图分类号] G434 [文献标识码] A [文章编号] 2095-3437（2013）23-0109-03
考核不仅是指挥棒，也是任何类型的教学都很难逾越的环节。考核不仅能检验学习、教学效果，对促进教学改革更具有“四两拨千斤”的作用。
一、最成功的教学信息化系统
（一）历史
南方医科大学课程考核改革研究历史可以追溯到1991年。当时解放军总后卫生部资助20万元，先后组织4所军医大及10所医高专200多名专家，历时11年建成了40门课程、10万道试题的单机版题库。该成果曾获军队教学成果二等奖，是教育部面向21世纪教改课题的重点项目。但随着计算机网络技术的发展和院校规模的不断扩大，单机版考试系统已不能解决远程考试和多校区统一考试问题。因此，该校在2005年广东省高等教育教学改革工程项目《网络医学考试系统关键技术研究及系统实现》（基金号：BKJGZZ2005016）的资助下，开始研发网络版题库与考试系统，着重攻关网络考试的系列关键技术。经过3年多时间，历经2个版本，最终于2008年10月开发出了基于教育测量学的新型“考易网络题库与考试评价系统”，并于2011年获广东省教学成果培育项目支持。
（二）现状
该系统自推广运行以来，没有开展过一次专门的培训，没有允诺过任何资金支持，也没有成型的系统指导手册。然而仅仅经过半年多的工作引导，在QQ工作群内400多位教师的积极主动参与、相互帮助下，至2012年12月就建成了包含200多门课程、36万道试题的大型题库，涉及医学、英语、计算机、管理学、法学、政治经济学、马列主义等多个学科课程，并实施了975场近20万人次的网络考试。每学期网考人次已占到学校总考核人次的50%以上，且被全国近20家高校和医院主动引入使用。
取得上述成绩，究其原因，与系统简洁易用的流程、细致完善的分析统计功能以及开放自由的网络特性密不可分。该系统被教师誉为学校教育信息化改革中“最成功的成果”。
二、系统组成与特点
（一）动态成长、通用性强的题库系统
以三级主题词表达课程知识体系来规范组织试题，摆脱具体教材限制；以“是否串题、是否主客观”双维度解构各类复杂题型，具备较强的题型扩展能力（创建了A3/4X等题型）；多项参数并行支持，适应不同教育层次；支持图片、音視频等媒体，可有效拓展考核能力范畴；各个环节的试题编辑均可直接底层保存，网考实测参数能促进试题自动进行质量分级，系统能实现动态优化，生命周期得到有效延长。
（二）规范高效、拓展性强的网考系统
结构化随机、跨课程、试卷合并与重启以及手工等多种组卷技术方式与三级试卷网审机制，保证了考务工作全程规范、高效。单向逐题/整卷/逐串题限时、双向整卷限时、一人一卷与即显答案的形成性考核等方式，能满足不同类型的考核要求。IP限制、密码保护、题型题序随机等防作弊措施，保障了网考安全、公正。
（三）以教育测量学为指导的质量评价体系
考前预测分析以及考后自动形成的试题、试卷、考生分析报告，生动反映了试题、考试质量和学习效果，能有力促进教学相长，充分发挥了考试在教学中的诊断与反馈作用。
三、主要解决的教学问题
1.创新了教学改革思路。创立了有较强生命力与拓展力的考核改革模式。 考核工作具有指挥棒作用，以考促教能以较少的投入实现教学质量、学习效果的较大提高。网考让题库有了内生（自我优化）、外在（使用过程的优化）的生命力（根据实测测量学参数可以实现自动优化），多项信息技术不仅可以让传统的考核方式效果得到深化加固，还可以拓展出独具特色的新型考核方式。
2.形成性、综合性考核与多媒体试题，能促进自主学习与技能、职业道德的培养。
3.便捷、亲和的网络化运作极大缓解了教学工作压力。以网考促进题库建设和考核质量改革，能以较少投入取得非常显著的成效，这是管理者和使用者最大的感受。这彻底改变了以往学校求着教师建题库的历史，考核质量监控得到质的改变。
4.教学智慧得到继承和优化，有效避免了低水平重复建设。试题的增、删、改等操作以及试卷设计思路、课程考核方式等都可以得到历史的继承，这极大方便了接手教师顺利开展工作并进一步完善。
5.三套分析报告，解决了传统考试“不会做”、“做不了”的教育测量学的统计分析难题，有力促进了人才培养质量。
6.实现低碳环保考试。4年来学校共节约印刷费36万元，纸240万张，等于节省木材59.4立方米，保护林地30多亩，节水1190多吨。
在该项目支持下，学校很早就针对临床医学专业开展三阶段综合考试。学校临床专业学生执业医师考试首次通过率由2006年的全国第43名跃居2011年的第5名，近年多次的CET4平均成绩比211院校高出30多分，见图1。
四、解决教学问题的方法
（一）将网络化理念融入研发过程
构建开放的应用环境，用户通过网络工具，即可随时调用系统各项功能；组建网络化管理环境，制定规范标准，完善工作流程，实现自主管理。利用分级授权，实名安全管理，对网络质量进行实时监控。教学智慧也通过课程建设人员的更替得到继承与优化。2000道试题的题库，3位教师在1周内即可完成，极大减轻了教学及管理工作压力。 （二）以信息化技术实现人本服务
课程、试题、组卷、审核、监考、阅卷及成绩分析等简洁、易用、亲和的系统流程与界面，试题自动底层更新，多种媒体支持，多样化的组卷、考核、防作弊技术与自主备份、断点续考等系列人性化功能，满足了不同学科、不同院校的需求，让广大师生“会用”、“想用”、“爱用”。
（三）以测量学理论指导考务工作
通过考前预测对试题赋分、题型比例、难度、广度和认知类比例等的审核，保证考试科学、有效。考后对作答时间、标准差、难度、信度、效度、区分度等多项参数分析，反馈教学、提高教学质量。结构化随机组卷、等效试卷以及形成性考核，能保证考试客观，有效巩固学习效果，促进学生全面掌握知识。
（四）以革新考试方法推动教学改革
单向逐题/整卷/逐串题限时和题型题序随机等措施，使评价更加客观科学；跨课程组卷实现综合性考试，解决了以器官或系统为中心的课程整合教改效果评价问题；一人一卷、即显答案的形成性考核大大强化了学习及课程考核评价效果；多媒体试题的支持，将考试的认知领域延伸到精神运动领域，为进一步深化教学改革打下坚实基础。
（五）重验经典参数，指导网考改革
通过对我校多个学科、393场、86795人次的网考试卷分析，试卷平均分、标准差、信度、区分度、难度等参数均与经典教育测量指标有所不同。因此，对高校学生等经过筛选后的群体，应用经典教育测量学理论进行分析和判断时，必须进行适度的修正。各项指标修正后结果如下：
1.试卷的平均分正常情况下应该大于52.87，小于86.54。
2.试卷的标准差应该大于4.61，小于14.99。
3.试卷的信度应该大于0.62。
4.试卷的区分度应该大于0.13。
5.试卷的难度应该控制在大于0.51，小于0.84之间。
五、成果的创新点
（一）创建了一种多方促进、协作共赢的教育管理模式
凭借完善的功能和极强的易操作性，成果应用3年来，有451名教师主动参与建设，形成了教师愿意，学生乐意，管理者满意的良性循环。网络考试与题库建设互相驱动，共同促进系统完善。优化继承教学智慧，渐进推动考核质量。
（二）开辟了一条生命力、拓展力较强的教学改革新途径
实现了系列考核技术创新，如用三级主题词表达知识结构，突破教材局限；以“是否串题、是否主客观”双维解构并自由拓展题型；试题动态优化与质量分级赋予题库较强生命力；创建结构化随机、跨课程等5种组卷方式和单向逐题/整卷限时、一人一卷、逐串题限时等6种考试模式。通过改革教学中必须的考核环节，提高教学质量，效果显著。
（三）构建了一个多向、全程、高效的评价体系
自动生成的三套分析报告，为判断试题、试卷质量及教学效果、学习质量提供了丰富的定性、定量数据。特有的形成性、综合性考核模式对激发学习主动性，促进教学有较强的反馈效果。
六、应用效果
（一）应用
应用效果：网络问卷调查数据显示，参与建设的教师有年轻教师，也有老教授，其普遍认为，系统简洁易用，非常贴合一线教师工作实际与教学规律，确实可以在试卷组建、审核、管理以及考试等流程节省大量的人力与财力。
应用支持：在系统应用过程中，采取了如下措施。1.发文规定国家执业医师资格考试规定的17门课程必须创建题库。2.教师送审传统纸质试卷时，考试中心根据题型建议网考尝试，甚至帮助教师录入试题（需30分钟左右时间）、展开考试。3.根据课程学时、最低题量、网考次数标准，进行了一次题库网考建设先进课程评比，并为一批课程认定了学时，发放了课酬。4.创建工作QQ群，方便技术支持或用户自助交流。5.制定相关文件，将题库和网考建设标准化管理。如《关于加强课程网络题库与考试系统建设的通知》、《南方医科大学网络题库建设与考试规范》、《关于加强课程形成性考核管理的通知》。
（二）推广情况
先后举办了3次全国性的“网络题库建设与网络考试研讨会”，参会人员涉及90多家单位，150多名代表，并在2010年杭州国际医学教育研讨会、四川大学华西医学中心组织的2010年全国GMER会议、第五届“东西方联盟”（East-WestAlliance，EWA）2011年会、全国省（区、市）属高等医学院校协作会2010（承德）年会和2012（郑州）年会、全国高等医学教育学会教学管理研究会2012（锦州）年会、全国高等医学教育学会教育科学研究会学术2012（昆明）年会、2012年上海“國际医学院校联盟第三届亚太会议”、2012年中国高等教育学会主办的“中美医学教育论坛”上介绍经验、推广交流，得到全国同行及专家的高度肯定和赞许。2012年3月受邀专程到国家医学考试中心演示，并得到一致肯定，认为非常适合院校及医疗单位的考核使用。
网络题库与考试系统的运用也被《光明日报》、广东新闻网、四川大学华西医学院、海南医学院、遵义医学院、滨州医学院、广西医科大学等多家媒体单位报导。
（三）同行与其他单位使用情况
目前已有四川大学华西医学院、第四军医大学、上海交通大学医学院、解放军总医院、福建医科大学、广西医科大学、成都中医药大学、新疆医科大学、温州医学院、遵义医学院、海南医学院、泸州医学院、滨州医学院、齐齐哈尔医学院、右江民族医学院等近20家医科院校和医院使用该系统。
[ 参 考 文 献 ]
[1] 文民刚，席卫文，张春辉，张立力.医学院校网络考试系统的功能性研究[J].中国高等医学教育，2010（12）：4-5.
[2] 席卫文，张春辉，张立力，胡桂，文民刚.医学网络题库与考试系统的研究与实现[J].中国高等医学教育，2012（2）：27-28.
[3] 张春辉，席卫文，朱汉祎，耿景海，王飞，文民刚.网络化考试大规模实施实践分析[J].大学教育，2012（7）：24-25.
[4] 张春辉，陈戈煜，席卫文，胡桂，文民刚.医科院校考试改革效果的实证分析[J].中华医学教育探索杂志，2012（11）：415-418.
[5] 张春辉，文民刚，席卫文，陈戈煜，胡桂.网络化医学题库考试系统之标准化探讨[J].中国高等医学教育，2012（8）：16，57.
[6] 耿景海，席卫文，张春辉，文民刚.医学网络题库与考试系统利弊分析——基于网络考试的事实经验[J].西北医学教育，2012（1）：159-161.
[7] 张春辉，席卫文，陈戈煜，文民刚.卓越医学本科教育的课程考核方式改革研究[J].中国高等医学教育，2011（1）：22-24.
[8] 文民刚，张春辉.南方医科大学近五届临床医学专业毕业生首次执业医师资格考试通过率情况分析[J].南方医科大学学报，2010（9）：2219.
[责任编辑：陈 明]
[关键词]网络题库 网络考试 教学改革
[中图分类号] G434 [文献标识码] A [文章编号] 2095-3437（2013）23-0109-03
考核不仅是指挥棒，也是任何类型的教学都很难逾越的环节。考核不仅能检验学习、教学效果，对促进教学改革更具有“四两拨千斤”的作用。
一、最成功的教学信息化系统
（一）历史
南方医科大学课程考核改革研究历史可以追溯到1991年。当时解放军总后卫生部资助20万元，先后组织4所军医大及10所医高专200多名专家，历时11年建成了40门课程、10万道试题的单机版题库。该成果曾获军队教学成果二等奖，是教育部面向21世纪教改课题的重点项目。但随着计算机网络技术的发展和院校规模的不断扩大，单机版考试系统已不能解决远程考试和多校区统一考试问题。因此，该校在2005年广东省高等教育教学改革工程项目《网络医学考试系统关键技术研究及系统实现》（基金号：BKJGZZ2005016）的资助下，开始研发网络版题库与考试系统，着重攻关网络考试的系列关键技术。经过3年多时间，历经2个版本，最终于2008年10月开发出了基于教育测量学的新型“考易网络题库与考试评价系统”，并于2011年获广东省教学成果培育项目支持。
（二）现状
该系统自推广运行以来，没有开展过一次专门的培训，没有允诺过任何资金支持，也没有成型的系统指导手册。然而仅仅经过半年多的工作引导，在QQ工作群内400多位教师的积极主动参与、相互帮助下，至2012年12月就建成了包含200多门课程、36万道试题的大型题库，涉及医学、英语、计算机、管理学、法学、政治经济学、马列主义等多个学科课程，并实施了975场近20万人次的网络考试。每学期网考人次已占到学校总考核人次的50%以上，且被全国近20家高校和医院主动引入使用。
取得上述成绩，究其原因，与系统简洁易用的流程、细致完善的分析统计功能以及开放自由的网络特性密不可分。该系统被教师誉为学校教育信息化改革中“最成功的成果”。
二、系统组成与特点
（一）动态成长、通用性强的题库系统
以三级主题词表达课程知识体系来规范组织试题，摆脱具体教材限制；以“是否串题、是否主客观”双维度解构各类复杂题型，具备较强的题型扩展能力（创建了A3/4X等题型）；多项参数并行支持，适应不同教育层次；支持图片、音視频等媒体，可有效拓展考核能力范畴；各个环节的试题编辑均可直接底层保存，网考实测参数能促进试题自动进行质量分级，系统能实现动态优化，生命周期得到有效延长。
（二）规范高效、拓展性强的网考系统
结构化随机、跨课程、试卷合并与重启以及手工等多种组卷技术方式与三级试卷网审机制，保证了考务工作全程规范、高效。单向逐题/整卷/逐串题限时、双向整卷限时、一人一卷与即显答案的形成性考核等方式，能满足不同类型的考核要求。IP限制、密码保护、题型题序随机等防作弊措施，保障了网考安全、公正。
（三）以教育测量学为指导的质量评价体系
考前预测分析以及考后自动形成的试题、试卷、考生分析报告，生动反映了试题、考试质量和学习效果，能有力促进教学相长，充分发挥了考试在教学中的诊断与反馈作用。
三、主要解决的教学问题
1.创新了教学改革思路。创立了有较强生命力与拓展力的考核改革模式。 考核工作具有指挥棒作用，以考促教能以较少的投入实现教学质量、学习效果的较大提高。网考让题库有了内生（自我优化）、外在（使用过程的优化）的生命力（根据实测测量学参数可以实现自动优化），多项信息技术不仅可以让传统的考核方式效果得到深化加固，还可以拓展出独具特色的新型考核方式。
2.形成性、综合性考核与多媒体试题，能促进自主学习与技能、职业道德的培养。
3.便捷、亲和的网络化运作极大缓解了教学工作压力。以网考促进题库建设和考核质量改革，能以较少投入取得非常显著的成效，这是管理者和使用者最大的感受。这彻底改变了以往学校求着教师建题库的历史，考核质量监控得到质的改变。
4.教学智慧得到继承和优化，有效避免了低水平重复建设。试题的增、删、改等操作以及试卷设计思路、课程考核方式等都可以得到历史的继承，这极大方便了接手教师顺利开展工作并进一步完善。
5.三套分析报告，解决了传统考试“不会做”、“做不了”的教育测量学的统计分析难题，有力促进了人才培养质量。
6.实现低碳环保考试。4年来学校共节约印刷费36万元，纸240万张，等于节省木材59.4立方米，保护林地30多亩，节水1190多吨。
在该项目支持下，学校很早就针对临床医学专业开展三阶段综合考试。学校临床专业学生执业医师考试首次通过率由2006年的全国第43名跃居2011年的第5名，近年多次的CET4平均成绩比211院校高出30多分，见图1。
四、解决教学问题的方法
（一）将网络化理念融入研发过程
构建开放的应用环境，用户通过网络工具，即可随时调用系统各项功能；组建网络化管理环境，制定规范标准，完善工作流程，实现自主管理。利用分级授权，实名安全管理，对网络质量进行实时监控。教学智慧也通过课程建设人员的更替得到继承与优化。2000道试题的题库，3位教师在1周内即可完成，极大减轻了教学及管理工作压力。 （二）以信息化技术实现人本服务
课程、试题、组卷、审核、监考、阅卷及成绩分析等简洁、易用、亲和的系统流程与界面，试题自动底层更新，多种媒体支持，多样化的组卷、考核、防作弊技术与自主备份、断点续考等系列人性化功能，满足了不同学科、不同院校的需求，让广大师生“会用”、“想用”、“爱用”。
（三）以测量学理论指导考务工作
通过考前预测对试题赋分、题型比例、难度、广度和认知类比例等的审核，保证考试科学、有效。考后对作答时间、标准差、难度、信度、效度、区分度等多项参数分析，反馈教学、提高教学质量。结构化随机组卷、等效试卷以及形成性考核，能保证考试客观，有效巩固学习效果，促进学生全面掌握知识。
（四）以革新考试方法推动教学改革
单向逐题/整卷/逐串题限时和题型题序随机等措施，使评价更加客观科学；跨课程组卷实现综合性考试，解决了以器官或系统为中心的课程整合教改效果评价问题；一人一卷、即显答案的形成性考核大大强化了学习及课程考核评价效果；多媒体试题的支持，将考试的认知领域延伸到精神运动领域，为进一步深化教学改革打下坚实基础。
（五）重验经典参数，指导网考改革
通过对我校多个学科、393场、86795人次的网考试卷分析，试卷平均分、标准差、信度、区分度、难度等参数均与经典教育测量指标有所不同。因此，对高校学生等经过筛选后的群体，应用经典教育测量学理论进行分析和判断时，必须进行适度的修正。各项指标修正后结果如下：
1.试卷的平均分正常情况下应该大于52.87，小于86.54。
2.试卷的标准差应该大于4.61，小于14.99。
3.试卷的信度应该大于0.62。
4.试卷的区分度应该大于0.13。
5.试卷的难度应该控制在大于0.51，小于0.84之间。
五、成果的创新点
（一）创建了一种多方促进、协作共赢的教育管理模式
凭借完善的功能和极强的易操作性，成果应用3年来，有451名教师主动参与建设，形成了教师愿意，学生乐意，管理者满意的良性循环。网络考试与题库建设互相驱动，共同促进系统完善。优化继承教学智慧，渐进推动考核质量。
（二）开辟了一条生命力、拓展力较强的教学改革新途径
实现了系列考核技术创新，如用三级主题词表达知识结构，突破教材局限；以“是否串题、是否主客观”双维解构并自由拓展题型；试题动态优化与质量分级赋予题库较强生命力；创建结构化随机、跨课程等5种组卷方式和单向逐题/整卷限时、一人一卷、逐串题限时等6种考试模式。通过改革教学中必须的考核环节，提高教学质量，效果显著。
（三）构建了一个多向、全程、高效的评价体系
自动生成的三套分析报告，为判断试题、试卷质量及教学效果、学习质量提供了丰富的定性、定量数据。特有的形成性、综合性考核模式对激发学习主动性，促进教学有较强的反馈效果。
六、应用效果
（一）应用
应用效果：网络问卷调查数据显示，参与建设的教师有年轻教师，也有老教授，其普遍认为，系统简洁易用，非常贴合一线教师工作实际与教学规律，确实可以在试卷组建、审核、管理以及考试等流程节省大量的人力与财力。
应用支持：在系统应用过程中，采取了如下措施。1.发文规定国家执业医师资格考试规定的17门课程必须创建题库。2.教师送审传统纸质试卷时，考试中心根据题型建议网考尝试，甚至帮助教师录入试题（需30分钟左右时间）、展开考试。3.根据课程学时、最低题量、网考次数标准，进行了一次题库网考建设先进课程评比，并为一批课程认定了学时，发放了课酬。4.创建工作QQ群，方便技术支持或用户自助交流。5.制定相关文件，将题库和网考建设标准化管理。如《关于加强课程网络题库与考试系统建设的通知》、《南方医科大学网络题库建设与考试规范》、《关于加强课程形成性考核管理的通知》。
（二）推广情况
先后举办了3次全国性的“网络题库建设与网络考试研讨会”，参会人员涉及90多家单位，150多名代表，并在2010年杭州国际医学教育研讨会、四川大学华西医学中心组织的2010年全国GMER会议、第五届“东西方联盟”（East-WestAlliance，EWA）2011年会、全国省（区、市）属高等医学院校协作会2010（承德）年会和2012（郑州）年会、全国高等医学教育学会教学管理研究会2012（锦州）年会、全国高等医学教育学会教育科学研究会学术2012（昆明）年会、2012年上海“國际医学院校联盟第三届亚太会议”、2012年中国高等教育学会主办的“中美医学教育论坛”上介绍经验、推广交流，得到全国同行及专家的高度肯定和赞许。2012年3月受邀专程到国家医学考试中心演示，并得到一致肯定，认为非常适合院校及医疗单位的考核使用。
网络题库与考试系统的运用也被《光明日报》、广东新闻网、四川大学华西医学院、海南医学院、遵义医学院、滨州医学院、广西医科大学等多家媒体单位报导。
（三）同行与其他单位使用情况
目前已有四川大学华西医学院、第四军医大学、上海交通大学医学院、解放军总医院、福建医科大学、广西医科大学、成都中医药大学、新疆医科大学、温州医学院、遵义医学院、海南医学院、泸州医学院、滨州医学院、齐齐哈尔医学院、右江民族医学院等近20家医科院校和医院使用该系统。
[ 参 考 文 献 ]
[1] 文民刚，席卫文，张春辉，张立力.医学院校网络考试系统的功能性研究[J].中国高等医学教育，2010（12）：4-5.
[2] 席卫文，张春辉，张立力，胡桂，文民刚.医学网络题库与考试系统的研究与实现[J].中国高等医学教育，2012（2）：27-28.
[3] 张春辉，席卫文，朱汉祎，耿景海，王飞，文民刚.网络化考试大规模实施实践分析[J].大学教育，2012（7）：24-25.
[4] 张春辉，陈戈煜，席卫文，胡桂，文民刚.医科院校考试改革效果的实证分析[J].中华医学教育探索杂志，2012（11）：415-418.
[5] 张春辉，文民刚，席卫文，陈戈煜，胡桂.网络化医学题库考试系统之标准化探讨[J].中国高等医学教育，2012（8）：16，57.
[6] 耿景海，席卫文，张春辉，文民刚.医学网络题库与考试系统利弊分析——基于网络考试的事实经验[J].西北医学教育，2012（1）：159-161.
[7] 张春辉，席卫文，陈戈煜，文民刚.卓越医学本科教育的课程考核方式改革研究[J].中国高等医学教育，2011（1）：22-24.
[8] 文民刚，张春辉.南方医科大学近五届临床医学专业毕业生首次执业医师资格考试通过率情况分析[J].南方医科大学学报，2010（9）：2219.
[责任编辑：陈 明]