论文部分内容阅读
摘要： 大学英语试题库测试系统数据分析是大学英语教学和科研工作中的一项重要内容，通过分析试卷的易度值，或者难度系数、区分度和正态性检验，可以了解命题质量和教学效果，为试题库科学地筛选、补充、修订和配置试题提供科学准确的数据参考。本研究以三级快速阅读试题的难度、区分度、正态性分布分析为例对试卷信度和效度进行分析。
关键词： 大学英语 三级快速阅读题 难度 区分度 正态性分布
1.引言
大学英语试题库测试系统数据分析是大学英语教学和科研工作中的一项重要内容，通过分析试卷的易度值（facility value），或者难度系数（coefficient of difficulty）、区分度（dipartite degree）和正态性检验（test of normality），可以了解出题质量和教学效果。它既可以作为教学评估的手段，其本身又是教学研究的一个重要方面，对提高教学质量具有十分重要的指导意义。
2.研究的依据
所谓题库就是以一定的教育测量理论为依据，按照一定的规范编制，收集的有相当数量和较高质量、附有试题性能参数、并经过分类编码的大批题目的科学集合，其理论基础主要来自于经典测量理论。这种理论经过几十年的实践发展得已相当成熟，应用十分广泛。
在试题库建设中，不进行题目分析，不分析试题的信度、效度，就不能科学地筛选、补充、修订和配置试题。效度的关键就在于试题设计的科学性，即真正按照考试大纲的要求把最典型、最富代表性的内容编入试卷，并做到题量合理，比例适当，内容与形式统一，使试题的难度适合测试者的实际水平。
为了了解题目的信度和效度，我们必须掌握试题的易度值、区分度，并对试题进行正态性检验。
2.1易度值（或难度系数）
所谓易度值，就是指题目的难易程度，或说测试的难易程度，常以试题的平均正确率作为易度值的指标。难度系数与易度值成反比例关系。
易度值P在0至1之间。P>0.8时，试题太易；P<0.2时，试题太难。一份试卷应该由不同难度按一定比例组成。一般地说，P>0.8、P<0.2的试题各占10%；P=0.2—0.4和P＝0.6—0.８的试题各占20％；P=0.4—0.6的中等难度试题应占60%。整套试卷平均易度值在0.4—0.6之间。
（1）客观性试题易度值P（这时也称通过率）计算公式：P=K/N（K为答对该题的人数，N为参加测验的总人数）（2）主观性试题难度P计算公式：P=X/M（X为试题平均得分；M为试题满分）（3）适用于主、客观试题的计算公式：P=（PH+PL）/2（PH、PL分别为试题针对高分组和低分组考生的难度值）。在大群体标准化中，多采用第三个计算公式。具体步骤为:①将考生的总分由高至低排列；②从最高分开始向下取全部试卷的27%作为高分组；③从最低分开始向上取全部试卷的27%作为低分组；④按上面的公式计算。
2.2区分度
所谓区分度是指测验对考生实际水平的区分程度或鉴赏能力。它是题目质量和测验质量的一个重要指标。一般要求试题的区分度在0.3以上。
区分度D在-1至+1之间。D≥0.4时，说明该题目能起到很好的区分作用；D≤0.2时，说明该题目的区分性很差。D值为负数时，说明试题或答案有问题。
（1）客观性试题区分度D的计算公式为D=PH-PL（PH、PL分别为试题高分组和低分组考生的难度值）。（2）主观试题（非选择题）区分度D的计算公式为D=（XH-XL）/N（H-L）（XH表示接受测验的高分段学生的总得分数，XL表示接受测验的低分段学生的总得分数，N表示接受测验的学生总数，H表示该题的最高得分，L表示该题的最低得分）。
整个试卷的区分度，是所有试题区分度的平均值。
2.3成绩分布的正态性检验
计算出来的区分度界于0.30-0.39之间，或高于0.39，就表明同质考生的考试成绩分布符合正态分布。具体指标如下：
从经典教育测量理论来分析，在此次测试的快速阅读试题中，难度系数在0.2到0.4的试题所占比例为10%，接近理想数据。难度系数大于0.8的试题所占比值为10%，这个数据也是符合预期的。但是难度系数小于0.2的试题所占比例为60%，这个比例过大，致使试题整体难度降低。难度系数在0.6到0.8的试题所占比例为零，而在理想命题状态下，此期望数值应为20%。特别是难度系数在0.4到0.6之间的试题所占比例仅为20%，远远低于60%这个期望数据值。全部试题难度系数的平均值仅为0.289，也远低于0.4到0.6这个期望系数区间。数据显示，此次快速阅读试题偏简单，在试题库中应属于大学英语二级到三级之间难度的试题。
从区分度数据分析，此次测试题中区分度大于等于0.4的试题占全部试题的90%，这些试题区分度非常良好，可以在试题库中予以留用。但是有10%的试题区分度如需继续留用，必须予以修改。具体而言，快速阅读试题中的第10小题的题干“President Bush has signed into law an emergency spending plan”就是几乎照搬原文最后一句话：“President Bush has signed into law a 40，000 dollar emergency spending plan.”学习者在不理解文章意思的情况下也可以找到上述信息。从命题角度而言，可以适当增加这个题目的信息承载量，更好地测试学习者对文章的理解程度。
从试题的错误率分析，此次快速阅读测试题中第二小题和第三小题的错误率是最高的。而这两个小题的答案都是“Not Given”，也就是说在文章中找不到题干中的信息，是信息缺失类试题。这类试题往往具备这样的特征：题干中的某些内容在原文中没有提及；或者题干中涉及的范围小于原文的范围，也就是更具体；题干是某人的主观思想（目标、目的、想法、愿望、保证、发誓），而原文陈述的是事实。以第二小题为例，“There were children in the day-care center of the World Trade Center when the terrorist attacks took place.”这正是主观思想，而不是文章陈述的事实内容。因此，信息缺失类快速阅读试题不仅能测试学习者的理解能力，还能测试学习者的逻辑思维能力，应当配置在大学英语试题库当中。
4.结论
我们认为，出拟试题，组建题库只是一个载体。在题库建设过程中，要进行一系列教学改革的研究，并藉此加强教学管理，规范教师的教学行为，提高教学质量。而对大学英语测试系统进行多角度数据分析与研究正是教学改革的一个方面，它能够帮助教师了解教学水平，提高命题质量，从而提高教学水平。可以从以下三点总结此项研究的深刻意义。其一，大学英语试题库测试系统数据分析可以帮助提供每套试题易度值等相关参数，从而了解出题质量。其二，分析得到的数据可以帮助教师了解教学效果，特别是发现教学中的薄弱环节，从而有的放矢地进行教学。其三，分析得到的数据是大学英语教师进行教改、科研不可多得的参考依据。
参考文献：
［1］励景编著.考试命题与试卷分析［M］.浙江宁波出版社，2002.
［2］白晓明，陈国明，叶成华等编著.考试命题与试卷分析［M］.浙江宁波出版社，2003.
［3］汪美琼.大学英语试卷分析探析［J］.青海师专学报（教育科学），2008，58卷第2期.
［4］曾凡贵编著.大学英语教学与研究［M］.湖南大学出版社，2004.
关键词： 大学英语 三级快速阅读题 难度 区分度 正态性分布
1.引言
大学英语试题库测试系统数据分析是大学英语教学和科研工作中的一项重要内容，通过分析试卷的易度值（facility value），或者难度系数（coefficient of difficulty）、区分度（dipartite degree）和正态性检验（test of normality），可以了解出题质量和教学效果。它既可以作为教学评估的手段，其本身又是教学研究的一个重要方面，对提高教学质量具有十分重要的指导意义。
2.研究的依据
所谓题库就是以一定的教育测量理论为依据，按照一定的规范编制，收集的有相当数量和较高质量、附有试题性能参数、并经过分类编码的大批题目的科学集合，其理论基础主要来自于经典测量理论。这种理论经过几十年的实践发展得已相当成熟，应用十分广泛。
在试题库建设中，不进行题目分析，不分析试题的信度、效度，就不能科学地筛选、补充、修订和配置试题。效度的关键就在于试题设计的科学性，即真正按照考试大纲的要求把最典型、最富代表性的内容编入试卷，并做到题量合理，比例适当，内容与形式统一，使试题的难度适合测试者的实际水平。
为了了解题目的信度和效度，我们必须掌握试题的易度值、区分度，并对试题进行正态性检验。
2.1易度值（或难度系数）
所谓易度值，就是指题目的难易程度，或说测试的难易程度，常以试题的平均正确率作为易度值的指标。难度系数与易度值成反比例关系。
易度值P在0至1之间。P>0.8时，试题太易；P<0.2时，试题太难。一份试卷应该由不同难度按一定比例组成。一般地说，P>0.8、P<0.2的试题各占10%；P=0.2—0.4和P＝0.6—0.８的试题各占20％；P=0.4—0.6的中等难度试题应占60%。整套试卷平均易度值在0.4—0.6之间。
（1）客观性试题易度值P（这时也称通过率）计算公式：P=K/N（K为答对该题的人数，N为参加测验的总人数）（2）主观性试题难度P计算公式：P=X/M（X为试题平均得分；M为试题满分）（3）适用于主、客观试题的计算公式：P=（PH+PL）/2（PH、PL分别为试题针对高分组和低分组考生的难度值）。在大群体标准化中，多采用第三个计算公式。具体步骤为:①将考生的总分由高至低排列；②从最高分开始向下取全部试卷的27%作为高分组；③从最低分开始向上取全部试卷的27%作为低分组；④按上面的公式计算。
2.2区分度
所谓区分度是指测验对考生实际水平的区分程度或鉴赏能力。它是题目质量和测验质量的一个重要指标。一般要求试题的区分度在0.3以上。
区分度D在-1至+1之间。D≥0.4时，说明该题目能起到很好的区分作用；D≤0.2时，说明该题目的区分性很差。D值为负数时，说明试题或答案有问题。
（1）客观性试题区分度D的计算公式为D=PH-PL（PH、PL分别为试题高分组和低分组考生的难度值）。（2）主观试题（非选择题）区分度D的计算公式为D=（XH-XL）/N（H-L）（XH表示接受测验的高分段学生的总得分数，XL表示接受测验的低分段学生的总得分数，N表示接受测验的学生总数，H表示该题的最高得分，L表示该题的最低得分）。
整个试卷的区分度，是所有试题区分度的平均值。
2.3成绩分布的正态性检验
计算出来的区分度界于0.30-0.39之间，或高于0.39，就表明同质考生的考试成绩分布符合正态分布。具体指标如下：
从经典教育测量理论来分析，在此次测试的快速阅读试题中，难度系数在0.2到0.4的试题所占比例为10%，接近理想数据。难度系数大于0.8的试题所占比值为10%，这个数据也是符合预期的。但是难度系数小于0.2的试题所占比例为60%，这个比例过大，致使试题整体难度降低。难度系数在0.6到0.8的试题所占比例为零，而在理想命题状态下，此期望数值应为20%。特别是难度系数在0.4到0.6之间的试题所占比例仅为20%，远远低于60%这个期望数据值。全部试题难度系数的平均值仅为0.289，也远低于0.4到0.6这个期望系数区间。数据显示，此次快速阅读试题偏简单，在试题库中应属于大学英语二级到三级之间难度的试题。
从区分度数据分析，此次测试题中区分度大于等于0.4的试题占全部试题的90%，这些试题区分度非常良好，可以在试题库中予以留用。但是有10%的试题区分度如需继续留用，必须予以修改。具体而言，快速阅读试题中的第10小题的题干“President Bush has signed into law an emergency spending plan”就是几乎照搬原文最后一句话：“President Bush has signed into law a 40，000 dollar emergency spending plan.”学习者在不理解文章意思的情况下也可以找到上述信息。从命题角度而言，可以适当增加这个题目的信息承载量，更好地测试学习者对文章的理解程度。
从试题的错误率分析，此次快速阅读测试题中第二小题和第三小题的错误率是最高的。而这两个小题的答案都是“Not Given”，也就是说在文章中找不到题干中的信息，是信息缺失类试题。这类试题往往具备这样的特征：题干中的某些内容在原文中没有提及；或者题干中涉及的范围小于原文的范围，也就是更具体；题干是某人的主观思想（目标、目的、想法、愿望、保证、发誓），而原文陈述的是事实。以第二小题为例，“There were children in the day-care center of the World Trade Center when the terrorist attacks took place.”这正是主观思想，而不是文章陈述的事实内容。因此，信息缺失类快速阅读试题不仅能测试学习者的理解能力，还能测试学习者的逻辑思维能力，应当配置在大学英语试题库当中。
4.结论
我们认为，出拟试题，组建题库只是一个载体。在题库建设过程中，要进行一系列教学改革的研究，并藉此加强教学管理，规范教师的教学行为，提高教学质量。而对大学英语测试系统进行多角度数据分析与研究正是教学改革的一个方面，它能够帮助教师了解教学水平，提高命题质量，从而提高教学水平。可以从以下三点总结此项研究的深刻意义。其一，大学英语试题库测试系统数据分析可以帮助提供每套试题易度值等相关参数，从而了解出题质量。其二，分析得到的数据可以帮助教师了解教学效果，特别是发现教学中的薄弱环节，从而有的放矢地进行教学。其三，分析得到的数据是大学英语教师进行教改、科研不可多得的参考依据。
参考文献：
［1］励景编著.考试命题与试卷分析［M］.浙江宁波出版社，2002.
［2］白晓明，陈国明，叶成华等编著.考试命题与试卷分析［M］.浙江宁波出版社，2003.
［3］汪美琼.大学英语试卷分析探析［J］.青海师专学报（教育科学），2008，58卷第2期.
［4］曾凡贵编著.大学英语教学与研究［M］.湖南大学出版社，2004.