试卷质量的信度与效度分析
【摘要】:考试作为教学过程控制的重要环节,在学校教学工作中应受到足够的重视,并且发挥积极的教学评价与工作导向作用。运用传统统计方法分析学生集体水平和外显特征,将反馈信息提供给教育管理者;同时突破传统统计方法的弊端,侧重分析学生的不同项目反应模式及个体差异,做出形成性评价,将内隐信息提供给学科教师和学生本人,促进教学相长,并对案例分析结果作了进一步的总结与思考。在理论的基础上,从宏观和微观作了详细的试卷案例分析。
【关键词】:考试统计学;信度分析;效度分析;SPSS
中国分类号:O24 文献标识码:A 文章编号:1002-6908(2007)0120108-01
试卷分析是考试管理中一项重要工作,开展试卷分析一是为了评价考试的质量.一次考试之后,它的成绩可靠不可靠,有多大的可靠性?它的目标达到了没有,实现到何种程度?哪些试题的质量较好,好在哪里?哪些试题较差,差在何处?这些问题我们就可以通过试卷的分析来评价。在我国由于保密措施难以落实以及其他一些原因,大型考试之前进行试测得条件尚不具备,尽管如此,在考试后对试卷进行分析,对于今后更好的命题,改进现行命题工作都具有较好的参考意义。
1.试题的形成
目前,考查学生成绩的试题仍以教师自编为主。自编试题应符合标准化测验的一些基本原理,教师在编制试题时应注意: ①测试题目多,范围广,覆盖面大; ②测试题目内容具有代表性;③题型多样化;④试题难易程度搭配合理。
2.试题的抽样
为了对试卷进行统计分析,科学可靠的对测试试卷做出正确评价,必要对试卷进行随机的抽样采集。即从参加考试的全体学生的测试试卷中随机抽取一部分学生的试卷作为试卷统计分析的对象,这里全体的测试试卷为母体,随机抽取的试卷为子样,这一过程为试卷抽样。
3.成绩分析与整理
考试成绩的处理,试卷质量的高低,关系到考试的效果和对学生学习成果的检验。一份好的试卷应是难度适中,区分度较大,能分别出学生的学习状况,并且具有较高的信度和效度。在目前中国的本科教学中,大量的考试依然以任课老师自编试题为主,试卷质量参差不齐,离标准化考试尚有差距,并影响到对学生成绩评价的客观性。因此建立试卷的量化评价指标,有助于推动标准化考试的进程。同时,进行试卷质量的分析,也有利于了解各课程教学大纲要求的内容在实际教学过程中被学生接受的程度。在进行考试设计时,根据教育目标分类学认
知体系和教学大纲的要求建立考试目标,并有针对性地进行测量,可以减少教师出试题的盲目性和随意性,使考试能真正反映实际教学水平和学生的学习情况。
考试成绩的处理,是分析试卷的一个重要环节,我们从考生的试卷上直接得到的分数称为原始分数,它只是反映学生掌握的知识和能力的初级信息,不能科学的评估学生的学习成绩,必须经过一定的处理和分析才能反映考试的实际情况,为了更好的了解学生考试分数的分布情况,更好的通过字样了解母体,我们必须要对分数做出处理和分析。
4.信度分析
信度,当一个测验多次测量的结果一致时,它就被认为是可靠的.估计测量一致性程度的指标,即为信度.对主观题和客观题兼有的考试来说,信度可采用克朗巴赫(cronbach)公式计算,即求系数来反映考试的信度。
分半信度法:采用分半法(split-half reliability)计算出的考试信度估计值。就是将考试施测于某被试总体。然后将考试分半,再求被试在每一半考试上的分数的一致性程度。方法是将奇数组题组成一个部分,偶数题构成奇数题的复本。计算两半考试的得分的皮尔逊相关系数(Personal`s Product Moment Correlation),再采用斯皮尔曼-布朗(spearman-brown)公式矫正。
使用分半信度测试时,要求:1.奇数题目与偶数题目必须成对;2.成对值得数目一般要大于30;3。两列数据都应成正态分布。因此,该方法通常用于选择题组成的考试,我们这里对于分半信度法分析试卷的可信度并不完善,只能用它来分析单一的选择题的可信度。
5.未来的发展方向
对于任课教师来说,试卷分析本身就是教学工作的一部分,它是改进教学,提高教学质量的环节。因此,任课教师作试卷分析,着重应对学生考试成绩作统计描述,并对实体的质量及其失分的主要原因进行分析。对于实施教考分离的命题、组卷人员来讲,作试卷分析的目的,主要为今后的进一步提高命题组水平与试题质量积累经验,为建立与完善题库奠定基础。因此,主要应分析与试卷、试题质量有关的项目。作为教学管理部门除了组织、指导、督促上述两类人员做好有关项目的试卷分析外,通过试卷分析主要为掌握本校各专业、各班级、各课程的教学动态,从中发现教学与考试中存在的问题。
考核评价过程中存在的倾向性问题,总结经验,提出对策,为今后指导教学、教学评价及教务等方面的工作提供依据。因此,在任课教师或命题组卷人员做好试卷分析的基础上,教学管理部门或教学研究部门,还可以对全校各专业、各班级、各课程的考试成绩特征与分布状况、合格率或达标率等作动态分析与质量监控,并检查有关评卷、印卷等方面的工作质量。
今后还需将更多的统计知识应用到教育中来,发掘考试所蕴含的更深层的
意义,引进其它学科中可以应用到考试统计的内容,在此基础上设计出更为科学而合理的试卷。
参考文献
[1] 杨彦勤、辛全才,高校试卷材料管理现状,问题及对策[J]. 河北工程技术高等专科学校学报,2006.
[2] 吕丽娟、李春、苏文悌,试卷分析系统的功能与实现[J]. 上海理工大学学报(社会科学版),2005.
[3] 李金平,考试质量分析[J]. 江南大学学报(自然科学版).
因篇幅问题不能全部显示,请点此查看更多更全内容