信度和效度_确保大学英语期终考试的信度和效度构筑科学有效的评价机制
时间：2018-12-24 03:20:01 来源：雅意学习网 本文已影响 人 
摘 要：本文针对大学英语期终考试中存在的一些问题，结合考试中衡量考试结果的两个重要特性信度和效度，分析应该从哪几个方面提高考试水平。只有在对考试设计的信度、效度有较为完全、深入的了解，才能构筑一个科学的评价机制。
关键词：大学英语期终考试 信度 效度 评价机制
引言
测试是语言教学不可或缺的重要部分，它和语言教学与二语习得有着密切的联系。语言习得与教学研究和语言测试之间存在着内在的本质联系。大学英语期终考试以教学大纲为依据，以教材为参照，检测教师一个学期以来的教学内容，评价学生一个学期以来的整体学习效果，是一种学业成就测试(Achievement Test)。学业成就测试不同于大学英语四六级的水平测试，前者与教学密切相关，而后者与教学毫无关系。它检测的是学生英语学习的水平或能力。长期以来，外语教师在大学英语期终考试命题的过程中一直习惯于单纯以大学英语四、六级考试为模式，多数教师长期忽略试题编写的目的和所要达到的目标以及测试内容等因素，只是把手头现成的试题集中起来组合在一起对学生进行一个学期的成绩评估。既没有预测的环节，更谈不上确保信度和效度了。这种设计试卷的方法对教学和学习效果能否提供公正的评价？究竟有多大的科学性、可靠性和有效性？考试的信度和效度如何获得保证？以上种种疑问均值得我们反思。本文通过分析如何确保大学英语期终考试的信度和效度，进一步提出了构建一个科学有效的评价机制的建议。
一、大学英语期终考试中存在的问题
笔者于2007年11月随机向桂林三所高校（广西师范大学、桂林电子科技大学、桂林电子工业学院）的106名非英语专业学生发放了问卷调查表，回收有效问卷100份。以上学期大学英语期终考试试题为例，针对大学英语期终考试的试卷提出了以下问题：
1.你上学期参加的大学英语期终考试是以什么方式进行的？
（92%的学生选择“笔试”，2%的学生选择“口试”，6%的学生选择“其它方式”。）
2. 你认为上学期大学英语期终考试成绩能否真实反映你上学期的英语学习成果？
（49%的学生选择“否”，23%的学生选择“是”， 21%的学生选择“不确切”，7 %的学生选择“其他”。）
3.你认为上学期大学英语期终考试试题是否全面覆盖“听说读写译”等技能？
（43%的学生选择“否”，33%的学生选择 “部分覆盖”， 10%的学生选择“不确定”， 14%的学生选择“是”。）
4. 你认为上学期大学英语期终考试试卷难度如何？
（43%的学生选择“难度高”，27%的学生选择“难度较高”， 17%的学生选择“难度一般”，11%的学生选择“难度较低”， 2%的学生选择“难度低”。）
5. 你认为上学期大学英语期终考试中出现的考点是否能够运用于实际中？
（21%的学生选择“否”，37%的学生选择“部分可用”，33%的学生选择“不确定”，9%的学生选择“是”。）
6. 你认为上学期大学英语期终考试题型是否多样？
（45%的学生选择“否”，21%的学生选择“一般”，11%的学生选择“不确定”，23%的学生选择“是”。）
7. 你认为上学期大学英语期终考试时间是否足够答题？
（27%的学生选择选择“否”，29%的学生选择“略微不足”，11%的学生选择“不确定”，10%的学生选择“略有剩余”，23%的学生选择“是”。）
8. 你认为你参加过的大学英语期终考试中给出的题型标题指导是否清晰？
（57%的学生选择选择“清晰”， 31%的学生选择“较为清晰”，2%的学生选择“不确定”，8%的学生选择“较不清晰”， 2%的学生选择“不清晰”。）
9. 你是否及时获知你的考试分数以及具体扣分情况？
（47%的学生选择选择“不及时”， 36%的学生选择“不够及时”，3%的学生选择“不确定”，12%的学生选择“较为及时”，2%的学生选择“及时”。）
10. 你认为上学期大学英语期终考试能否促进你今后的英语学习？
（7%的学生选择选择“否”，51%的学生选择“不确定”，42%的学生选择 “是”。）
同时，笔者通过访谈10位曾担任过大学英语期终考试出卷任务的教师，了解到教师出题普遍是按照大学四六级考试的题型从学校自建的信息库、自己的资料源和网上的资料源搜索得来，在考试之前并未进行具体的考试对象、考试目标、考试内容、信度和效度的确定和考虑。评卷阶段，在评主观性试题时缺乏统一的评判标准。
综合以上信息，笔者认为大学英语期终考试一般存在着以下问题：
（一）考试模式单一化
受大学英语四六级等级考试的影响，许多学校的大学英语期终考试模式都模仿甚至照搬大学英语四六级等级考试的形式，没有明确的考试目标，考试内容不符合学生所学知识的实际情况，盲目地跟着大环境走，导致评价并不能完全反映教学的后果。绝大部分的大学英语期终考试以笔试的方法进行，学生感觉试题覆盖面窄，难度偏高，无法反映出自己实际运用所学知识的能力。
（二）考试题型单一化
大学英语期终考试考什么？按照传统的大学英语期终考试的试题设计，试卷基本由多项选择、完形填空、阅读理解、翻译和作文几部分组成，主要考的是语言知识及语言形式的识别，没有考多少语言的运用和产出能力。这是题型所决定的，因为80%的题是客观多项选择题。多项选择题的弊端很多，测试专家Alderson说：“有证据表明，参加多项选择考试的学生能够学习一些应试技巧使自己的分数‘人工地’提高许多。”［１］学生一方面容易形成“应试”思维的惯性，另一方面也缺少全面展示自己能力的空间。
（三）评价与反馈系统的不足
大部分教师反映评卷时，评阅主观题时缺乏统一的明确的标准。整套试题中，主观题的比重原本就较低，且大多是以作文或者回答问题等形式出现的。许多教师仅凭自己对学生的印象，或试卷的整体形象就给出较高或较低的分数；或者对语言点错误或语法如何衡量缺乏有效的指引或者衡量的标准，导致给出的评分无法真实地反映学生的实际水平。
同时，许多学生提出意见，表示考试结束后，无法及时获知自己的考试信息、成绩以及具体的扣分情况，大多数高校并没有设置考试讲解环节，也缺少对试卷的评价环节。学生只得知自己的分数，而并不确切获知自己具体的考试信息，无法将自己的意见反馈给教师，教师也无法获得学生有效的考试反馈信息，无法进一步发挥考试对教学和学习的促进作用。
综合以上几点，我们可以看到，大学英语期终考试的信度和效度得不到有效的保障，考试评价机制不太受到认同。因此必须加强考试的信度和效度，促进科学的评价机制的构建。
二、关于信度和效度的理论背景
信度和效度是衡量学业成就测试质量高低的最重要的指标。试题只有通过信度和效度的检验后，才能有效地投入使用。无法确保信度和效度的试题就无法真实地反映学生受试的具体情况。
（一）信度与效度
信度主要代表的是测量数据和结论的可靠性和稳定性程度，也就是说考试结果的可靠性，即考试结果与学生的真实水平的一致程度。考试信度的大小说明考试的可靠程度。我们可以用信度系数，即表明信度的大小统计量来表示信度的大小。信度系数越大，表明测量的可信程度就越大。信度受试题的设计、考试的安排组织、评卷、考生的心态等因素的影响，集中体现了分数与试题、试题与考生之间的关系。
根据其性质，信度一般可分为评卷者信度、再测信度、复本信度和内在一致性信度。［２］
如果要保证有较高的信度，我们在设计试卷的时候就要注意保证试题有一定的题量。基本上题量越大，信度就越高。同时设计试题的过程中要注意对试题难度的把握，试题的难度最好把握在适中水平，因为考题难度太高或太低都不足以明确区分考生的水平。再次，试题不能有偏颇性，不能选择模糊度较高或带有强烈主观观点的试题。另外，考题还应具有同质性，即考试内容属于同一范畴内，不能将理科专业的内容加入文科语言类考试中来，能够使考生快速调整适应试题的安排模式。在组织考试时应尽量考虑考场环境、温度、监考教师的态度对学生的影响，确保其不产生影响考生水平发挥的负作用。评卷尽量采取统一标准，如此才能基本保证考试的信度。
效度是指“一个测验能测出预定要测量的事物的程度”，［３］也就是说，考试是否测量了它所想要测量的东西。效度有两层含义：一是考试内容；二是考试测出的程度，即考试所考的内容是否就是想考的内容以及考试是否达到了目的。就大学英语期终考试而言，效度具体指的是学期内完成预期的测量任务，达到学期内预期的测试目标的程度，即大学英语期终考试试题在多大程度上反映了我们想要测量内容的真实含义。评价一个测试是否有效，要从多角度、多方面检测测试结果与测试目标的符合程度。效度是一项考试的核心问题，是语言测试中衡量质量高低的最重要的指标。如果一项考试信度很高，但并没有考到应考的内容，这样的考试效度就不高。［４］
（二）信度与效度的关系
信度与效度既矛盾又统一。要实现测试的目的，试题的信度和效度缺一不可。然而信度强调的是试题的科学性，效度强调的是试题的多样性以及实际运用性，因此在同一试卷中很难同时既保证高信度又保证高效度。不同的语言测试观对信度和效度的掌控有不同的理解。结构主义语言测试能保证高信度；而强调以真实的语言为测试内容的交际测试能保证高效度。有时为了提高效度而牺牲一定程度的信度是必要的，然而如果为提高信度而牺牲效度，我们的测试就变成了准确测量我们测量目标以外东西的工具(Weir，1990)。因此笔者认为，要构建科学合理的评价机制，大学英语期终考试应侧重考虑效度要求，在此基础上尽可能地追求信度。
三、如何构建科学有效的评价机制
针对大学英语期终考试学生及教师所反映的问题，结合信度以及效度的理论，笔者认为大学英语期终考试应从学生的实际以及具体的教学内容出发，摆脱历时已久的“应试思维”的控制，多方面多模式多格局地开展大学英语期终考试，促进科学有效的评价机制的构建。
（一）考试模式多样化
打破考试只采用笔试的僵化思维，加入学生的口语表达能力以及实际运用语言能力的考查，在笔试之外，通过课堂答问、小组活动以及运用语言解决具体问题等形式，让学生积极主动地参与到评价机制中来，全面考查学生运用所学知识的能力。
加入多种考试模式可以丰富考试的格局，使考试能较为真实地反映学生的语言水平。
（二）考试题型多样化
建立和开发大学英语大型考试题库，应根据各级院校英语教育的实际情况，建立具有自己院校特色的大学英语考试体系，把学生语言知识与语言能力的全面发展作为评价的主导思想。平衡主观题和客观题的构成情况，使学生的语言水平获得较大的发挥空间。
（三）评分标准一致化
在教师阅卷或进行评估时，要对学生的表现有一个统一的准则指导。尤其在评阅主观题或进行口语表达评估时，教师要尽可能地摆脱“印象化”、“随意化”的评分标准，要达到较高的评估信度和效度，使评分标准摆脱主观因素而客观化，教师可以掌握一些现代的统计学原理和数据库技术来提高评分的可操作性，帮助制定合理的评分标准，克服评卷中的主观随意性、片面性。
四、结语
大学英语期终考试是考查学生在特定时间内语言水平提高程度的测试，需要教师认真对待。同时，大学英语期终考试还有很多有待深入研究的问题，如考试模式的开发、考试题型的拓宽、评卷准则的制定等等。希望大学英语期终考试能获得越来越多的关注和发展，对学生学习产生良好的后效以及巨大的学习推动力。
参考文献：
［１］Alderson，J.Charles，C.Clapham&D.Wall. Language Test Construction and Evaluation［M］.Beijing: Foreign Language Teaching and Research Press， 2000.
［２］Bachman.L.F. Fundamental Considerations in Language Testing. Oxford University Press，1991.
［３］牛强.现行高校英语测试中的问题［J］.外语教学与研究，2001，(2):140-143.
［４］杨惠中.大学英语四、六级考试效度研究［M］.上海:上海外语教育出版社，1998.
（作者系广西师范大学外国语学院课程与教学论06级硕士研究生）
