内容效度 [考研英语传统阅读理解的测试内容效度分析]
时间：2019-01-06 03:26:57 来源：雅意学习网 本文已影响 人 
摘 要： 本文首先通过对2010年考研英语（一）传统阅读理解考试试卷进行数据分析，从语言测试的角度对其进行内容效度分析。数据分析表明了传统阅读理解部分的试题设计在选材、题干设置、文章难度、试题指向性等方面存在一定问题。这些问题降低了该部分测试的公平性与内容效度，在一定程度上影响了考生的测试成绩。
关键词： 考研英语 内容效度 传统阅读理解
一、引言
传统的英语阅读考试主要是从英语词汇、短语、句型等习惯表达方式来考查学生的英语应用能力，尤其是要测试考生对篇章中的语言知识和语言技能的掌握情况。阅读能力一直是各种英语考试考查的重点，在全国硕士研究生入学考试中传统阅读理解部分占了整个试卷分值的40%，它是考生获取英语考试成功的关键。阅读技能的灵活利用在阅读考试中发挥着重要作用，同时也体现了考生的阅读能力。从语言测试的角度来看，阅读能力与测试的效度相关。效度作为测试学中的专业术语，测试效度（test validity）亦称测试的有效性，指一套测试对应该测试的内容所测的程度。也就是说，一套测试是否达到了它预定的目的以及是否测量了它要测量的内容。因此，测试效度是鉴别考试质量的重要指标。Bachman将语言测试的效度分为五种类型：内容效度（content validity）、结构效度（construct validity）、标准关联效度（criterion-related validity）、预测效度（predictive validity）和卷面效度（face validity）。这五种类型分别从测试内容、测试实践与理论的关系、学习者水平与评估标准的一致性及测试预设等方面来说明考试质量的好与坏。关于内容效度这个术语《语言测试词典》是这样界定的：它指的是概念上或非统计数据体现出来的效度，是在系统分析考试内容的基础上对测量目标领域内样本是否适度的判断。就考研英语的阅读理解部分而言，它的内容效度具体体现在阅读量、选材、题目难度及考核技能等四个方面。本文以2010年考研英语（一）传统阅读理解题为例，对其内容效度进行文本分析。
二、2010年考研英语阅读理解题（A部分）测试的相关数据分析
三、2010年考研英语（一）传统阅读理解题测试内容效度分析
《2010年考研英语考试大纲》（以下简称《考纲》）对阅读理解A部分测试在测试目的、测试形式、测试内容方面进行了相关规定。笔者就围绕这几个方面，对2010年考研英语（一）传统阅读理解测试的具体内容，如材料选择、阅读量、试题考点和试题形式进行分析，发现以下诸多问题。
（一）阅读理解题选材隐含过于专业与生僻的话题，对考生的背景知识要求过高。
阅读考试是考生提取并加工大脑中已有信息的过程。20世纪30年代初，英国著名心理学家F.C.Barlett提出了图式理论，表明图式是围绕某一个主题组织起来的知识的表征和贮存方式。认知理论认为图式是认知的基础，在大脑中形成后会对以后获得的信息进行重新组织、理解和记忆。人们在对新输入信息进行加工与编码时，需要找到大脑中已经存在的固有的图式与之相匹配，才能完成对新信息的处理与储存，这个固有的图式可以理解为背景知识。阅读考试是一种图式与新信息相互匹配与交融的过程，旧的图式在这个过程中起着关键的作用，这就表明考生要具备一定的背景知识才能更好地对新信息进行加工与处理。
从表1发现今年每篇阅读理解的原材料都是出自国外的期刊杂志，文章的题材范围比较广泛，涉及文化、法律、社会学、金融等四个领域，避免了娱乐类、敏感性的话题（如政党政治、宗教、种族冲突等），但是选材的话题具有很强的专业性，对学生的文化背景知识要求过高，例如第四篇所谈的银行与会计准则制订者之间的矛盾冲突，这对于缺乏金融背景知识的考生来说具有很大的难度，生僻的话题内容有悖于考生的背景知识，不能测出其真实的语言水平。这些文章均取材于英美国家的报章杂志，而考生平时几乎接触不到英美国家的原文报刊。平时的学习材料（以大学英语教材为主）反映当今英美国家概况的文章很少，而论述世界经济全球化和互联网发展的文章就甚少。由此看出，考生学习资料和考题材料之间的差距及话题的专业性与生僻性增加了其阅读理解部分的解题难度。命题者在命题过程中忽视了考生的背景知识，这与《考纲》要求的兼顾到各个背景层次的考生，以体现考试的公平性和社会意识心态的正面导向性的原则相悖，因此阅读考试的内容效度势必受到影响。
（二）试题指向性不周密逻辑，不具备严密性。
根据《考纲》要求，命题者在命题过程中应该遵循试题指向性必须清楚、准确、周密，易于理解，不出偏题怪题的原则，而今年阅读理解某些题目的命题不严谨，违背考研选拔人才本身的目的。例如，Text A中第25题出现了很大的争议，四个选项的设置具有很强的迷惑性与干扰性，大部分考生不理解B选项中的“Lost Horizon”，受其他选项的干扰最后选ABCD四个选项的都有，而官方所给出的答案是B。通过专家的验证，该题四个答案均是正确的。这有悖于命题过程中题目设置要有一定迷惑性，但答案必须唯一，不能有模棱两可的答案只要学生循着正确的逻辑思维就能得到正确答案的基本原则。诸如此类的问题，同样出现在第26题、第27题、第30题、第37题、第39题中。考研英语作为国内最高级别统考形式的考试之一，它应当具有高度的严谨性，命题应该周密，经得起推敲，但是从上述看出该份阅读考试试题指向性不具有逻辑性与严密性，一定程度上影响了考试的效度。
（三）难度比大纲样题难度大，忽视了测试的公平性。
一般来说大纲样题根据《考纲》要求进行设置，它能预见真题的难度。但通过对本卷阅读理解的分析，真题难度高于大纲样题的难度。其难度主要表现在以下三点。
1.词汇的深层含义增加理解难度。
阅读理解的四篇文章的生僻字虽然不多，但是考生不能掌握某些常见词汇的深层含义，导致篇章理解的偏差。例如，第四篇文章中的“compromise”的表层含义是“妥协，折衷”，深层含义是“因错误行为使自己陷入困境”和“修改，更改（某事）；减弱，减轻”，在该篇文章中采用的是其深层含义，而命题者忽视了考生本身的实际语言水平，以此作为考点，因而第37题的解答大部分考生深感有很大的难度。同时词汇生僻的深层含义导致考生对篇章句子的不理解，如：Text 4中一个句子：“These rules say they must value some assets at the price a third party would pay，not the price managers and regulators would like them to fetch.”其中“fetch”意为“去取，去拿；去接来”，但是在该句中它表达的深层含义是“（某货物）卖得（多少钱）”，这就影响了考生对整个句子的理解。诸如此类问题在Text 2第2段第1句“Now the nation stop patent court appears completely ready to scale back on business-method patents，which have been controversial ever since they were first authorized 10 years ago.”中也有所体现。具有深层含义词汇的使用，降低了试题的区别度，从而造成优、中、差三个层次的考生都无法应对的局面。
本文为全文原貌 未安装PDF浏览器用户请先下载安装 原版全文 2.阅读文章中长难句增加理解难度。
阅读理解文章中掺杂过多的长难句会增加考生对整个篇章理解的难度，同时对来自不同背景、处于不同语言水平的考生来说，它失去了测试的公平性。在Text 1第3段原文第1句49个词，最后一句43个词，均属长难句。而第2题的考点是本段第1句中的“unfocused”上；第3题的考点是本段最后一句的“So few authors...that...”上。大部分的考生不能理解这两个题的考点，也就是说没有理解整两个长难句的含义。因此，命题者应该根据考生参差不齐的英语水平调整文章句子的难度以保证试卷内容效度。
3.阅读理解题目设置的难度太大，考点分布不均匀。
一般来说，阅读理解的4篇文章常常是第一、二篇文章通俗易懂，但题目有一定难度，如干扰项很难排除或在干扰项中有考生不熟悉的纲内词汇或相关成语。而第三、四篇文章语言难度较大、理解上障碍较多、涉及的文化背景知识面较宽，可是题目往往偏重于对文章宏观性的理解，考生只要把握住全文主题和上下文的逻辑联系就能比较顺利地解题，题目一般不纠缠于某个小的细节上。
然而，今年阅读部分除了篇章词汇和句子的难度增大以外，文章后面的题目设置也有很大的难度，并且题目难度的设置不具有梯度性，这四篇文章的篇章理解和题目难度都没有遵循由易到难的原则，而从头至尾设置的都是相同的难度，并且题干设计太具体细节化而非通俗化、常规化。根据对阅读题目的分析，今年阅读理解题干设计体现通俗化的题目只有一题，也即第31题。而考的主旨题共考了两题（第25、30题），并且这两题的得分率很低，可见其区分度很低。这与2005年的该部分阅读理解题干的设置形成鲜明的对比，05年的篇章句子难度与题干难度的设置完全遵循了大纲的要求，因此其具有了很高的区分度，同时2005年的考研英语阅读理解部分科学的命题为以后的命题提供了很好的借鉴。
《考纲》要求考生在阅读理解部分应具备以下阅读能力：1）理解主旨要义；2）理解文中的具体信息；3）理解文中的概念性含义；4）进行有关的判断、推理和引申；5）根据上下文推测生词的词义；6）理解文章的总体结构以及单句之间、段落之间的关系；7）理解作者的意图、观点或态度；8）区分论点和论据。根据《大纲》要求的阅读能力，阅读理解的考点分主旨题、观点态度题、事实细节题、推理引申题词、义句义猜测题等五种题型。从表2所呈现考点覆盖情况看出考点主要集中在事实细节题和推理引申题，占了整个阅读试题的75%，观点态度题只考了一个题，考点分布不均匀有悖于考研英语大纲的要求，而题干设置不科学会影响考生的审题，降低其答题的正确性。
四、结语
通过对2010年考研英语（一）传统阅读理解题部分试题的分析，发现其难度高内容效度比较低，就其根本原因可归结为命题者在命题过程中忽视了考生真实的语言水平。其中，选材对学生的文化背景知识要求太高，超出考生平时学习材料的范围，篇章与句子难度过高给学生的理解造成了很大的障碍，同时不科学的题目设置严重影响了考生的审题方向，这势必会降低考研英语阅读测试的公平性。由此看出，该部分阅读理解与《考纲》的相关描述存在明显差距，命题者在今后的命题过程中应当尽量缩小这个差距。试卷中出现的诸多问题如题材选择、题目设置、命题方向值得进一步思考。命题者应考虑阅读测试的文章来源、文章体裁、文章题材、篇幅长短、题型选择、题目设计等每一个要素，从而确保与具体测试目标的一致性，确保对阅读能力测量的有效性，使考研英语阅读理解部分的测试效度得到提高。
参考文献：
［1］Lyle F.Bachman.Fundamental Consideration in Language Testing［M］.Shanghai：Shanghai Foreign Language Education Press，1999.
［2］黄洁，段少敏.关于英语阅读测试效度的研究［J］.江汉大学学报（人文科学版），2004.
［3］考研名师朱泰祺谈2010年英语命题五大不足.http：//edu.省略/kaoyan/2010-04-19/1128243548.shtml.
［4］刘昱洁.图式理论在俄语阅读教学中的应用［J］.中国校外教育（理论），2010.
［5］陆巧玲，CET-4阅读理解内容效度分析［J］.高教论坛，2008.
［6］宁明，试析TEM8阅读理解中存在的问题及对策［J］.济南职业学院学报，2006.
［7］杨惠中，Weir，C.大学英语四，六级考试效度研究［M］.上海：上海外语教育出版社，1998.
［8］2010年全国硕士研究生入学统一考试英语大纲.
［9］2010年全国硕士研究生入学统一考试英语（一）试卷.
本文为全文原貌 未安装PDF浏览器用户请先下载安装 原版全文
