浅析英语专业四级词汇与语法部分内容效度

摘要：

英语专业四级考试（TEM—4）以及专业八级(TEM—8)是我国唯一专门为高等院校英语专业学生设计的大规模考试，这两种考试的人数尽管没有考大学英语四，六级的人数多，但是这两场考试对英语专业学生来说是相当重要的。我们都知道对于英语专业的学生来说，英语专业四级以及八级证书占有相当重要的地位，在以后的找工作当中，招聘单位也许会让你拿出一个证明你是英语专业学生的证明，而英语专业四级证书就是一个很好的证明。英语专业四级八级考试对英语专业学生来说是很重要的，其试卷的信度效度都会影响到每一个英语专业的学生，因此各位出试卷的老师都应该仔细的考虑到各个因素。只有这样，才会使得英语专业四级考试更加有社会影响力，也才能更加能准确测出每一个英语专业学生的真实水平。在此，我对英语专业四级考试试卷词汇与语法部分做了一定的内容效度分析。本文以专业四级考试真题为样本，对2004年到2008年英语专业四级考试的“语法与词汇”部分内容效度进行一定的分析。分析结果表明：英语专业四级考试改革以后，“语法语词汇”部分的 内容效度有所提高。此外，在写该论文之前，我仔细研读了邹申的《语言测试》【M】上海：上海外语教育出版社，2005。以及邹申、杨任明的《简明英语测试教程》【M】北京：高等教育出版社，2000。等等，还有几本相关的书.从中收获了很多，对写该论文有很大的帮助，因此尝试写出以下论文。此论文尝试提出进一步提高语法词汇部分试题内容效度的方法，希望对英语专业四级考试的命题有所帮助，从而提高英语专业四级考试试卷的质量。

Abstract: 

TEM—4 is one of the biggest examination for English major students. Though there are less students to have this exam, it is very important to our English major. This passage is taking the genuine paper as example, and to some extent to analyze the content validity of the TEM—4 papers from 2004 to 2008.The result reveals that the Vocabulary and grammar exercises parts from 2004 to 2008 are the valid parts in the paper. In addition, before writing this passage, I have studied carefully some related books. And I learned a lot from them and  I try to write this passage .In this passage ,I try to propose some approaches to improve the content validity, hope to have some benefits to the topic, and then qualify the TEM—4 papers.

关键词：内容效度；语法与词汇；英语专业四级考试

1.前言

效度是评价测试质量最重要的标准，效度也是语言测试的基本出发点，它回答了“考的是什么能力”，以及“是否考了相应的能力”的问题。人们对效度内涵与外延的认识随着研究的深入在逐步加深。但是，效度是需要检验的，Bachman指出, 检验效度是一个持续不断的过程, 不可能一次性完成。也就是说, 只要考试任务有变化, 就需要重新检验效度。（1990:287） 效度检验需要逻辑分析, 又需要实证研究。不同的学者对效度的认识是不同的。例如邹申( 2005 ) 将人们对效度的认识划分为三个阶段。第一个阶段为20 世纪30年代到40年代,效度被简单地看成两个相同目的测试所得结果之间的相关性。第二个阶段为20世纪40年代到50年代,效度做了更精细的区分, 例如内容效度、共时效度、预测效度、构建效度。第三个阶段为20世纪90 年代以后,效度又被界定为一个不可分割的整体性概念, 统指测试的有效性。(Bachman, 1990) 这就是说, 效度只有一种, 但检验效度的方法与收集证据的种类多种多样, 过去将效度分成不同种类, 实际是混淆了效度的与检验效度的证据.现在我们来分析一下内容效度，内容效度的研究对于语言测试和教学都是至关重要的。如果测试的内容并非是有效度的抽样，那么考生的分数也不能真实的反映考生的实际情况。如果测试不能反映我们所要测试的东西，那么根据测试所做出的对教学效果和学生能力的判断将会是不可靠的。写论文之前查了很多资料，我发现近年来英语专业考试试题质量方面的研究有很多，但主要限于2005年考试改革之前的试题分析，本文将从内容效度方面对改革前后的英语专业四级考试的“词汇与语法”部分进行对比分析，希望对整体试卷起到一定的作用。

2.研究方法

   2.1 研究目的

测试的效度如何，可以从多个方面来说明，如内容效度，结构效度，预测效度以及共时效度等等，我因为时间不足，以及能力有限。在这里，我仅仅从内容效度方面对英语专业四级考试的词汇和语法部分进行简单的分析研究，对2004年到2008年的词汇语法部分的内容效度进行分析，并对以后的英语专业四级考试制度提出合理的建议。以便于相关教育部门做出更正确的抉择，以更有利于测出学生的真实能力。

2.2 研究样本

此次研究的样本包括2004年到2008年五年的英语专业四级考试真题中的“词汇与语法”这一部分的试题，以及在上课的时侯老师给我们做的专业四级预测题词汇与语法部分。

2.3研究数据

此次研究的数据包括对2004年到2008年所有词汇与语法题中各种语法点及其词汇种类的统计数据，以及对各套预测题的词汇与语法部分的各个小题的统计数据。

3.效度分析

3.1 内容效度分析

效度（Validity）即有效性，它是指测量工具或手段能够准确测出所需测量的事物的程度。其所测量的到的结果要反映所想要考察内容的程度，效度是科学的测量工具所必需具备的重要条件。测量结果与考察的内容越吻合，则效度越高；反之，则效度越低。效度包括内容效度，结构效度以及准则效度。其中内容效度指测试内容与预定要测试内容之间一致性的程度，一般来说，内容效度指测试题考察到了考试大纲规定要考的内容，或者说考试的题目在多大程度上能代表它所要测量的目标。根据阅读相关书籍以及考试大纲，我了解到了，一般从以下几个方面来检验测试的内容效度：1.测试内容是否和测试目标有关；2.测试内容是否具有一定的代表性.3.测试内容是否符合相关考试大纲规定的测试内容；

本研究以2004年到2008年英语专业四级考试“词汇与语法”部分的测试内容为研究对象.

 3.1.1测试内容是否和测试目标有关

英语专业四级考试当中，词汇与语法部分的题目属于单项选择题，单项选择题属于客观题型，其评分标准单一，而且又快又不会掺杂评分员的主观因素在里边，所以信度比较高.根据研究，其效度也相当高。英语专业四级考试当中的“词汇与语法”部分测试内容分为词汇题和语法题。如果该试题涉及语法，如虚拟语气，关系从句，倒装句 等等类型的题目，该类型的试题就是语法题；如果试题涉及词汇，比如说名词辨析，形容词辨析，副词辨析等等类型的题目，该类型的题目就属于词汇题.具体例子如下所示：

1.语法题

Men differ from animals ___they can think and speak.（2008年 54题）

A.for which  B. for that  C. in that  D. in which

答案：C

解析：该题的译文为“人和动物的不同之处在于人能思考和讲话”。该题的考试要点为从句，具体说是原因状语从句。in that 引导原因状语从句表示“因为，由于”等意。其他三个选项在句中都不合题意，只能选C答案。该题就归于语法测试题。 

2.词汇测试题

At first the company refused to purchase the equipment , but this decision was ____revised.（2005年第60题）

A.subsequently  B.successively  C.predominantly  D.preliminarily

答案：A

解析：该题的译文为“起初，这家公司没有同意要进够这一装置，但后来该公司改变了决定”。我们可以看出该题考的是副词的辨析，A项的意思是“后来，随后，接着”B项的意思是“连续不断”地，连接地” C 项的意思是“占优势的，盛行的”D项的意思是“预备的，初步的”。根据题意，我们可以选出A项.该题属于词汇测试题

She‘s always been kind to me ，I can’t just turn ______on her now that she needs my help.（2005年67题）

 A. my back   B. my head   C. my eye    D. shoulder

答案：A

解析：该题的译文为“她一直对我很好，现在她需要我了，我不能置之不理”.很明显，该题考的是固定搭配，turn one’s back on sb “不管某人，对某人置之不理”.turn 与其它三个选项不够成搭配.根据搭配应选A答案。该题属于固定搭配题.

The president explained that the purpose of taxation was to____ government spending.(2005年70题)

A．finance   B. expand   C. enlarge    D. budget 

解析：

该题的译文为“总统解释说，税收的目的是为了资助开销”.我们可以看出该题考的是动词的词义辨析题。A项的意思是“资助，支援” B项的意思是“扩大，膨胀” C 项的意思是“扩大”D项的意思是“预算”.根据题意，我们可以选出A项。

3.1.2测试内容是否具有一定的代表性

要看测试内容是否具有代表性就要看，它是否考查到了考试大纲所要求的内容，以及是否覆盖了我们上课时老师讲的各个语法点的大部分，测试内容的代表性如何会直接影响到测试内容的效度的高低.《大纲》对语法与词汇测试的要求还包括： 1， 能灵活正确运用教学大纲语法结构表一级至四级的全部内容;2，熟练掌握教学大纲词汇表一级至四级规定的5, 5000到 6000认知词汇中的3000到4000个词汇及其最基本的搭配(高等学校英语专业四级考试大纲修订小组, 2004: 6 ) 。据此, 笔者将第一组数据分为语法测试题和词汇测试题两部分, 分别对其测试内容的代表性进行了分析。因此，教师在出专业四级题的时候一定要注意，所出的题目是否具有代表性以及典型性，在这里，我将对2004年到2008年的语法词汇题进行统计分析。如下表所示：

150道语法词汇测试题的考核内容：

3.1.3测试的内容是否适合测试对象

要达到较高的测试效度，我们知道，测试的内容对于被测试者不能太难也不能太简单，只有这样测试的内容效度才算是比较合情合理的，也才会有较高的内容效度。

4.结论

从上述分析可以看出，实施改革后的英语专业四级考试当中的“词汇与语法”部分的内容效度有所提高，试题的各个部分都更加符合大纲要求，语法词汇涉及范围较广，并且更符合学生的能力水平了。但是也还有很多的不足之处，当然了，世界上没有完美的事，专业四级试卷考点覆盖范围还不够广，还有待扩大，从而才可以进一步提高英语专业四级测试试卷的整体的效度，内容效度也才会有所提高。本研究存在很多不足之处: 第一，由于缺少学生专业四级测试的详细成绩, 我未能分析每道题目的难度是否适中；第二， 对于Bachaman和Palmer提出的考试任务特点框架的修改存在不足, 对所涉及的语法考点的特点分析不全面,，未对该部分试题所采纳的一些语法点以及词汇进行深入具体研究; 第三，本研究只分析了英语专业四级考试中词汇与语法部分的内容效度, 并不是一项完整的专业四级测试试卷的整体的效度研究。

参考文献：

1. 邹申《语言测试》【M】上海：上海外语教育出版社，2005.

2.邹申、杨任明《简明英语测试教程》【M】北京：高等教育出版社，2000.

3.刘润清，韩宝成 《语言测试和它的方法》【M】北京：外语教学与研究出版社，2000.

4.高等学校外语专业教学指导委员会英语组.高等学校英语专业英语教学大纲【M】.北京：外语教学与研究出版社，2000.

5. BACHMAN L F, PALMER A S. Language Testing in Practice [M]. Oxford: Oxford University Press, 1999:49.

6.邹申. TEM 考试效度研究[M ]. 上海: 上海外语教育出版社, 1997.

7. 徐强. 交际法英语教学和考试评估[M ]. 上海: 外语教育出版社, 2000: 166.下载本文