基于语料库2005-2010年高考英语江苏卷完形填空效度分析

2012-10-13 08:07顾正广
太原城市职业技术学院学报 2012年2期
关键词:效度考点命题

顾正广

(江苏省镇江第一中学,江苏 镇江 212009)

基于语料库2005-2010年高考英语江苏卷完形填空效度分析

顾正广

(江苏省镇江第一中学,江苏 镇江 212009)

江苏高考独立命题以来,对江苏高考卷完形填空从语言测试学角度研究的尚未曾见。该文基于试卷语料库,对2005年到2010年江苏卷中的完形填空题从语言测试学角度对文本词汇和考点层次两方面进行效度分析,旨在探讨该题型的命题特点和考试效度,并为新课改高考英语的命题和题型改革提供参考。

完形填空;语言测试;文本词汇;考点效度

我国高考英语中基于篇章的试题是整份试卷的主体部分,完形填空题是一种基于篇章类的试题,是根据格式塔心理(Gestalt Psychology),即补全心理而设计的,利用了自然语言的语言冗余现象(redundancy)。这种题型综合测试学生的语言知识、阅读能力和总体语言水平,考查学生在有信息空缺的前提下理解整篇文章的能力。完形填空题是以文本为载体考查考生综合运用英语能力的一种题型,是考生英语语言知识和英语语言技能水平的综合体现。为了对该试题进行质量控制,命题者从命题的角度,在文章删除项目的选择上下工夫,努力提高试题的考点效度,使试题的删词更合理。考点效度(test-point validity)是我国语言测试研究领域的著名学者李筱菊教授在其论著《语言测试科学与艺术》中提出的一个颇具创见性的概念。在高考完形填空其他效度不好操作的情况下,考点效度分析几乎成了对其试题质量检验的唯一途径了。

由此可见,完形填空题命题的关键是文本的选择和考点层次的确定,将二者统一起来分析能够从宏观和微观两个角度考察完形填空题命题的效度。基于此,该文将从这两方面分析2005年至2010年江苏高考英语卷中的完形填空题命题的效度,旨在探讨该题型的命题特点和考试效度,并为新课改高考英语的命题和题型改革提供参考。

一、文本词汇分析

完形填空题的文本是一篇难度、长度、题材、体裁都很合适的真实语料。完形填空题文本的选择在考虑题材、体裁的同时,更要看重语言信息丰富、逻辑性和可读性强的文本,注重文本的语言特征。文本语言特征的一个重要方面是文本词汇,这是完形填空题文本选择的基础。分析文本词汇的一个重要参数是词汇的TTR值。TTR(type-tokenratio)是类符——形符比,单纯的形符数和类符数不能反映文本的本质特征,但两者的比率却在一定程度上反映了文本的某种本质特征,即用词的变化性。一般来说,类符——形符比越高,用词变化性越高。因此,通过类符——形符比率统计,可以观察文本的词汇密度。文本的词汇密度越大,即句子以及文章中类符数(不同词形)越多,文本的复杂内容一般就更多,最后导致全文理解的困难度就越高。由于完形填空题是一种删词填空的题型,解题时需要有充分的文本信息。因此,恰当的类符——形符比能够反映一篇文章的理解难度,可以用来判定文本是否适合作为完形填空题的命题。

下面是用ROST试卷词频统计软件对2005年至2010年高考英语江苏卷完形填空题所采用文本的类符数、形符数、类符——形符比以及它们的均数统计。如下表:

2005年至2010年高考江苏卷完形填空题文本的类符——形符比

类、形符年份 type token TTR 2005(全国) 112 227 49.34%2006(试点) 126 257 49.03%2007(江苏) 159 290 54.83%2008(江苏) 162 302 53.64%2009(江苏) 161 304 52.96%2010(江苏) 186 347 53.60%均数(江苏) 167 310.75 53.75%

由上表中统计数据可知,江苏卷2007至2010年完形填空题类符——形符比的平均值为53.75%,与兰春寿做的全国卷平均值为53.93%基本接近,说明江苏卷自主命题与全国卷完形填空题所采用文本的词汇密度大体相当。

由附图中的TTR值曲线图可以看出,2007年至2010年的江苏卷类符——形符比与2005年至2006年全国试卷的TTR值相比,江苏卷的TTR值明显高于这两年的全国卷。江苏自主命题后的完形填空文本的词汇密度保持在53%左右,其中2009年最低,2007年最高,总的难度保持稳定。

二、考点效度分析

对于如何衡量完形填空效度的问题,李筱菊教授创新性地提出了“考点效度”这一概念,并给它下了如下定义:完形填空考点效度指命题者在命题时应该对所要删除的项目进行考查分析和选择取舍,以尽量提高删除项目的考点层次,充分体现和利用完形填空的篇章特色、语境功能和综合特点,以便充分考查出受试者综合运用语言知识的能力。考点效度与考点层次和焦点因素密切相关。考点效度是指在用词填空时词的取舍决定需要受什么层次的语境的制约。她认为,完形填空题的考点层次从小到大可分为四层:(1)单词层次(W)。(2)词组层次(P)。(3)句子层次(S)。(4)语篇层次(D)。 考点层次与题目的效度密切相关,概括地说,高层次能包含低层次,而低层次却不能包含高层次。因此,考点层次越高,考点的效度就越高。焦点因素是测试的内容,包括语法因素(G)、惯用搭配因素(C)和意义因素(M)三种。一般说来,低层次的考点往往侧重于考语法而高层次的考点则往往更侧重于考意义。考点为考意义的题目同时也能考语法,而焦点为考语法的题目则不能同时考意义。因此,完形填空题的删词应尽量地把制约考点的范围扩大,使语境层次提高,这样才能提高试题的效度。完形填空题的优势就在于它的语篇功能,如果考点都是考查单词、词组或纯粹的语法的话,完形填空也就失去了它的综合考查的意义,成了离散式的语法填空题了。

利用李筱菊教授的考点效度的分析方法对2005年至2010年高考英语江苏卷完形填空题考点分析如附表。由表统计结果显示,从2005年到2010年,在20道题目中,达到语篇层次的题目最少为2008年的3道,占15%。达到语篇层次题目数最好的是2005年、2006年、2010年,有10道,占总数40%。达到句子层次最好的是2008年,有16道,占总数80%;最少的也达到11道,占55%。只达到词组层次的题目不多,2010年全部为语篇和句子层次上的。从2005年到2010年没有一个考点仅停留在单词层次。这六套试题中达到高档层次的题目占30%以上,句子层次的题目占60%以上,短语层次的低档题占的比例很小。

从各考点的焦点因素来看,把对意义的考查当做侧重点的题占了绝大部分,多数达90%以上。最少的2006年也达到15题,占总数的75%;2010年最多,有19题,占95%。将语法和惯用法作为考点来考的题目比较少,2006年、2007年相对多点,也只有2、3题。

江苏从2006年开始试点自主命题,2007年正式自主命题,通过分析可以看出,江苏自从自主命题高考试卷以来,英语试题高层次考点所占比例较高,各层次分配比例较合理,分布态势良好。试题的焦点因素中考查意义的题目也占绝大多数。命题者在删词时充分发挥了完形填空的综合功能和篇章功能。由此可见,2005年至2010年江苏高考英语卷完形填空题都能在语言层面以高层次的考点来考查学生综合运用语言的能力。

纵观2005年至2010年高考江苏卷英语完形填空题文本词汇和考点效度的分析,总的命题趋势为纯语法题和同义词辨析题减少,词汇重复率降低,词眼间互相呼应加强,因此句子层面和语篇层面的试题占了主要部分。尤其是2010年的试题,全部都是在句子和语篇层面上。这就要求我们在平时的教学中,加强对学生句子和语篇层面能力的培养。对命题人员而言,虽然完形填空题的优点在于它有语篇语境,增加语篇层面的考点可以提高考点效度,但实际上一篇出得很好的完形填空选择性试题中相当一部分题目只能达到句子层面。因此,在完形填空题命题中,句子或短语层面的题目相对较容易命题,要突破句子层面而达到语篇层面,则要费力费时。即便如此,考虑到考点效度和试题的命题质量,命题人员还是要有意识地做这种努力,以提高题目的命题质量和试题效度。

[1]车应森.高考英语议论型完形填空题分析[J].考试,2007,(3):39-43.

[2]兰春寿.高考英语完形填空题的效度分析[J].基础英语教育,2008,(10):75-78.

[3]李筱菊.语言测试科学与艺术[M].长沙:湖南教育出版社,1997.

[4]聂建中,赵秀红.高考英语完形填空的考点效度分析[J].教育理论与实践,2005,(25):54-56.

2005年至2010年高考江苏卷完形填空题文本的TTR值分布曲线

附表:2005年至2010年高考江苏卷完形填空题考点效度统计

G642

A

1673-0046( 2012)2-0134-03

猜你喜欢
效度考点命题
考点展示
考点展台
不等式(组)考点大扫描
《广东地区儿童中医体质辨识量表》的信度和效度研究
慈善募捐规制中的国家与社会:兼论《慈善法》的效度和限度
统计常见考点追踪
耳鸣残疾问卷中文版的信度和效度检验及其临床应用
复杂图形测验对区分阿尔茨海默病与非痴呆的诊断效度
2012年“春季擂台”命题
2011年“冬季擂台”命题