Validation study of the CET compound dictation
作者： 沈蕾著
出版社：南京大学出版社,2013
简介：
大学英语四、六级考试(CET)从1987年开始实施，至今已成为国内规模最大、影响范围最广的外语考试之一。测试界认为，越是高风险的考试，对考试的效度验证要求越高。因此，运用合适的效度理念和分析技术对四、六级考试进行研究，具有理论价值和现实意义。
复合式听写是自1997年开始，CET听力部分增加的新题型，目前相关效度研究数量较少，研究方法也趋于单一。测试构念的建立、实验研究、有关测试中相关因素对测试难度和区分度的研究以及考生答题过程分析都是效度研究的重要方法，但是有关复合式听写的效度研究目前主要局限于相关系数分析，上述方法鲜有涉及。相关分析是效度研究的主要方法之一，但是完全根据简单的相关系数难以推论出令人信服的结论。
关于复合式听写这一听力题型是否有效测试了考生的听力，以及测试了哪些听力技能或者其他语言技能和策略技能，现有的研究还没有定论。因此本文的目的是运用多种研究方法，从多个维度检测复合式听写的效度。
《大学英语考试复合式听写的效度研究》首先通过相关的文献综述和复合式听写的内容分析提出了假设性的复合式听写能力构念，该构念包括语言能力和策略能力两个方面，然后从多个层面搜集证据来验证这一构念的合理程度，最后根据发现成果对这一假设性的听写能力构念进行了修改和完善。
《大学英语考试复合式听写的效度研究》对国内某重点大学166名非英语专业新生进行了一系列的测试，并且对这些测试分数用SPSS分析软件进行了多维度的定量和定性统计分析。
定量分析包括对考试成绩的相关性数据分析、因子分析、回归分析和差异显著性检验。这些分析探索了不同的测试方法(包括不同的输入方式和不同的答题方式)对考生答题效果的影响；复合式听写题项和大学英语四、六级考试中其他题项(包括写作、阅读、听力、完形、翻译)的相关关系；听写填空(包括单词填空和句子填空)中不同的语法特征(包括词汇、语音和句法)以及考生的听力水平这两个双重因素对考生的听写成绩所产生的影响。
定性分析主要是采用“内省法”对9位考生的“
即刻回顾”口述报告进行分析，通过考生答题的心理过程分析揭示考生在听写过程中是通过什么途径、以什么方式以及经过了哪些步骤最终获取答案的。定性分析结果从另一个侧面对CET复合式听写的效度进行了检验。
定量和定性分析的具体发现如下：
1.复合式听写只在一定程度上考核了考生理解篇章基本内容的能力。听写的第二部分(即填写句子部分)成绩依赖于对篇章基本内容的理解，但是第一部分(即填写单词部分)成绩和考生理解篇章基本内容的能力没有直接关联。第一部分的成绩和考生理解单词的能力以及其他听力技能有关。
2.复合式听写考核了考生总体听力能力。听力理解和复合式听写的两个部分属于共同的因子，听力理解的成绩也是对复合式听写成绩具有预测力的唯一因素。复合式听写的构念中不应该包括阅读能力或写作能力。
3.听写段落中所填写的单词或句子的大部分语法特征对测试难度和区分度产生了影响。这些特征包括：词汇(词频、词形变化和词块)、语音(发音变化如连读、吞音等)以及句法(句子长度和句法复杂程度)
。
4.考生在复合式听写过程中确实遇到了一系列问题，并且使用了不同的策略来处理这些问题：
(1)考生遇到了语言上的问题，包括对基本内容的理解、重要细节的理解和语法特征的理解和运用。
他们同时也遇到了情感上的问题。中低水平考生在复合式听写中容易产生焦虑情绪，影响到他们听力能力的正常发挥。
(2)成绩高的考生在解决语言问题时能更多地使用有效的听力策略(包括认知和元认知策略)。不同水平的考生也都尝试了与听力理解无关的应试技巧，但是这些技巧的运用整体而言并没有有效地提高他们的复合式听写成绩。
上述研究发现表明：复合式听写这一听力题型是有效的听力测试，整体而言考核了所预期的听力技能和策略技能。复合式听写中考生不能以应试技巧代替以听力理解为目的的听力技能和听力策略，即他们之间没有互补关系。当然这一听力测试题型并非完美无缺，主要缺陷在于其第一部分(即填写单词部分)所选择的填空单词中词汇类型过于单一，不能有效地影响测试的难易度，也缺乏区分度。
本研究的发现对复合式听写测试的设计提供了参考：
选择填空单词时，需要考虑到不同单词的语法特征：词长方面，应避免选择短词，特别是发音和拼写高度吻合的短词；词频和词形变对低水平考生的影响要大于对高水平考生的影响；语音变化和词块都具有很强的区分力，但是语音变化会增加听写难度，而词块会降低听写难度；建议选词时增加词汇类型。
在选择填空句子时，需要考虑到句子的长度、句子结构的复杂程度以及和上下文在意义和结构上的关联，因为这些特征都会影响到听力测试的难度。
同时，本文的研究成果在测试理论、研究方法和教学层面上都有一定的启示意义，为听写能力构念研究和其他测试效度研究提供了参考，对外语听力教学提供了启示。本书由沈蕾著。
