论文部分内容阅读
【摘要】阅读能力测试是我国英语测试体系中很重要的一部分，其中阅读理解这一题型是测量学生阅读能力的一种最常用方法，因此实现对英语测试中阅读理解题型的难度控制是确保试题质量的关键因素。本文从题目因素和文本因素两个方面来探讨其对阅读理解测试难度的影响，研究了各因素对测试难度发挥作用的程度和效果，为测试设计、题库建设及日常教学提供参考。
【关键词】英语阅读理解测试难度；文本特征；题目特征
【作者简介】王婉宁，曼彻斯特大学人文学院。
一、研究背景
2018年《中国英语能力等级量表》为国内各种英语考试提供了科学的能力测评标准，同时，也对统一我国英语测试的难度标准和建立分级题库提出了新的要求。而阅读理解在我国英语测试体系中占有很大一部分比重，因此实现对英语测试中阅读理解题型的难度控制是稳定英语测试整体难度系数的基础。鉴于此，充分了解影响阅读理解测试难度的因素对设计出高信度、高效度和高区分度的高质量试题具有重要的作用，同时也成为学界和测试设计者们普遍关注的课题。
在以往的相关研究中，大多数都集中在文本难度对阅读理解测试难度的影响上，也有一部分是探讨题目因素对阅读理解测试结果有效性产生的影响。阅读理解测试的构成包括本文和题目两部分，它们分别呈现出不同的文本特征和题目特征。因此，如果只研究某一个方面的特征对阅读理解测试结果产生的影响显然是不够全面客观的。因此，在本研究中文本特征和题目特征都将作研究对象，通过实证研究找到两者与阅读理解测试整体难度的关系，从而为命题设计及题库分级建设提出参考性建议。
在测试领域，对英语阅读理解测试难度的界定标准一直存在不同的声音。常见的界定标准，特别是一些分级阅读材料的难度界定是以文本可读性为标准的，即以篇章长度、句长、词长、 语篇中的生词数量等统计数据做量化的评估。现在比较流行的文本难度测量工具Coh-Metrix以及由中国自主开发的“英语阅读分级指难针”平台都是文本可读性测算的代表。对阅读文本本身的难度的来说，“英语阅读分级指难针”平台是可靠的，但它却不能作为整个阅读测试的难度界定标准。然而，很多学者都提出在观察阅读理解测试的过程中，有时候会出现文本难度差别很大的两篇文章，其试题的难易度指数却很可能由于问题设计的原因而彼此接近。由此可见，阅读测试难度的决定因素关键之处可能不仅在于文本难度，阅读理解问题命制的形式、技巧都可能对题目的难度起决定作用。
二、研究问题
通过调查国内外现有研究发现：随着各种语料库统计软件和语言分析软件的发展，以文本难度作为主要变量研究影响英阅读理解测试难度的文献有上升趋势，例如陈爱文探究文本难度对高中生英语阅读理解影响，而另外一些学者提出了不同的观点，如马瑞认为试题难度是在阅读理解测试中影响难度的决定性因素。阅读理解测试专家Alderson曾经提出：“阅读理解测试的难度取决于文本和题目两者间的关系，题目的设置和文本有同样重要的作用”，文本因素与题目因素是交织在一起密不可分的，单纯的探讨其中一方的作用都是不可取的，而是应该着力探讨两者之间的交互作用。因此，本文研究的重点在于究竟是哪些因素影响了阅读测试题的难度，继而对学生的正确理解设置了障碍。基于此，本研究提出以下两个研究问题：
1.文本特征对阅读理解测试难度有怎样的影响？
2.题目特征对阅读理解测试难度有怎样的影响？
三、研究设计
依据研究问题，本研究中阅读理解测试难度的测量采取了因素分析的方法。陈旻曾在2014年曾进行过一项关于英语专业四级标准化阅读理解测试难度的研究，提出基于Embretson认知加工模型的阅读理解问题难度系数，为文本特征和问题特征都进行了赋值量化，进而通过数据统计的方式计算出两者与试题难度之间的相关性。本研究借鉴这一思路，但是对于文本特征和题目特征的难度系数的量化本研究提出与其不同的方式。
文本特征层面，本研究以2015-2019年高考英语试卷为研究对象，以“英语阅读分级指难针”为研究工具，测量其阅读理解文本难度，并利用该平台的三个核心模块：词汇难度、句法难度、文本难度组成分析文本特征影响因素的框架，作为影响阅读理解测试难度的子因素。题目特征层面，本研究选取Bachman和Palmer构建的任务特征框架中的三个方面：阅读能力、范围、直接程度，作為影响阅读理解测试难度的子因素。据此，本研究制定了一个适合该套试卷阅读理解单选题型的分析框架。
课题组从“猿题库”APP中获取2015-2019年高考英语全国卷的阅读理解单选题型共计14套试卷，56篇短文以及所对应的210道阅读题目，将其作为研究对象。“猿题库”APP中通过大数据技术直接提供出学生回答每道题目的正确率，根据测试难度的定义，本研究直接将获取到的正确率作为该道题目的测试难度系数，此系数为题目特征层面上的因变量。根据本研究制定的2015-2019年高考英语全国卷的阅读理解单选题型的分析框架，在题目特征层面，阅读能力、范围、直接程度作为因变量，是影响阅读理解测试难度的子因素。由于阅读能力、范围、直接程度的确定属于定性分析，因此，本研究邀请10名5年以上教龄的英语教师，对样本中210道题目从所考察的阅读能力高低、定位正确选项需要覆盖原文的范围、正确选项与原文之间的直接程度三个层面进行赋值，最后对10名教师的赋值结果进行统计，每个子因素的赋值结果依据超半数以上教师共同判定的结果为准。将56篇文本输入到“英语阅读分级指难针”平台中测算每篇文本在词汇难度、句法难度、文本难度三个维度上的指标，将其作为自变量。每篇文本对应3-4道题目，因此本研究将计算出这3-4道题目的测试难度的平均值，作为文本的测试难度，也就是文本特征层面上的因变量。
题目所考查的阅读能力高低与正确选项对原文的依赖程度这两个因素对测试难度的影响极为显著，而且两者与测试难度的相关系数相当，具体表现为考查阅读高层能力的题目难度更大，正确选项对原文是间接依赖关系的题目难度更大。而定位正确选项需要覆盖原文的范围这一因素对测试难度的影响是不显著的，推测可能由于错误选项的干扰等因素造成实验结果与预期不符。相比较而言，文本特征对问题的难度影响较小，其中句法难度对测试难度具有显著的预测作用，句法结构越复杂测试难度就越大。文本难度也对测试难度造成一定的影响，相比较而言，词汇难度与测试难度的相关性是不显著的，推迟原因与实验对象均来自高考英语全国卷有关。 四、研究结论
根据阅读理解测试专家Alderson的观点：“阅读理解测试的难度取决于文本和题目两者间的关系，题目的设置和文本有同样重要的作用”，文本因素与题目因素是交织在一起密不可分的，单纯的探讨其中一方的作用都是不可取的，因此，本研究重点探讨，在文本难度和题目难度的双重作用下，哪些子因素对阅读理解整体测试难度的影响较大。
具体来说，在文本特征层面上的各个子因素中，句法结构的复杂度和文本整体的复杂度对阅读理解整体的测试难度影响较大，进而对学生正确理解文章的内容构成了一定障碍。在题目特征层面上，题目考察的阅读能力高低和正确选项对原文的依赖程度对阅读理解测试难度发挥作用的程度和效果较大，因此命题人只有控制好这两个因素，才能更好地对试题进行设计和改编，这不仅有助于稳定英语试卷整体难度系数，更有利于标准化阅读理解测试分级方法，从而促进题库建设。
1.在文本特征层面上，句法难度是影响阅读理解测试难度的主要因素。文本特征的三个变量中，对测试难度影响力由大到小依次是句法难度——文本难度——词汇难度，前两者都与测试难度有显著性相关。具体地说，句法难度对测试难度的影响最为显著，表现为句法难度越大的文本其测试难度也越大，句法难度越小的文本，其测试难度也越小，两者呈现正相关关系。文本特征对测试难度的影响也较为显著，而词汇难度对测试难度有十分微弱的影响，可以说，测试难度不是受词汇难度这一单一变量所影响的，而是受词汇难度、句法难度、文本长度三者之间的交互作用所影响。
2.在题目特征层面上，影响阅读理解测试难度的主要因素是直接程度。在题目特征的三个变量中，解答正确选项在文本中定位的覆盖范围与测试难度是几乎不具有相关性的，题目所考察阅读能力的高低和目标答案的直接程度对测试难度的预测作用是显著的，其中直接程度是最大的影响因素。具体表现在，目标答案对于原文是直接依赖的题目，难度系数较大，也就是说测试难度较小，而目标答案对于原文是间接依赖关系的题目，难度系数往往较小，也就是说测试难度较大。
3 .变化文本句法难度和选项直接程度是控制阅读理解难度的重要途径。
总体而言，运用SPSS对2015-2019年高考英语全国卷中单选式阅读理解试题进行的数据分析可以为我们研究标准化阅读理解测试提供控制试题难度的新思路。从题目和文本两个方面来考虑影响阅读理解测试难度的因素，控制各因素对测试难度发挥作用的程度和效果，為测试设计、题库建设及日常教学提供参考。
参考文献：
[1]陈爱文.文本难度对高中生英语阅读理解影响的研究[D].闽南师范大学,2016.
[2]陈旻.英语专业四级阅读理解效度研究——基于认知角度的分析[J].外语教育研究,2014(1):45-50.
[3]马瑞.阅读理解测试中的难度因素探索[J].英语教师,2012,12(3): 57-61.
[4]Alderson, J. C. Assessing Reading[M]. Cambridge: Cambridge University Press, 2000:113.
[5]Alderson, J. C.
【关键词】英语阅读理解测试难度；文本特征；题目特征
【作者简介】王婉宁，曼彻斯特大学人文学院。
一、研究背景
2018年《中国英语能力等级量表》为国内各种英语考试提供了科学的能力测评标准，同时，也对统一我国英语测试的难度标准和建立分级题库提出了新的要求。而阅读理解在我国英语测试体系中占有很大一部分比重，因此实现对英语测试中阅读理解题型的难度控制是稳定英语测试整体难度系数的基础。鉴于此，充分了解影响阅读理解测试难度的因素对设计出高信度、高效度和高区分度的高质量试题具有重要的作用，同时也成为学界和测试设计者们普遍关注的课题。
在以往的相关研究中，大多数都集中在文本难度对阅读理解测试难度的影响上，也有一部分是探讨题目因素对阅读理解测试结果有效性产生的影响。阅读理解测试的构成包括本文和题目两部分，它们分别呈现出不同的文本特征和题目特征。因此，如果只研究某一个方面的特征对阅读理解测试结果产生的影响显然是不够全面客观的。因此，在本研究中文本特征和题目特征都将作研究对象，通过实证研究找到两者与阅读理解测试整体难度的关系，从而为命题设计及题库分级建设提出参考性建议。
在测试领域，对英语阅读理解测试难度的界定标准一直存在不同的声音。常见的界定标准，特别是一些分级阅读材料的难度界定是以文本可读性为标准的，即以篇章长度、句长、词长、 语篇中的生词数量等统计数据做量化的评估。现在比较流行的文本难度测量工具Coh-Metrix以及由中国自主开发的“英语阅读分级指难针”平台都是文本可读性测算的代表。对阅读文本本身的难度的来说，“英语阅读分级指难针”平台是可靠的，但它却不能作为整个阅读测试的难度界定标准。然而，很多学者都提出在观察阅读理解测试的过程中，有时候会出现文本难度差别很大的两篇文章，其试题的难易度指数却很可能由于问题设计的原因而彼此接近。由此可见，阅读测试难度的决定因素关键之处可能不仅在于文本难度，阅读理解问题命制的形式、技巧都可能对题目的难度起决定作用。
二、研究问题
通过调查国内外现有研究发现：随着各种语料库统计软件和语言分析软件的发展，以文本难度作为主要变量研究影响英阅读理解测试难度的文献有上升趋势，例如陈爱文探究文本难度对高中生英语阅读理解影响，而另外一些学者提出了不同的观点，如马瑞认为试题难度是在阅读理解测试中影响难度的决定性因素。阅读理解测试专家Alderson曾经提出：“阅读理解测试的难度取决于文本和题目两者间的关系，题目的设置和文本有同样重要的作用”，文本因素与题目因素是交织在一起密不可分的，单纯的探讨其中一方的作用都是不可取的，而是应该着力探讨两者之间的交互作用。因此，本文研究的重点在于究竟是哪些因素影响了阅读测试题的难度，继而对学生的正确理解设置了障碍。基于此，本研究提出以下两个研究问题：
1.文本特征对阅读理解测试难度有怎样的影响？
2.题目特征对阅读理解测试难度有怎样的影响？
三、研究设计
依据研究问题，本研究中阅读理解测试难度的测量采取了因素分析的方法。陈旻曾在2014年曾进行过一项关于英语专业四级标准化阅读理解测试难度的研究，提出基于Embretson认知加工模型的阅读理解问题难度系数，为文本特征和问题特征都进行了赋值量化，进而通过数据统计的方式计算出两者与试题难度之间的相关性。本研究借鉴这一思路，但是对于文本特征和题目特征的难度系数的量化本研究提出与其不同的方式。
文本特征层面，本研究以2015-2019年高考英语试卷为研究对象，以“英语阅读分级指难针”为研究工具，测量其阅读理解文本难度，并利用该平台的三个核心模块：词汇难度、句法难度、文本难度组成分析文本特征影响因素的框架，作为影响阅读理解测试难度的子因素。题目特征层面，本研究选取Bachman和Palmer构建的任务特征框架中的三个方面：阅读能力、范围、直接程度，作為影响阅读理解测试难度的子因素。据此，本研究制定了一个适合该套试卷阅读理解单选题型的分析框架。
课题组从“猿题库”APP中获取2015-2019年高考英语全国卷的阅读理解单选题型共计14套试卷，56篇短文以及所对应的210道阅读题目，将其作为研究对象。“猿题库”APP中通过大数据技术直接提供出学生回答每道题目的正确率，根据测试难度的定义，本研究直接将获取到的正确率作为该道题目的测试难度系数，此系数为题目特征层面上的因变量。根据本研究制定的2015-2019年高考英语全国卷的阅读理解单选题型的分析框架，在题目特征层面，阅读能力、范围、直接程度作为因变量，是影响阅读理解测试难度的子因素。由于阅读能力、范围、直接程度的确定属于定性分析，因此，本研究邀请10名5年以上教龄的英语教师，对样本中210道题目从所考察的阅读能力高低、定位正确选项需要覆盖原文的范围、正确选项与原文之间的直接程度三个层面进行赋值，最后对10名教师的赋值结果进行统计，每个子因素的赋值结果依据超半数以上教师共同判定的结果为准。将56篇文本输入到“英语阅读分级指难针”平台中测算每篇文本在词汇难度、句法难度、文本难度三个维度上的指标，将其作为自变量。每篇文本对应3-4道题目，因此本研究将计算出这3-4道题目的测试难度的平均值，作为文本的测试难度，也就是文本特征层面上的因变量。
题目所考查的阅读能力高低与正确选项对原文的依赖程度这两个因素对测试难度的影响极为显著，而且两者与测试难度的相关系数相当，具体表现为考查阅读高层能力的题目难度更大，正确选项对原文是间接依赖关系的题目难度更大。而定位正确选项需要覆盖原文的范围这一因素对测试难度的影响是不显著的，推测可能由于错误选项的干扰等因素造成实验结果与预期不符。相比较而言，文本特征对问题的难度影响较小，其中句法难度对测试难度具有显著的预测作用，句法结构越复杂测试难度就越大。文本难度也对测试难度造成一定的影响，相比较而言，词汇难度与测试难度的相关性是不显著的，推迟原因与实验对象均来自高考英语全国卷有关。 四、研究结论
根据阅读理解测试专家Alderson的观点：“阅读理解测试的难度取决于文本和题目两者间的关系，题目的设置和文本有同样重要的作用”，文本因素与题目因素是交织在一起密不可分的，单纯的探讨其中一方的作用都是不可取的，因此，本研究重点探讨，在文本难度和题目难度的双重作用下，哪些子因素对阅读理解整体测试难度的影响较大。
具体来说，在文本特征层面上的各个子因素中，句法结构的复杂度和文本整体的复杂度对阅读理解整体的测试难度影响较大，进而对学生正确理解文章的内容构成了一定障碍。在题目特征层面上，题目考察的阅读能力高低和正确选项对原文的依赖程度对阅读理解测试难度发挥作用的程度和效果较大，因此命题人只有控制好这两个因素，才能更好地对试题进行设计和改编，这不仅有助于稳定英语试卷整体难度系数，更有利于标准化阅读理解测试分级方法，从而促进题库建设。
1.在文本特征层面上，句法难度是影响阅读理解测试难度的主要因素。文本特征的三个变量中，对测试难度影响力由大到小依次是句法难度——文本难度——词汇难度，前两者都与测试难度有显著性相关。具体地说，句法难度对测试难度的影响最为显著，表现为句法难度越大的文本其测试难度也越大，句法难度越小的文本，其测试难度也越小，两者呈现正相关关系。文本特征对测试难度的影响也较为显著，而词汇难度对测试难度有十分微弱的影响，可以说，测试难度不是受词汇难度这一单一变量所影响的，而是受词汇难度、句法难度、文本长度三者之间的交互作用所影响。
2.在题目特征层面上，影响阅读理解测试难度的主要因素是直接程度。在题目特征的三个变量中，解答正确选项在文本中定位的覆盖范围与测试难度是几乎不具有相关性的，题目所考察阅读能力的高低和目标答案的直接程度对测试难度的预测作用是显著的，其中直接程度是最大的影响因素。具体表现在，目标答案对于原文是直接依赖的题目，难度系数较大，也就是说测试难度较小，而目标答案对于原文是间接依赖关系的题目，难度系数往往较小，也就是说测试难度较大。
3 .变化文本句法难度和选项直接程度是控制阅读理解难度的重要途径。
总体而言，运用SPSS对2015-2019年高考英语全国卷中单选式阅读理解试题进行的数据分析可以为我们研究标准化阅读理解测试提供控制试题难度的新思路。从题目和文本两个方面来考虑影响阅读理解测试难度的因素，控制各因素对测试难度发挥作用的程度和效果，為测试设计、题库建设及日常教学提供参考。
参考文献：
[1]陈爱文.文本难度对高中生英语阅读理解影响的研究[D].闽南师范大学,2016.
[2]陈旻.英语专业四级阅读理解效度研究——基于认知角度的分析[J].外语教育研究,2014(1):45-50.
[3]马瑞.阅读理解测试中的难度因素探索[J].英语教师,2012,12(3): 57-61.
[4]Alderson, J. C. Assessing Reading[M]. Cambridge: Cambridge University Press, 2000:113.
[5]Alderson, J. C.