基于核心素养的中考英语命题内容效度分析-以2021-2023年湖北省三市中考英语命题为例一、研究背景义务教育英语课程标准（2022年版）（以下简称“课标”；教育部，2022,2）凝练了义务教育英语课程要培养的核心素养，明确核心素养在义务教育阶段要起到统领作用。随着课标的颁布，初中英语教学与评价的标准也产生了变化。课标明确提出“要积极探索和制定与素养立意原则相匹配的命题规划和考试题型，支持和引导课程标准的实施”。如何开展基于核心素养的英语考试与测评是新课标落地后需要研究和解决的一个重要课题（程晓堂，2017，13）。基于核心素养考试命题总的原则是，通过考试准确反映学生已经具备的学科核心素养（梅德明，2019，267）。效度是评价考试质量高低的重要指标。语言测试的效度经历了从分类效度观、整体效度观到AUA模式（Bachman&Palmer，2016，102）的发展。教育与心理测试标准中规定效度的证据来源于：1.基于测试内容的证据；2.基于答题过程的证据；3.基于考试内部结构的证据；4.基于考试后果的证据。鉴于研究的可行性，本文使用“基于测试内容的证据”对中考英语试题的效度进行研究。二、湖北省英语中考命题简析2022年3月29日，教育部办公厅发布“关于做好2022年中考命题工作的通知”，明确指出到2024年实现中考省级统一命题，并严格依据课程标准命题，科学设置试卷难度。2024年是湖北省中考英语省级统一命题的第一年，如何贯彻教育部中考命题通知的精神，命制符合核心素养导向和全省各地区教育实情的中考英语试题，发挥考试的正面反拨效应并积极作用于教与学，是全省英语教师关切的问题。本文以课标对核心素养内涵的具体描述为测量标尺，对2021-2023年湖北省武汉、襄阳、黄冈三市中考英语试题的内容效度进行分析（不含听力和写作），为湖北省中考英语全省统一命题和初中英语教学提供数据参考。三、通过分析试题的内容效度测评学生的英语学科核心素养1.中考英语试题题型分析英语试题题型是英语教育测评的工具，承担着检测相应的英语教学目标实现程度的任务（苏峻、李小芬，2015，30）。不同的题型承担着不同的检测任务。在实际测试中，试题的内容效度主要靠命题和审题时严格遵守大纲要求（本文指课标），内容效度只涉及试题与课标的关系（李筱菊，1997，50）。中考英语试题在强调考查英语语言运用能力的同时，还着重考察词汇量、语法等英语语言基础知识，目的是为高中进一步的学习打下基础。笔者通过汇总2023年湖北省各地市以及北京市、上海市、广州市、苏州市和杭州市中考英语考试题型时发现：表12023年部分市区中考试题结构一览表城市总分题型（分值）听+（说）单项选择完型填空阅读理解间接口语考查单词拼写完成句子短文填词书面表达武汉120251 151 152 15/2 51 1015 1襄阳12025+（15）1 101 102 10+1 5/0.5201 1015 1黄冈120251 101 152 19/1 71 1015 1宜昌12040（听说一体）/1 152 15/2 51 1015 1恩施120250.5 101 102 20/1 5 + 2 51 1015 1北京10040（听说一体）0.5 121 82 13 + 10/10 1上海15025+（10）1 152 612 + 12/8 + 1414+820 1广州12030（听说一体）1 151 102 15+1 5/2 51 515 1南京12020+（10）1 151 1015 +101 51 51 51 1015 1苏州13020+（10）/1 10215+12/1 131 1025 1杭州12030/1 15215+2 5/1 10/1 1015 1无论是湖北省内还是全国大多数市区的中考英语试题，都涉及对词汇和语法的考查。在中考英语试题中测试语法与词汇对教学有积极的反拨作用，但是不宜给予其太大的比例（Hughes，2000，25）。语法和词汇应在语境中考查并且词汇测试应把测试的重点放在对词义的考察上（刘润清、韩宝成，2000，91）。2.各题型内容效度的分析方法（1）分析框架本文按照课标对核心素养内涵的划分和对学业水平考试的命题规划，结合英语学科能力要素内涵及其表现框架（王蔷等，2018，16），将框架（见附录）中的学习理解能力（A）、应用实践能力（B）归纳为课标对语言能力的要求，迁移创新能力（C）归纳为课标对思维品质的要求；试题题型归纳为核心活动主题。在核心内容主题和核心文化意识主题方面，沿用课标对主题内容的分类和对核心文化意识的分类。完形填空考点效度分类下的词组层次、句子层次和语篇层次对学生能力的考查分别对应A2、B3-B5和C1能力。将阅读理解题项考查能力中的单一信息获取与提取对应A3能力、细节理解对应A3/A4能力、标题归纳对应B5能力、词/句义猜测对应B1/C1能力、推理判断和主旨大意对应C1能力、作者意图对应C3能力。考查能力点之间若有重叠，按照较高的能力层次进行统计计算，因为按照完形填空考点效度理论，考查较高层次的能力必然包含对较低层次能力的考查。本文认为这一理论不仅适用于完型填空题型，也适用于其他题型。语言知识题型方面，将选择填空和词语短语填空对应A1-A4能力，将短文填空对应于A2+A3+B5能力。（2）分析方法本文将采用考点效度理论（李筱菊，1997，308）、自然语言处理工具Coh-Metrix对三市中考英语试题的完型填空部分、阅读理解部分和短文填词部分从考点层次、焦点因素和文本语篇特征项目能力考查的角度进行分析，并将分析结果按照体现英语学科核心素养的维度进行统计分析。语言知识题型按照是否在语境和语义层面对词汇和语法考查的维度进行分析。四、结果与讨论本研究使用基于网络的文本分析工具Coh-Metrix对2021-2023三年湖北省三市中考英语试题中的语篇特征（阅读理解、完型填空和短文填词）进行分析，并对分析数据进行梳理提取，归纳成表格（见表2和表4）。文本长度即语篇的单词数量。词汇复杂度体现了语篇词汇的多样性，当长度相似的语篇进行比较时，TTR数值是最有价值的。主要动词前包含的平均单词数是对工作记忆负荷的一个很好的指标，相邻句子的句法相似度数值越大，语篇在句法层面越简单，读者更易于理解（黄丽燕、史碧冰，2020，54）。相邻句子语义相似度和相邻段落语义相似度的数值越大，语篇衔接的越好。可读性包括Flesh易读度指数和Flesh-Kincaid等级水平。其中Flesh易读度指数数值越大，语篇难度越小。Flesh-Kincaid则提供了语篇难度与美国等级学校水平的对应值，数值越大，语篇越难。一般来讲，一个语篇一般要有200个字以上，才能有效使用Flesh-Kincaid等级水平。1.阅读理解（1）语篇特征使用Coh-Metrix对三市阅读理解语篇的分析结果如表2所示。三市阅读理解语篇A、B、C在语篇长度上呈递增的趋势，这也反映了命题者在对三个语篇的考查要求上是逐渐加大的。D篇是选句填空的题型，主要考查学生对文章内容的概况和对文章结构的推理。这种题型考查学生核心素养的高层次能力，所以在语篇长度上要短于C篇阅读理解，这样才能保证学生有充分的时间理解语篇。在词汇复杂度、句法复杂度和衔接方面，四个语篇保持了良好的一致性。但2021年一市的阅读理解A篇在衔接（相邻句子语义相似度）和可读性（Flesh-Kincaid等级水平为11.17） 的数值不稳定，异常高于平均值。这可能和A篇的语篇类型是非连续性文本有关，但是非连续性文本可以通过单词释义和图片信息对文章进行补偿性说明，这也体现了当今社会中意义与信息的传递呈现出多模态的趋势，很多信息可以来源于“看”（梅德明、王蔷，2018，21）。语篇可读性方面，四个语篇的Flesh-Kincaid等级水平均值都不超过10（对应高一水平）。综上所述，三市阅读理解语篇在文本难度上相对稳定，符合初中生的认知水平，为阅读理解题项考查学生的核心素养提供了保证。表2三市2021-2023年中考英语阅读理解语篇特征语篇A语篇B语篇C语篇D均值标准差均值标准差均值标准差均值标准差文本长度172.1129.07269.7837.29302.3330.91234.3320.58词汇复杂度（TTR值）0.640.050.530.060.580.030.540.04句法复杂度句子长度11.804.7911.783.6214.401.7914.504.09主要动词前包含的平均单词数量3.452.923.561.403.920.682.970.55名词短语所包含平均修饰语数量1.010.110.660.170.750.130.810.26相邻句子的句法相似度0.110.030.140.040.120.030.130.05衔接平均每1000词中连词出现的比例58.2411.7981.2229.6286.8213.44100.0319.65相邻句子语义相似度0.120.030.140.040.120.020.120.04相邻段落语义相似度7.9723.260.270.080.370.160.370.08可读性Flesh易读度指数66.138.3480.339.6272.517.4569.3010.37Flesh-Kincaid等级水平6.922.284.952.176.701.367.092.04（2）题项分析表3根据阅读理解考点设置所对应核心素养考查的维度，将2021-2023年三市共152道阅读理解多项选择题按照A、B、C、D语篇进行分类，得出各语篇在核心素养各维度的考查比例。由表3可见，语篇A着重考查学生单一信息获取与提取的能力，此外还考查了推理判断和细节理解的能力。语篇B对各种能力都有所考查，但主要考查细节理解和推理判断的能力。语篇C从难度设置来讲，应侧重考查C1-C3能力，但对单一信息获取与提取和细节理解能力考查的频度超过对C1-C3能力的考查。整体而言，三市阅读理解能力多项选择题对A能力考查较多，对C能力考查相对较少。三市三年共152道题中只有3道题对作者意图进行了考查。D篇集中考查核心素养的高阶能力。各能力维度间的考题比例失衡，没有对体现核心素养各维度