为测试阅读理解能力而分析题目

测试题由电脑向接受测试者随机显示。由于每个被试者的题目都不同,所以不能单纯以正确量和正确率来评估。为此在评估中使用了项目反应理论(item response theory, IRT,又称潜在特质理论)。该理论也应用在托福等考试上。根据IRT可推算出“能力值”,它是一种相对的值,表示不同题目类型下某一被试人在所有被试者中所处的位置。比如有两道选择题,每道题有四个选项(题A和题B),两道题的正确答案都是“2”。我们以这些题目的能力值为横轴,以答案选项的选择比例为纵轴画图,得到以下图表。

题A是能力值越高的被试者选对答案的比例越高,因此可以说这道题适合用来测试能力的高低。与此相对,题B是能力值越高的人选对答案的比例越低,或是无论能力值高低被试者的正确率相差无几,我们就很难说这道题出得好了。

RST会在做最终分析之前,筛除这些题目。RST还会分析在电脑上的答题速度和正确率的关系,对疑似不读题就随便做答的被试者的结果也予以筛除。不过,这只是RST题目分析和评估方法中的很小的一部分。

正确率只根据各被试者回答的题目来计算。即如果规定时间内只解答了三道题,则只计算三道题的正确率。测试前会让被试者做例题,公布正确答案后,会确认被试者对接下来要做的测试题是否已经理解,再正式进入测试。

多数初中生阅读能力堪忧

▽ “对应关系”的考题举例Alex是男女通用的名字,它是女性名字Alexandra的昵称,也是男性名字Alexander的昵称。根据上文,从选项中请选择最适合的一项填空。Alexandra的昵称是(      )。

①Alex ②Alexander ③男性 ④女性

答案是①。37.9%的初中生、64.6%的高中生答对。

▽ “同义句判断”的考题举例幕府于1639年驱逐葡萄牙人,并向大名下达警戒沿岸的命令。上文和下文的意思是否相同?请从“相同”“不同”中选择答案。

1639年葡萄牙人被驱逐,大名命令幕府警戒沿岸。

答案是“不同”。57.4%的初中生和72.3%的高中生答对。这道题只有两个选项,就算是扔骰子也有50%的正确率,而初中生的成绩也只是略高几分而已。

RST得出了“不比扔骰子(随机)乱选好多少的被试者的比例”。从结果可知,在推论、确定具体例子类别、同义句判断方面有大约半数初中生,在可以说是基础阅读理解能力的对应、主谓关系方面有15%的初中生,其正确率很难说比随意乱选的正确率高。此外,我们也知道了RST测试的基础阅读能力和高中入学考试的学力标准化值之间有很强的关联性。

高中学力标准化值和RST能力值的相关系数高达0.8,可媲美身高体重的相关程度了。也就是说阅读能力高的孩子能去好学校。阅读能力是提高学习能力的前提。