読解力測定のために問題を分析する

問題はコンピュータで無作為に受検者に提示される。受検者によって問題が異なるため、単純に正答数や正答率で評価できない。そのため、評価はIRT（項目反応理論）で行われている。TOEFLなどでも使用されている理論だ。このIRTに基づいて、問題タイプごとに受検者が受検者全体の中でどの位置にあるか相対的な値で示した「能力値」を推定する。たとえば、4択の問題が2つ（問題A、問題B）あったとする。両方とも正解は「2」だとする。それらの問題の能力値を横軸にし、解答の選択肢の選択割合を縦軸にグラフを描き、以下のようになったとする。

問題Aでは、能力値が高い受検者ほど、正答を選ぶ割合が高くなっているため、この問題は測りたい能力を測るのに適切だといえる。それに対して、問題Bのように能力値が高いほど正答を選ぶ割合が低くなっていたり、能力値が低い受検者と高い受検者とで正答率が変わらなかったりするものは、よい問題とはいえなくなる。

RSTでは、そういう問題は最終的な分析の前に抽出し、除外している。また、コンピュータを用いたテストでの回答速度と正答率の関係を見て、問題を読まずに適当に回答したと思われる受検者の結果も除外する。ただし、これはRSTにおける問題分析や評価方法のほんの一部に過ぎない。

正答率は、各受検者が解答した問題のみで算出している。時間内に3問しか解答できなければ、3問のみの中の正答率ということだ。テストの前には例題を解いてもらい、正解を示し、これから始まるテストがどんなものか理解できたかどうか確認してからテストがスタートする。

多くの中学生が読めていなかった

▽「係り受け」の問題例Alexは男性にも女性にも使われる名前で、女性の名Alexandraの愛称であるが、男性の名Alexanderの愛称でもある。この文脈において、以下の文中の空欄に当てはまる最も適当なものを選択肢のうちから1つ選びなさい。Alexandraの愛称は（　　　）である。

①Alex　②Alexander　③男性　④女性

答えは①。中学生の37・9％、高校生の64・6％が正解した。

▽「同義文判定」の問題例幕府は、1639年、ポルトガル人を追放し、大名には沿岸の警備を命じた。上記の文が表す内容と以下の文が表す内容は同じか。「同じである」「異なる」のうちから答えなさい。

1639年、ポルトガル人は追放され、幕府は大名から沿岸の警備を命じられた。

答えは「異なる」。中学生の57・4％、高校生の72・3％が正解した。2択の問題なら、さいころを転がして正解を選んでも正答率は50％だが、中学生はそれより少しマシなだけだった。

RSTでは「さいころを転がして当てる（ランダム）よりもマシとはいえない受検者の割合」を出している。その結果、推論・具体例同定・同義文判定において中学生の約半数が、また読解の基本といえる照応・係り受けですら中学生の15％が、ランダムよりも正答率が上だとはいえなかった。さらに、RSTで測定できる基礎的読解力は、高校入試の偏差値と強い相関があることが分かった。

「高校の偏差値とRSTの能力値との相関は0.8もあります。これは身長と体重くらいの高い相関です。読める子はいい学校に行けるということ。読解力が学力の伸びの前提になっています。首都圏の進学の選択肢が多いところでは、読める子から都会の学校に行ってしまい、進学実績がどんどん落ちている学校があります。その中には、半数どころか全員がさいころを転がして当てるよりもマシとはいえない状態にあるというデータが出た学校もあった。もしかしたら、全員がわざといい加減にテストを受けたのではないかと思い、実際に生徒に会いに行きましたが、彼らはごく普通で、何か言えば素直に『はい』と言うような子たちでした。そんな生徒に『先生、私どうしたらいいですか？』と問われ、なんとかしないといけないと思いました」