トップへ

5 調査問題の妥当性と信頼性(S−P表等による分析)
 平成21年度高等学校入学者数学学力調査A,Bについて,S−P表処理等を基にして差異係数,信頼性係数,内容別平均正答率,正答率帯別問題数,注意係数,UL指数,問題間の相関等を考察したところ,次のような結果を得た。なお,データは,テストAについては参加23校から192名,テストBについては118校から1,462名を抽出して作成した。

[1] 問題全体について            

 (1) 差異係数   表4
 差異係数とは,S,P両曲線のずれの程度を数量化したもので,生徒理解と一連の学習内容がうまくかみ合っているかを見るものである。差異係数は0から1の値をとり,0.5より小さい値のとき生徒の理解と指導の密着性が高いとされている。  
 簡単な確認テストのようなドリル演習型のテストではS曲線とP曲線の乖離は小さく,差異係数は小さくなる。実力テストのような多面にわたる総合的な問題ではS曲線とP曲線は大きく乖離して,差異係数は大きくなる。差異係数が0.5を超えたとき,指導内容に問題がなかったか,出題に問題がなかったか,学習者の理解やモチベーションはよかったかなどを検討する必要がある。今回のテストでは表4のように差異係数は小さいので,出題及び学習者の理解の間にとりわけ大きな問題はないと考えられる。
(2) 信頼性係数(クーダー・リチャードソンの公式20による)         
 信頼性係数とは,作成されたテスト問題が内容的に妥当で信頼できるものなのかを算出するものである。ここで言う信頼性とは,同一条件下で再度試験を実施しても同じ結果が出ると思われる安定性のことで,0から1の値をとり,1に近いほど信頼性が高いとされている。 表5
 今回のテストでは表5のように信頼性係数は高いので,信頼できる良好な問題であったことが分かる。
(3) 内容別平均正答率 ( )内の数字は問題数
 A,Bともに関数の分野において正答率が下がっている。詳細な分析については32ページ以降を参考にしていただきたい。                                         
表6        
 (4) 正答率帯別問題数   表7 (5) 全体の正答率との相関  表8

[2] 検討を要する問題群

 様々な指標によって,各問題を分析した。注意マークが付いた問題を,T群(正答率が基準を満たす)とU群(正答率が基準を満たさない)とに分類整理したはところ表9のようになった。平均正答率が非常に高い場合や非常に低い場合に,下記の指標は注意マークが付きやすくなる。従って、今回のテストで問題となるのはA1(7),B1(1)ということになる。31ページ,34ページの正答率をみても分かるとおり,下位群の生徒がよく正解しているため注意マークが付いたことが分かる。

  ×印は該当項目について検討を要する数値であることを示す。    表9
 
                                           

(各項目の説明) 表10
@正答率 各問題の正答率を示す。
A注意係数 SP表において,ある問題の正誤の状況と他の問題の正誤の状況を比較し,異質の程度を数値化したものである。0.5より小さい方が適切な問題であるとされている。表10に示すように平均正答率と併せて検討するとよい。
BUL指数 (上位27%の正答者数)−(下位27%の正答者数)
         (生徒27%の人数)
 UL指数は上式で算出する。「上位群に正答者が多く,下位群に正答者が少ない」場合にUL指数は高くなるが、上位群に正答者が少なく下位群に正答者が多いという逆転現象の場合,UL指数は低くなる。UL指数が0.4より大きい方が適切な問題であるとされている。
C相  関 生徒の得点合計とその問題の正解との相関を示す。基準値を0.4として大きい方が適切な問題であるとされている。



           目    次
1  調査の趣旨及び処理   5  テストAの結果とその考察
2  調査結果の概要   6  テストBの結果とその考察
3  分析結果の概要   7  テストTの結果とその考察
4  調査問題の妥当性と信頼性     
 平成20年度高等学校数学標準学力検査の結果とその考察(PDF 528KB)