【第３回】⼈材開発活動に必要なテストの作成⽅法と考え⽅・すすめ⽅2017/03/09

テストの点数は、解答（もしくは回答）された複数の項目を、事前に設計された重みを加えて合算することで算出されます。

ところで、解答の選択肢が与えられている客観式の試験問題や性格検査のような質問項目の場合は、仮に問題がよく分からなくても解答できてしまうという⽋点があります。試験問題であればたまたま選んだ選択肢が正解の場合がありうるわけです。このような項目が多いとしたら、そもそもそのテストの結果を信⽤してよいかどうかわからなくなってしまいます。

そこで、今回はより良いテストを作成していくために必要な、「項目分析」について解説します。 テストを実施する目的の１つは、各被験者が、測ろうとしている当該特性をどの程度保有しているのかを調べることです。したがって、その特性の保有量の⼤⼩を調べるのに⼤きく貢献している項目は「良い項目」と⾔えますし、逆にあまり貢献していない項目は「悪い項目」と⾔えます。

特性への各項目の貢献⼒を調べることを項目分析（ｉｔｅｍ ａｎａｌｙｓｉｓ）と呼びます。
現在、項目分析を⾏うための⽅法はたくさん提案されていますが、ここでは⼤きく３つの⽅法を紹介しようと思います。

（１） 項目特性図による分析
（２） 通過率による分析
（３） 識別⼒による分析

⼀般的な⼿続きは上記の通りですが、５グループに分割することは必須条件ではありません。
被験者総数が⼤きければグループの数を増やしても折れ線グラフは安定しますし、より詳細な項目特性を考察することができます。逆に、被験者総数が⼩さければ、グループ数を増やすと各グループに配される被験者が少なくなってしまい、折れ線グラフが安定しなくなります。
この点を考慮し、慎重にグループ数を決定するようにしましょう。とはいえ、最低でもＬ、Ｍ、Ｈの３グループは必要となります。 通常のデータ解析では平均（通過率）の次に計算される統計量は、標準偏差（散布度）です。
しかし、２値反応データの場合、標準偏差を計算して項目分析に使⽤することはほとんどありません。その代わりに「識別⼒」と呼ばれる指標を計算します。

識別⼒とは、各項目得点とテスト得点の相関係数のことです。
したがって、識別⼒の⾼い項目は、項目得点がテスト全体で測定している特性を適切に反映し、被験者を区別している項目であると解釈します。逆に、識別⼒の低い項目は、項目得点が特性を適切に反映していない項目であると考えられます。

識別⼒は、最⼤値が１であり、１に近いほど識別⼒が⾼く、０に近いほど識別⼒が低いと判断します。識別⼒は相関係数のことですので、原理的には負の値になることも考えられます。

例えば、逆転項目（※１）などは負の値になります。しかし、このような項目はあらかじめ反転させておくので、負の値が登場することはほとんどありません。正解と不正解がある学⼒テストのような場合も、テスト得点が⾼くなるほど不正解になるような項目は珍しいので、実質的に識別⼒が負になることは滅多にないでしょう。

識別⼒を考える場合に注意すべき点が１つあります。
それは、テスト得点は各項目得点の和で計算されており、テスト得点の中に当該項目得点が含まれてしまっていることです。そのため項目数が少ない場合は、相関係数である識別⼒は⼤きくなる傾向にあります。
対処法としては、当該項目を除いた場合の残りの項目合計得点をテスト得点とし、それと当該項目との相関係数をその項目の識別⼒として利⽤することです。この指標も項目特性図と合わせて解釈することで、項目分析に効果を発揮するでしょう。

※１ 逆転項目：「当てはまる」と回答するとネガティブな意味になるような項目こと。 例えば、チャレンジする意欲があるかどうかを尋ねる場合で、「私は新しいことに挑戦したくない」のような項目のこと。 今回は、テストを構成する項目の善し悪しを判断するための項目分析の⽅法として、項目特性図・通過率・識別⼒を紹介しました。特に項目特性図は強⼒で、⽅法も⾄って簡単なので、ぜひ活⽤してみて下さい。

さて、項目分析は実際にどのように活⽤することになるでしょうか。
社内の昇格試験など、不合格者などがいて２年連続して受験する⼈がいる場合、今年度の問題項目と来年度の問題項目を変えることがよくあります。これは毎年繰り返されることになるでしょう。
しかし、ある程度の年数が⽴つと、項目数も豊富になるので、過去のいくつかの項目を組み合わせて新たなテストが作成できるようになります。このようなとき、「悪い項目」はできる限り使わないようにするのが望ましいです。

そこで、毎年の試験後に項目分析を実施しておき、「良い項目」は残し、「悪い項目」は削除するようにします。そうすることによって「良い項目」のみが確保でき（このような項目群のことを項目プールと呼びます）、将来にわたって良質なテストが作成できるようになるのです。

次回は、作成したテストの「信頼性」と「妥当性」を調べる⽅法について解説します。