統計－信頼性と妥当性

問題番号（年度－番号）：３－１３，４－２２Ｄ，４－２４，５－４２，５－４４，８－５３，９－３４，１１－３６，１２－３５，１３－３１，１５－１８，１５－３２

● 信頼性と妥当性に関しての大まかなイメージ
ある経験的指標が特定の理論的概念をどの程度表しているか、を測定するための２つの指標
例）ゴム製のものさし→信頼性がない
イリジウム合金のものさし→信頼性が高い…必ず同じ値が得られる（安定性）
目盛りのくるったイリジウム合金のものさし→妥当性が低い
…本当に測りたいものを測っていない（真実性）

● 信頼性
偶然的要因によって尺度の得点が変化する度合いの少なさ。測定された数値の安定性、一貫性、正確さ、安定度係数。
信頼性係数＝真値の分散／観察値の分散
　　　　　＝１－（誤差の分散／観察値の分散）
　　　　　＝（観察値と真値の間の相関）の２乗

◎ 再テスト法
同じ個人に対して、一定期間（２週間から１ヶ月）をおいて同じテストを実施し、そのときの相関係数を取る。
長所：　直観的、わかりやすい、速度検査（スピードテスト）にも使用できる。
短所：　実施困難、記憶テストはテスト自体がリハーサルになる。時間的コストがかかる。

◎ 代替え形式法、平行テスト法、代替テスト法
長所：　再テスト法のような記憶の効果などが防げる。速度検査にも使用できる。
短所：　並行的な問題を作成すること自体が困難。コストも高くなる。時間をおくことで、再テスト法における問題も含むことになる。

◎ 折半法
全体の項目を２つに分け、信頼性係数の推定値を求めるために、各々の得点間の相関を求める。
→Spearman-Brown(1910)の公式
長所：　簡単、簡易。一回のテストですむ。計算も楽。再検査法での記憶の効果などお問題点がない。
短所：　分類方法に注意を要する。項目を半分ずつにするときによく使う手法は奇数番号と偶数番号とに分ける（奇偶法）のだが、それが本当によいのかどうかという吟味が必要。速度検査の場合は使うべきでない。

◎ 内的整合性による方法
すべての可能な折半法から信頼性係数の推定を繰り返し、その平均値をとる方法。
→Cronbachのα係数…内的整合性の高さを示す

● 妥当性
尺度が測定しようとしているものを、実際に測っているかどうかというその程度のこと。真実性。

◎ 基準関連妥当性
ある測定用具を用いる目的が、その測定用具にとって外的な行動の重要な様式を推定する場合に、はじめて問題になる。この外的な行動様式を「基準」と呼ぶ。（Nunnally, 1978）
妥当係数…テストと基準との相関係数
① 同時的（併存的）妥当性…測定値と基準とを同じ時点で相関を取る場合
② 予測的妥当性…基準が未来の場合
③ 差異妥当性
④ 増分妥当性
⑤ 交差妥当性
⑥ 交差文化妥当性

◎ 内的妥当性
例）算数の計算テストで計算能力全体を測定したいなら、加算のみしか入っていないテストはダメである。加減乗除のような全体の計算問題が必要である。
高めるための条件
① 研究者がその特定場面に関係する内容領域全体を詳細に記述できること。
② その領域全体から適当にサンプリングして項目を抜き出すこと。
③ それをテスト可能な形式に作り替えること。
★ 表面的妥当性
★ 論理的妥当性

◎ 構成概念妥当性
尺度を構成する理論のモデル・意味のネットワークが、経験的な世界と十分一致したときに構成概念妥当性が満たされる。
多特性・多法（Ｍ－Ｍ法、ＭＴＭＭ、多重特性多重法）
① 収束的妥当性…測定方法が異なっても同一構成概念間の相関が高い
② 弁別的妥当性…測定方法が同じでも別の構成概念であれば相関が低い
例）外向性・安定性という２つの特性を自己評価、他者評価という２つの方法で測定する場合。
→２つの方法間で、外向性どうし、内向性どうしの相関が高い→同一概念間での相関が高い→収束的妥当性が高い
→どの測定方法でも外向性と安定性の相関が上記の相関よりも低い→測定方法に依存しない→弁別的妥当性がある

３－１３
Ａ．どのように測定されるのか×→何を測定しているのか
Ｂ．→○
Ｃ．→○
Ｄ．→○

４－２２Ｄ→×
検査の総得点と当該項目の得点との相関係数は「項目識別力の指数」であって、妥当性ではない。

４－２４
Ａ．→○
Ｂ．→×「その検査が測ろうとしているものをどの程度測定しているかを表す尺度」・・・妥当性
Ｃ．→○
Ｄ．折半法で求めた信頼係数は検査の内的整合性を表す。安定度を調べるのは再検査法→×

５－２４
Ａ→○
Ｂ・・・１回の実施で可→×
Ｃ→×
Ｄ→○
Ｅ・・・１週間おく必要はない→×

５－４４・・・わかりません。覚えましょう。
Ａ．Ｙ－Ｇ性格検査は、尺度の内的整合性に基づいている→○
Ｂ．ＥＰＰＳは、尺度外の基準との関係に基づいている→×
Ｃ．ＭＡＳは、項目文章の意味内容に基づいている→○
Ｄ．ＭＰＩは、尺度外の基準との関係に基づいている→×
Ｅ．ＭＭＰＩの臨床尺度は、尺度の内的整合性に基づいている→×

８－５３
Ａ．信頼性は内的整合性だけではない→×
Ｂ．→○
Ｃ．→○
Ｄ．→○・・・４－２４Ｄ参照

９－３４
妥当性・・・基準関連妥当性、内容的妥当性、構成概念妥当性
構成概念妥当性・・・収束的妥当性と弁別的妥当性

１１－３６
Ａ．→×・・・８－５３Ａ参照
Ｂ．→○・・・信頼性係数は真値と標準誤差によって求めることができるので、逆に信頼係数と標準誤差が分かっていれば真値を推定できる
Ｃ．→×・・・項目数が多くなると信頼性係数は必ず高くなる
Ｄ．→○

１２－３５
投影法における、信頼性の測定についての問題。折半法は無意味、再検査法なら実施できる。
Ｃは平行法

１３－３１
Ａ．→×・・・相関の２乗
Ｂ．→○
Ｃ．→×・・・ＣＡＴはＴＡＴの子ども版
Ｄ．→○

１５－１８
Ａ・・・不安尺度は構成概念妥当性の例としてよく使われています。中身はわからないながら・・・→○
Ｂ・・・内容妥当性は専門家の判断と「しけしん」にも書かれていました。→○
Ｃ・・・これは信頼性の安定性のことです→×
Ｄ・・・基準関連妥当性のうち、予測的妥当性の方です。この入学後の成績を外的基準というのも予測的妥当性の例としてよく出ます。中身はわかりません・・・→×

１５－３２
Ａ・・・因子的妥当性というのが不明です。そもそもあるのかどうか・・・
Ｂ・・・妥当性が低くても信頼性が高いことがある→×
Ｃ・・・？でもＢが間違いＤが正しいので、答えはｅに決まる→○
Ｄ→○

※言葉のつながりだけでも、答えがわかればいいか、と思っています。どうせ出題される全部の内容を知りつくすことは不可能なので・・・（開き直り(^_^;）