結論から言うと——信頼性は「同じ条件で何度測っても同じ結果が出るか」、妥当性は「測りたいものを正しく測れているか」です。信頼性は、同じ人をくり返し測ったときの値の再現性のことで（Hopkins 2000）、妥当性はその測定が目的に合っているかを表します。信頼性が低い測定は妥当性も高くなりませんが、信頼性が高くても妥当性が高いとは限りません。体力測定の結果を読むときは、両方を確かめることが大切です。
| よくある誤解 | 正しい理解 |
|---|---|
| 毎回同じ値が出れば正しい測定 | 毎回同じでも、測りたいものからずれていれば妥当性は低い |
| 相関係数が0.9を超えれば信頼性は十分 | 相関は対象者の値の幅に左右されるため、0.9を超えても慎重に判断する（Atkinson & Nevill 1998） |
| 前回より値が少し上がったら成長した | 測定にはばらつきがある。ばらつきより小さい変化は、本当の変化とは言い切れない |
信頼性と妥当性をたとえ話でつかむ
信頼性と妥当性は「的当て」で考えるとわかりやすくなります。矢がいつも同じところに集まるのが信頼性、その集まる場所が的の中心なのが妥当性です。
| 矢の当たり方 | 信頼性 | 妥当性 |
|---|---|---|
| 中心に集まる | 高い | 高い |
| 中心からずれた1か所に集まる | 高い | 低い |
| あちこちに散らばる | 低い | 低い |
矢が散らばっていると、平均がたまたま中心に近くても、1回ごとの測定は信用できません。だから信頼性は、妥当性の前提になります。
信頼性の種類
| 種類 | 確かめること | 体力測定での例 |
|---|---|---|
| 再テスト信頼性 | 同じ人を時間をあけて2回以上測ったとき、同じ結果が出るか | 握力やジャンプを日を変えて測る（テスト-再テスト法） |
| 検者内信頼性 | 同じ測定者がくり返し測ったとき、同じ結果が出るか | 同じトレーナーが皮下脂肪厚を何度か測る |
| 検者間信頼性（客観性） | 測定者が変わっても、同じ結果が出るか | 2人のトレーナーが同じ人の姿勢を評価する |
| 内的一貫性 | 質問紙の項目どうしが同じものを測っているか | 運動習慣のアンケート |
信頼性を表す指標
| 指標 | 内容 |
|---|---|
| ICC（級内相関係数） | くり返し測定の一致度を0〜1で表す。0.5未満は低い、0.5〜0.75は中程度、0.75〜0.9は良好、0.9を超えると非常に良好の目安（Koo & Li 2016） |
| 典型誤差（標準誤差） | 同じ人をくり返し測ったときの値のばらつき。平均に対する%（変動係数）で表すことも多い（Hopkins 2000） |
| 一致の限界（LOA） | 2回の測定の差が、95%の人でおさまる範囲。ブランド-アルトマン図で示す（Atkinson & Nevill 1998） |
ICCなどの相関の指標は、対象者の値の幅が広いほど高く出やすい性質があります。そのため、測定のばらつきそのものを表す典型誤差や一致の限界もあわせて見ることがすすめられています（Atkinson & Nevill 1998、Hopkins 2000）。
妥当性の種類
| 種類 | 確かめること | 体力測定での例 |
|---|---|---|
| 内容妥当性 | 測りたい能力を、テストの内容が十分にカバーしているか | サッカー選手の体力測定に、走る・跳ぶ・切り返す項目が入っているか |
| 基準関連妥当性（併存的） | より正確な方法（基準）で測った値と一致するか | 皮下脂肪厚法の体脂肪率を、より精密な方法と比べる（体組成評価法） |
| 基準関連妥当性（予測的） | 将来の結果をどれだけ予測できるか | 測定の結果から、その後の競技成績を予測できるか |
| 構成概念妥当性 | 「持久力」のような目に見えない能力を、理論どおりに反映しているか | ロックポートウォーキングテストが持久力の高い人と低い人を見分けられるか |
推定式を使うテストでは、とくに妥当性に注意が必要です。たとえば最大心拍数の推定式は、集団の平均にはよく合っても、一人ひとりの実測値とはずれることがあります。
信頼性と妥当性を体力測定に生かす
- 条件をそろえる：時間帯、ウォーミングアップ、食事、測定者、器具をできるだけ毎回同じにする
- 練習の回を入れる：慣れや学習によって2回目以降の値が変わることがあるため（Hopkins 2000）、初めてのテストは練習の回を設ける
- ばらつきを知っておく：前回との差が測定のばらつき（典型誤差）より小さければ、本当の変化とは言い切れない
- 目的に合うテストを選ぶ：持久力を知りたいなら持久力、筋力なら筋力を反映するテストを選ぶ
- 結果の読み方を決めておく：同じテストを同じ手順でくり返し、変化の傾向で判断する
Hopkins（2000）は、信頼性をある程度の精度で見積もるには、およそ50人の参加者と少なくとも3回の測定が必要だと述べています。論文で紹介されている信頼性の数値も、何人・何回で調べたかを確かめると読み違えを防げます。
信頼性と妥当性の試験に出るポイント
- 信頼性＝測定の一貫性・再現性、妥当性＝測りたいものを測れているか
- 信頼性は妥当性の前提。信頼性が高くても妥当とは限らない
- 客観性＝測定者が変わっても同じ結果が出ること（検者間信頼性）
- 妥当性の種類：内容妥当性・基準関連妥当性（併存的・予測的）・構成概念妥当性
- ICCの目安：0.5未満 低い／0.5〜0.75 中程度／0.75〜0.9 良好／0.9超 非常に良好（Koo & Li 2016）
信頼性と妥当性のよくある質問
- Q信頼性と妥当性はどちらが大切ですか？
- A
どちらも必要です。信頼性がないと毎回の結果がぶれて判断できず、妥当性がないと、どれだけ安定していても知りたいことがわかりません。
- Q体組成計の体脂肪率は信頼できますか？
- A
同じ機器・同じ条件（時間帯や食事、水分）で測れば、変化の傾向を見る目安になります。ただし、別の方法や別の機器の値とは一致しないことがあるので、比べるときは同じ方法の値どうしで比べます。
- Q客観性とは何ですか？
- A
測定する人が変わっても同じ結果が得られる性質です。検者間信頼性ともいい、信頼性の一つとして扱われます。
信頼性と妥当性の理解度チェック
- Q問題1：毎回ほぼ同じ値が出るが、基準の方法と比べて常に5%高く出る測定はどれにあたるか。
A. 信頼性が高く、妥当性が低い
B. 信頼性が低く、妥当性が高い
C. どちらも高い
D. どちらも低い - A
正解：A。結果は安定していますが、測りたい値からずれています。
- Q問題2：測定者が変わっても同じ結果が出る性質はどれか。
A. 内容妥当性
B. 予測的妥当性
C. 客観性（検者間信頼性）
D. 内的一貫性 - A
正解：C。客観性は検者間信頼性とも呼ばれます。
- Q問題3：Koo & Li（2016）の目安で、ICCが0.8のときの解釈はどれか。
A. 低い
B. 中程度
C. 良好
D. 非常に良好 - A
正解：C。0.75〜0.9は良好（good）の目安です。
信頼性と妥当性の覚え方
的当てで覚える
信頼性＝矢がいつも同じ所に集まる（ブレない）
妥当性＝集まる所が的の中心（ズレない）
信頼性 → 妥当性の前提
客観性 ＝ 測る人が変わってもブレない信頼性と妥当性のまとめ
- 信頼性は「毎回同じ結果が出るか」、妥当性は「測りたいものを測れているか」
- 信頼性は妥当性の前提だが、信頼性が高くても妥当とは限らない
- 信頼性はICCだけでなく、典型誤差や一致の限界でも確かめる
- 体力測定では条件をそろえ、測定のばらつきより大きい変化で判断する
信頼性と妥当性の語源と必須用語
| 語 | 語源 | 意味 |
|---|---|---|
| Reliability | rely（頼る）＋ -ability（できること） | 信頼性 |
| Validity | ラテン語 validus（強い・有効な） | 妥当性 |
| Objectivity | object（対象）＋ -ivity（性質） | 客観性 |
| 用語 | 読み方 | 意味 |
|---|---|---|
| 信頼性 | しんらいせい | 同じ条件で測ったときに同じ結果が出る程度 |
| 妥当性 | だとうせい | 測りたいものを正しく測れている程度 |
| 客観性 | きゃっかんせい | 測定者が変わっても同じ結果が出る程度 |
| ICC | あいしーしー | 級内相関係数。くり返し測定の一致度の指標 |
| 典型誤差 | てんけいごさ | 同じ人をくり返し測ったときの値のばらつき |
| 一致の限界 | いっちのげんかい | 2回の測定の差が95%の人でおさまる範囲 |
参考文献
- Hopkins WG. (2000) Measures of reliability in sports medicine and science. Sports Medicine 30(1): 1–15. doi:10.2165/00007256-200030010-00001
- Atkinson G, Nevill AM. (1998) Statistical methods for assessing measurement error (reliability) in variables relevant to sports medicine. Sports Medicine 26(4): 217–238. doi:10.2165/00007256-199826040-00002
- Koo TK, Li MY. (2016) A guideline of selecting and reporting intraclass correlation coefficients for reliability research. Journal of Chiropractic Medicine 15(2): 155–163. doi:10.1016/j.jcm.2016.02.012
コメント