8  計測精度の評価

新しいウェアラブルの心拍数、自作の心電図回路、新しいアルゴリズム —— 「この値はどれくらい正しいのか」を示すには、基準となる方法(ゴールドスタンダード、または基準法)と同時に計測して比較 する必要があります。この章では、そのときに最もよく使われる Bland-Altman 解析 と、よくある誤りを扱います。

8.1 相関係数は「一致」を表さない

2 つの方法の比較で、散布図と 相関係数 r だけを示すのはよくある誤りです。

  • 相関係数は 「直線関係の強さ」 を表すだけで、値が一致しているか は表さない
  • 一方が常に 10 bpm 高くても、一方が常に 1.2 倍でも、相関係数は 1 に近くなりうる
  • 測定範囲が広いほど相関係数は大きくなる(安静〜最大運動の心拍数を含めれば、精度が悪くても r は高くなる)

8.2 Bland-Altman 解析

Bland と Altman(1986)が提案した方法では、各対象について

  • 横軸: 2 つの方法の 平均 (A + B) / 2
  • 縦軸: 2 つの方法の 差 A - B

をプロットし、次の値を求めます。

指標 計算 意味
系統誤差(バイアス) 差の平均 \bar{d} 一方が平均してどれだけ高い(低い)か
一致の限界 (limits of agreement; LoA) \bar{d} \pm 1.96\, s_d 個々の測定の差の約 95% が入る範囲

LoA が 臨床的・実用的に許容できる範囲 に入っているかどうかを、事前に決めた基準 で判断します(統計的な検定で決めるものではありません)。

8.2.1 デモ

基準法(例: 胸部心電図)の心拍数に対して、評価したい機器(例: 手首 PPG)の値をシミュレーションします。

橙の点線は、差を平均に回帰した直線です(比例誤差があると傾く)。

ヒントやってみよう
  1. 系統誤差を +8 bpm にしてみよう。相関係数 r はどう変わるか? Bland-Altman プロットでは何が変わるか?
  2. 系統誤差を 0 に戻し、比例誤差を +10% にしよう。Bland-Altman プロットにどんなパターンが現れるか?
  3. ランダム誤差 SD を 5 bpm にしたまま、心拍数の範囲 を「60〜80 bpm(安静時のみ)」と「50〜190 bpm(運動を含む)」で比べよう。同じ精度の機器なのに、r はどう変わるか?
  4. 「高心拍数ほど誤差が大きい」をオンにしよう。LoA は全体を代表しているか?
  1. 系統誤差は相関係数をまったく変えません(全体が平行移動するだけ)。Bland-Altman プロットでは、バイアスの線が 0 から離れます。
  2. 比例誤差があると、差が平均とともに大きくなる 右上がりのパターン が現れます。この場合、全体のバイアスと LoA だけで精度を要約するのは不適切で、回帰による補正や、対数変換・比での解析を検討します。
  3. 測定範囲が広いほど、同じ誤差でも相関係数は 1 に近づきます。r が高いことは精度の証明にならない 典型例です。
  4. 誤差の大きさが測定値の大きさによって変わる(不均一分散)場合、LoA は低心拍数域では広すぎ、高心拍数域では狭すぎます。条件(安静・運動など)ごとに分けて報告するのが望ましいです。

8.3 検証研究の設計で気をつけること

  • 基準法の選択: 心拍数なら心電図(胸部ベルトではなく医療用の心電図が望ましい)、SpO₂ なら動脈血ガス分析
  • 時刻の同期: 機器ごとに平均化の時間窓や表示の遅れが異なる。同じ時間区間の値を比べる
  • 条件: 安静、日常動作、運動(強度別)、睡眠など 実際の使用条件 を含める
  • 対象者の多様性: 年齢、性別、皮膚の色、体格、疾患(不整脈など)
  • 繰り返し測定: 同じ人から複数の値をとる場合、独立なデータとして扱うと LoA が狭く見積もられる → 反復測定を考慮した Bland-Altman 法を使う
  • 事前の許容基準: 「どれだけの誤差なら使い道に対して許容できるか」を、解析の前に 決めておく

8.3.1 その他の指標

指標 用途 注意点
MAE / MAPE 誤差の大きさを 1 つの数で要約。ウェアラブルの評価で多用(MAPE 10% 未満を一つの目安とする提案もある) 系統誤差とランダム誤差を区別できない
級内相関係数 (ICC) 方法間・評価者間の一致度、再現性(信頼性) 測定範囲の広さに影響される
変動係数 (CV) 同じ条件での繰り返し測定のばらつき(再現性)
Se / PPV 検出(R 波、不整脈)の評価(第 7 章) 許容時間や正解の定義で変わる

8.4 まとめ

  • 相関係数は一致を表さない。系統誤差は r に現れず、範囲が広いと r は高くなる
  • Bland-Altman 解析: 差 vs 平均をプロットし、バイアス と 一致の限界 (±1.96 SD) を求める
  • 比例誤差・不均一分散のパターンに注意
  • 許容できる誤差の基準は 事前に、用途に基づいて 決める