原料コストの高騰や供給元の変更、品質改善を目的とした配合の見直しなど、製品の中身に手を加えなければならない場面は日常的に発生します。そのとき最も気になるのは、「消費者が違いを認識するかどうか」ではないでしょうか。
その結果が消費者に違いとして認識されなければ、変更は成功です。一方、違いとして認識されてしまえば、製品離れにつながるリスクがあります。この判断を支えるのが官能評価と統計手法ですが、実は多くの現場で使われている従来のアプローチには、見落としがちな落とし穴があります。
官能評価および統計心理学の世界的な権威である Daniel Ennis 博士（Institute for Perception 代表）が提唱する「Consumer Relevant Confidence」は、その考え方を大きく変えるアプローチです。
「有意差なし」は、差がないこと？
「トライアングルテストをやって有意差が出なかったから、変更しても大丈夫」。品質評価の現場で、こうした判断を耳にしたことはありませんか？
しかし、「統計的に有意差がない」ことと「差がない」ことは別ものです。試験の人数が少なすぎて検出する力（統計的検出力）が足りなかっただけかもしれません。暗い部屋で弱い懐中電灯を使って物を探し、見つからなかったからといって「物がない」とは言えないのと似ています。
d’という共通の物差し
官能評価には、トライアングルテスト（3点識別試験）、デュオ・トリオテスト（1対2点識別試験）、テトラッドテスト（4点識別試験）など様々な手法がありますが、正答率だけでは手法間の比較ができません。手法ごとに「問題の難しさ」が違うからです。
そこで使われるのが d’（ディープライム）という指標です。これは「2つの製品が感覚的にどれくらい離れているか」を示す数値で、どの手法を用いても同じ尺度で結果を比較できます。
興味深いのは、手法の選び方だけで必要な人数が劇的に変わることです。例えば、同じ差（d’=1.0）を80%の確率で検出するためには、トライアングルテストでは約200人必要なのに対し、テトラッドテストではわずか65人程度で済みます。偶然正答率はどちらも1/3ですが、検出力には大きな差があるのです。
消費者が違いを認識する閾値 ― ΔR
d’ と合わせて重要なのが ΔR（デルタアール）という概念です。これは、消費者テストを通じて「消費者がこの程度の差を違いとして認識し始め、製品を拒否するようになる」閾値を、d’ の値で表したものです。
ここで見落としがちなのが、内部パネル（訓練された専門家）と一般消費者の感度の違いです。専門家は訓練によって知覚のばらつきが小さく、同じ差でも d’ が大きくなります。例えば、消費者の ΔR が 1.0 であれば、感度が2倍の内部パネルでは 2.0 に換算して品質評価の基準とする必要があります。
問いを変える ―
「差があるか」から「消費者は認識するか」へ
Consumer Relevant Confidence とは、ひと言でいえば「得られた差が ΔR より小さいという確信度」のことです。
従来の仮説検定は「差がゼロと異なるか？」を問います。有意差が出なければOK、出ればNG。しかしこの方法には「検出力のパラドックス」が潜んでいます。サンプル数を増やして試験を充実させるほど、消費者にとっては取るに足りないようなわずかな差でも「有意」と判定されてしまうのです。お金をかけるほど変更が通りにくくなる、という皮肉な状況です。
Consumer Relevant Confidence は問いの立て方を変えます。「差が ΔR より小さいか？」を直接検定します。サンプル数が増えるほど「ΔR 未満である」という確信度が高まり、より自信を持って変更を承認できるようになります。
この発想は、1992年に米国食品医薬品局（FDA）が後発薬の承認で採用した「等価性検定」とまったく同じアプローチです。「差がないことを示す」のではなく、「許容範囲内であることを直接示す」という考え方です。
見過ごしていたビジネスチャンスを取り戻す
特に d’ が 0.5〜0.75 あたりの領域が重要です。従来の検定では「有意差あり → 変更NG」とされるこの範囲でも、Consumer Relevant Confidence で見れば「ΔR（例えば1.0）より確実に小さい → 変更OK」と判定できます。これまで有意差が出たために見送ってきた低コスト原料への切り替えが、実は消費者に違いとして認識されることはなく、問題なく受け入れられる変更だったという可能性は十分にあります。
なお、導入にあたっては、内部パネルの感度（d’）を定期的に検証することが推奨されます。基準となるサンプルセットを用いてパネルのd’に変化がないかを確認しなければ、ΔRとの比較の根拠が揺らいでしまうためです。
皆様の現場では、「有意差なし」をどのように解釈していますか？ あるいは、高い検出力のせいで、消費者には違いとして認識されないような差に足止めされてはいないでしょうか。問いの立て方を少し変えるだけで、品質評価の判断は大きく変わるかもしれません。
本記事は、Dr. Daniel Ennis（Institute for Perception）によるウェビナー「Consumer Relevant Confidence」の内容を基に構成しました。
