率だけを見ていると判断を誤る|実数と併せて読む習慣

率だけを見ていると判断を誤る|実数と併せて読む習慣

「成果の率が前月の2倍になったと報告した」「元の数字を開いたら、1件が2件になっただけだった」——月次の報告の場で起きる行き違いです。率は、実態をそのまま縮めた数字ではありません。分母が見えなくなるため、小さな変化ほど大きく振れて見えます。この記事では、率と実数を併せて読む手順と、報告での書き方を整理します。


カメ先生カメ先生

率という数字はね、比べやすくするための道具だと思われがちだが、同時に分母を隠してしまう道具でもあるんだ。


カメ子カメ子

隠れると、何を見誤るのでしょうか。


カメ先生カメ先生

変化の重さだ。分母が10なら、1件動くだけで大きく跳ねる。分母が1000なら、同じ1件はほとんど動かない。同じ2倍という言葉が、まるで違う中身を指す。


カメ子カメ子

同じ言葉でも指しているものが違うのですね。併せて読む手順から見ていきます。


この記事のポイント
  • 率は分母を隠すため、実数と併せて示さないと判断を誤る
  • 同じ名前の指標でも、仕組みによって定義が違うことがある
  • 途中で結果が出たと判断して打ち切ると、誤った結論になる

データ分析にAIを活かす第一歩、まずは導入から始めませんか?

デボノはアカウント開設・初期設定など「そもそものAI導入」から社内定着まで伴走支援。マーケティング活用など一歩進んだご相談にも対応します。

目次

率は分母を隠す

率は、2つの数字から作られます。分子と分母の、両方が必要です。しかし、表示されるのは結果の1つの数字だけです。元になった2つの数字は、そこから読み取れません。この性質が、誤解の入口になります。

見やすさが、そのまま危うさになります。1つの数字であれば、並べて比べられます。報告の資料でも、扱いやすい形です。だから、率だけを載せる形が定着します。元の数字は、資料から消えていきます。

消えると、判断の材料が失われます。同じ率でも、規模によって意味がまったく違います。10件のうち1件と、1,000件のうち100件は同じ10%です。しかし、次に取るべき行動は違います。前者では、まず件数を増やす必要があります。

率が良いことと、成果が大きいことも別です。率が高くても、母数が小さければ成果の量は小さくなります。事業への貢献は、量で決まります。率は、その過程を見るための指標です。目的と手段を、取り違えないようにします。

解決の方法は、単純です。率を書くときは、必ず分子と分母も併せて書きます。3つの数字を並べるだけで、誤解の大半は防げます。資料の見た目は、少しだけ複雑になります。その代わり、判断の質が上がります。

この記事では、率の落とし穴を整理します。振れ、定義、方向の違い、判断の時期の順で見ます

端数の扱いも、確かめます。小数点以下を四捨五入すると、小さな差が消えます。逆に、大きな差があるように見える場合もあります。元の数字があれば、この誤差は問題になりません。

分母が小さいと数字が暴れる

最も起きやすいのが、少ない件数での率です。法人向けの事業では、日常的に発生します

問い合わせが月に数件という規模は、珍しくありません。5件が6件になれば、20%の増加として表示されます。実際には、1件増えただけです。翌月に4件に戻れば、33%の減少になります。同じ1件の増減が、大きな変化として現れます。

この振れは、施策とは無関係に起きます。たまたま同じ週に2件重なるだけで、率は動きます。そこに理由を探すと、誤った結論に至ります。存在しない原因を、作り出すことになります。次の施策も、その誤解の上に組まれます。

判断の目安も、決めておきます。分母が一定の数に満たない場合は、率を使わない形です。件数の推移だけを、そのまま見ます。見た目は素朴ですが、誤解は起きません。法人向けでは、この扱いが現実的です。

期間を延ばす方法も、有効です。月ではなく四半期でまとめれば、分母が3倍になります。振れが小さくなり、傾向が読めます。判断の頻度は下がりますが、精度は上がります。件数が少ないほど、長い期間で見ます。

小さい分母では、率を信じません。件数そのものを、判断の材料にします

場面率だけを見た場合併せて見るもの
成果が月数件小さな増減が大きな率になる件数の推移をそのまま見る
新しい頁訪問が少なく率が安定しない一定の訪問が溜まるまで待つ
広告の比較件数の違う配信を率で並べる件数と単価を併記する
前年との比較母数の変化が見えない分母の増減も併せて示す
部署ごとの比較規模の違いが消える実数と規模の情報を添える
検証の途中早い時点で差が出て見える必要な件数に達したかを確認する

同じ名前でも定義が違う

2つ目の落とし穴が、定義です。同じ名前の指標が、同じ計算とは限りません

代表的な例が、直帰率です。現在の仕組みでは、エンゲージメントのなかったセッションの割合と定義されています。エンゲージメントのあったセッションには、条件があります。10秒以上続いたか、成果のイベントが1件以上あったか、閲覧が2件以上あったかです。この条件を1つも満たさない場合が、直帰として数えられます。

従来の仕組みでは、別の定義でした。最初に到達した頁から他の頁へ移らずに離脱したセッションを、直帰としていました。滞在の時間は、条件に含まれていませんでした。同じ利用者の同じ行動でも、集計の結果が変わります。名前は同じでも、別の指標です。

計算の関係も、確かめておきます。現在の直帰率は、100%からエンゲージメント率を引いた値です。どちらも、分母は全セッション数です。片方が分かれば、もう片方も決まります。両方を並べても、情報は増えません。

この違いは、報告で問題になります。過去の資料の数値と並べると、変化があったように見えます。実際には、測り方が変わっただけです。定義の変更を知らない人には、伝わりません。並べる際は、注記が必要になります。

名前ではなく、定義で確かめます。同じ言葉を使っていても、中身が違います

定義が変わると過去と比べられない

定義の変更は、比較の断絶を生みます。その前後で、数値を並べられなくなります

直帰率の例は、この典型です。新旧の数値をそのまま比較することはできないと、明示されています。改善したように見えても、定義の違いが理由です。悪化したように見える場合も、同じです。どちらの判断も、根拠になりません。

自社の設定でも、同じことが起こります。成果の定義を変えれば、そこから先の数値は別の系列になります。資料の請求を成果に加えた月から、件数は増えます。率も、それに応じて動きます。施策の効果と、定義の変更が混ざります。

対策は、記録です。設定を変えた日と、変えた内容を残します。後から数値を見る人が、断絶に気づけます。記録がなければ、誤った比較が続きます。気づく手段が、失われます。

資料の側にも、印を入れます。推移の図に、定義を変えた時点の線を引いておきます。見た瞬間に、そこで何かが変わったと分かります。注記だけでは、読み飛ばされます。図の中に置く形が、確実です。

変更は、避けられません。避けられないからこそ、記録します

率が上がって実数が減る

方向が食い違う場面も、あります。率と実数が、逆に動くことがあります

最も多いのが、母数が減った場合です。訪問が半分になり、成果が7割に減れば、率は上がります。率だけを見れば、改善したように見えます。しかし、成果の件数は減っています。事業への貢献は、下がっています。

広告を止めた後に、よく起こります。関心の薄い訪問が減るため、率は改善します。同時に、成果の総量は減ります。どちらを重視するかは、目的によります。率だけの報告では、この判断ができません。

逆の場合も、あります。新しい経路を増やすと、訪問が急に増えます。その中には、関心の薄い訪問も含まれます。率は下がりますが、成果の件数は増えます。この場合も、率だけでは判断できません。

だから、必ず両方を見ます。率、分子、分母の3つを、同じ表に並べます。3つの動きを見れば、何が起きたかが分かります。1つでも欠けると、解釈が分かれます。この形式を、報告の定型にします。

方向の食い違いは、頻繁に起きます。珍しい現象では、ありません

平均の率を目標にしない

外部の平均値も、扱いに注意が要ります。業界の平均という数値が、目標に置かれがちです

しかし、条件が揃いません。商材の価格、検討の期間、成果の定義が会社ごとに違います。成果を資料の請求とするか、問い合わせとするかで大きく変わります。同じ業界でも、比べられる保証はありません。数値だけが、独り歩きします。

平均という性質にも、限界があります。極端に高い事例と低い事例が、1つの数字に混ざります。多くの会社は、その平均の値を取りません。分布を見なければ、位置は分かりません。平均は、代表値の1つにすぎません。

代わりに置くのが、自社の過去です。同じ定義、同じ測り方で測った過去の数値です。条件が揃っているため、比較として成立します。改善しているかどうかも、明確に判断できます。この基準を、社内で共有します。

外部の数値は、参考にとどめます。極端に離れている場合に、確かめる契機として使います。平均の3分の1であれば、何かが起きています。この使い方であれば、有用です。目標として置くと、判断を誤ります。

比べる相手を、選びます。条件が揃わない比較は、判断に使えません

途中で判断すると誤る

検証の場面では、別の問題が起きます。結果が出るのを待たずに、判断してしまう形です

この問題は、名前が付いています。途中で結果が出たと判断して打ち切ると、誤った結論を出す問題が起きます。序盤は、件数が少ないため率が大きく振れます。その振れの中には、差が大きく見える時点があります。そこで止めると、差があると結論してしまいます。

原則も、示されています。事前に必要な件数を計算し、その数に達するまで継続することです。途中の数値は、参考にしません。見えていても、判断には使いません。この規律が、検証の価値を守ります。

実務では、この待つ時間が難しくなります。早く結果を出したいという圧力が、常にあります。しかし、誤った結論は次の施策も誤らせます。急いだ分だけ、後で戻ることになります。待つ期間を、最初に共有しておきます。

期間の目安も、先に伝えます。いつ判断するかを、開始の時点で決めて共有します。決めておけば、途中で聞かれても答えられます。その日まで、結果を見ない運用も可能です。見なければ、判断もしません。

検証は、期間を守る作業です。途中の数値は、結論ではありません

必要な件数はどう決まるか

必要な件数の考え方も、確かめておきます。感覚では、決められません

計算に必要な要素が、示されています。現在の率、有意水準、検出力、検出したい最小の差の4つです。このうち1つでも決まらなければ、件数は出ません。特に、検出したい差の大きさが重要になります。小さな差を見つけたいほど、多くの件数が要ります。

率が低い場合も、件数が増えます。成果の率が低い場合は、より多くの人数で試す必要があるとされています。法人向けでは、率が1%を下回る場面もあります。その場合、必要な件数は非常に大きくなります。現実的に集められない量になることも、あります。

集められないと分かった場合の判断も、必要です。検証を行わず、別の方法で決める形です。利用者への聞き取りや、専門の知見に基づく判断です。無理に検証を行い、誤った結論を得るよりは確実です。この判断も、事前の計算から導けます。

調査でも、同じ考え方が使われます。条件に当てはまる人の割合を考慮しないと、設計上の件数を満たせません。条件が厳しいほど、その割合は低くなります。必要な配布の数も、費用も増えます。事前の見積りが、そのまま計画に効きます。

件数は、計算で出します。足りない場合は、検証以外の方法を選びます

  • 成果が月数件の状態で、前月比の率だけを見て施策を評価する
  • 定義が変わった指標を、過去の資料の数値とそのまま並べる
  • 業界の平均の率を、条件を確かめずに自社の目標に置く
  • 検証の途中で差が出て見えた時点で、結論を出して打ち切る
  • 率だけを報告し、分子と分母を資料から省く

報告での書き方を決める

運用として、報告の形式を決めます。個人の判断に任せると、揃いません

基本は、3つの併記です。率と、その分子と分母を同じ表に並べます。見出しに率を置き、括弧の中に件数を書く形でも構いません。重要なのは、同じ場所で見られることです。別の頁に分けると、参照されません。

前の期間との比較も、同じ形にします。率の変化と、実数の変化を並べます。方向が食い違う場合は、その旨を1行で補足します。気づいた人が、その場で説明できます。会議での議論が、短くなります。

分母が小さい場合の扱いも、決めます。一定の件数に満たない場合は、率を書かない形です。件数だけを示し、率は空欄にします。空欄の理由を、注記に1行書きます。この運用が、誤った議論を防ぎます。

定義の記載も、必要です。その指標が何を分母にしているかを、資料のどこかに書きます。毎回書く必要はなく、巻末の1頁で足ります。新しく参加した人が、そこで確かめられます。この頁が、共通の理解を作ります。

形式を、揃えます。作る人が変わっても、同じ形で出ます

比べてよい相手を決める

比較の相手も、あらかじめ決めます。条件が揃わない比較は、判断に使えません

最も確実なのが、自社の過去です。同じ定義、同じ測り方で測った期間どうしを比べます。設定を変えていなければ、差は実態の変化です。この比較が、判断の基本になります。他の比較は、補助として使います。

部署や商材の間の比較には、注意が要ります。規模が違えば、率の安定性も違います。小さい部署の率は、大きく振れます。順位を付けると、規模の小さい側が上下します。実数と併せて、規模の情報も添えます。

季節の影響も、確かめます。前の月と比べると、季節の変化が混ざります。前の年の同じ月と比べる方法が、これを避けます。ただし、その間の設定の変更を確かめる必要があります。両方を並べる形が、最も安全です。

外部の数値は、位置の確認に使います。目標ではなく、極端な差に気づくための材料にします。近ければ問題なし、離れていれば確かめる契機です。この使い方であれば、条件の違いは問題になりません。目標に置くと、条件の違いが判断を歪めます。

比較の相手を、固定します。その都度選ぶと、都合の良い比較になります。

率の変化を率で語らない

さらに紛らわしいのが、率の変化です。率が率で語られると、意味が読めなくなります。

例を、確かめます。成果の率が2%から3%になったとき、50%の改善と書けます。同じ変化を、1ポイントの増加とも書けます。どちらも間違いではありませんが、印象が違います。50%という表現は、大きな変化に見えます。

読み手の誤解も、生まれます。率が50%になったと受け取られる場合があります。会議の場では、確かめずに進みます。後の判断が、この誤解の上に組まれます。書いた側の意図とは、無関係に広がります。

書き方を、統一します。率の変化は、ポイントで書く形が明確です。2%から3%であれば、1ポイントの増加です。併せて、元の数値も書きます。誤読の余地が、なくなります。

倍率の表現にも、同じ注意が要ります。2倍という表現は、元の数値が小さいほど簡単に出ます。1件が2件になれば、2倍です。元の数値を併記すれば、この誇張は消えます。見出しの数字ほど、確かめる価値があります。

表現が、判断を左右します。同じ事実でも、書き方で結論が変わります。

STEP1
分母を確かめる

率を見たら、まず分子と分母の実数を開いて確かめる。

STEP2
定義を確かめる

その指標が何を数えているかと、変更の有無を確認する。

STEP3
方向を確かめる

率と実数が同じ方向に動いているかを見る。

STEP4
比較の相手を確かめる

同じ定義と測り方の期間どうしを比べているかを見る。

STEP5
表現を整える

率の変化はポイントで書き、元の数値を併記する。

率を人の評価に使わない

率を評価の対象にすると、別の問題が起きます。分母を小さくすれば、率は上がります。評価される側には、分母を絞る動機が生まれます。件数を増やさずに、数字だけを良くできます。意図しなくても、この力は働きます。

具体的な形も、想像がつきます。見込みの薄い問い合わせを、記録に残さない扱いにする形です。成約の率は上がりますが、機会は失われています。記録がないため、失った量も分かりません。後から検証することも、できなくなります。

広告でも、同じことが起きます。成果の出にくい配信を止めれば、率は改善します。同時に、成果の総量は減ります。率で評価されていれば、この判断が合理的になります。事業としては、損をしています。

対策は、対で置くことです。率を目標に置く場合は、必ず実数の目標も併せて置きます。率と件数の両方を満たさなければ、達成としない形です。分母を絞る動機が、そこで消えます。この組み合わせが、最も単純な対策になります。

評価の対象そのものも、見直します。本人が制御できない要素が混ざる指標は、評価に向きません。率は、分母の側の変化に強く影響されます。他部署の施策で、分母が動くこともあります。自分の働きとは、無関係に数字が動きます。

使い分けを、決めておきます。改善の材料としては、率が有用です。評価の材料としては、実数と組み合わせます。同じ指標でも、用途で扱いが変わります。この区別を、最初に共有します。

指標の定義を1か所にまとめる

組織としての対策も、必要です。個人が確かめる形では、続きません。

作るのは、定義をまとめた文書です。使っている指標ごとに、分子と分母と数える条件を書きます。1つの指標につき、3行で足ります。全体でも、2頁に収まります。長い文書にすると、使われません。

変更の履歴も、同じ文書に残します。いつ、何を、なぜ変えたかの3つです。過去の数値を見る人が、断絶に気づけます。この記載が、誤った比較を防ぎます。1行の追記で、済みます。

置き場所も、決めます。報告の資料と、同じ場所に置く形です。資料を見た人が、そのまま参照できます。別の場所にあると、探されません。手元にあることが、条件になります。

見直しの機会も、決めておきます。仕組みの側の定義が変わることがあります。半期に1度、記載と実際が合っているかを確かめます。変わっていなければ、確認した日付だけを残します。この記録が、次の担当の助けになります。

  • 率は分母を隠すため、分子と分母を同じ場所に併記する
  • 同じ名前の指標でも定義が違うことがあり、変更の前後は比べられない
  • 検証は事前に必要な件数を決め、その数に達するまで判断しない

文書が、共通の言葉を作ります。議論の前提が、揃います。

それでも率が要る場面

最後に、率が適する場面も確かめます。率そのものが、悪いわけではありません。

最も適するのが、規模の違うものの比較です。訪問の数が違う頁どうしを比べるには、率が必要になります。実数だけでは、規模の大きい側が常に上に来ます。効率を比べる場面では、率が唯一の手段です。分母が十分にあれば、有効に機能します。

改善の余地を探す場面も、率が適します。同じ工程の中で、どこが落ちているかを見る場合です。各段階の通過の率を並べれば、詰まりが分かります。実数では、上流ほど大きく見えます。率にすることで、比較ができます。

時系列で見る場合も、条件付きで有効です。分母が安定していれば、率の変化は実態の変化です。訪問が毎月ほぼ同じであれば、この条件を満たします。分母が動いていれば、率だけでは読めません。分母の推移を、併せて確かめます。

使い分けの基準も、単純です。分母が十分にあり、安定していれば率が使えます。そうでなければ、実数で見ます。この判断を、指標ごとに一度決めておきます。決めてしまえば、毎回迷いません。

道具として、正しく使います。使う場面を、選ぶだけです。

まとめ

率は分母を隠すため、単独で見ると判断を誤ります。成果が月に数件という規模では、1件の増減が大きな率として現れます。同じ名前の指標でも定義が違うことがあり、直帰率は仕組みによって数え方が変わりました。定義が変わった前後の数値は、そのまま比べられません。母数が減れば率は上がるため、率と実数が逆に動く場面もあります。検証では、事前に必要な件数を決め、その数に達するまで判断しません。報告では率と分子と分母を同じ表に並べ、率の変化はポイントで書きます。分母が十分にあり安定していれば率を使い、そうでなければ実数で見ます。

※本記事にはAIが活用されています。編集者が確認・編集し、可能な限り正確で最新の情報を提供するよう努めておりますが、情報の完全性、正確性、最新性、有用性等について保証するものではありません。本記事の内容に基づいて行動を取る場合は、読者ご自身の責任で行っていただくようお願いいたします。

データ分析にAIを活かす第一歩、まずは導入から始めませんか?

デボノはアカウント開設・初期設定など「そもそものAI導入」から社内定着まで伴走支援。マーケティング活用など一歩進んだご相談にも対応します。

運営会社:株式会社デボノ

目次