COLUMN / AI・DX
シンプソンのパラドックスとは|Claudeで全体と内訳の逆転を見抜く
この記事の要点
- シンプソンのパラドックスとは、内訳ごとに見ると数字が良くなっているのに、全体を合計すると悪くなって見える(またはその逆の)現象です。
- 原因の多くは、内訳の構成比(どの経路・商品・顧客層の割合が大きいか)が期間の間で変わったことです。
- Claudeに「全体」「内訳ごと」「構成比」の3つを毎回並べて出させると、全体の数字だけで判断する読み違いを防げます。
「広告も紹介も成約率が上がったはずなのに、全体の成約率は下がっている」という報告を受け、どちらを信じればよいか迷ったことはないでしょうか。これは計算の誤りではなく、「シンプソンのパラドックス」と呼ばれる集計の盲点です。この記事では、応用・運用向けに、この逆転が起きる仕組みと、Claudeで毎回同じ手順で点検する方法を解説します。
シンプソンのパラドックスの点検とは?できること
シンプソンのパラドックスとは、データを区分ごとに見たときの増減の向きと、全体を合計したときの増減の向きが逆になる現象です。点検とは、全体・区分ごと・構成比の3つを並べ、この逆転が起きていないかを確かめることを指します。
下の図の例では、Web広告も紹介も今期の成約率が上がっています。それでも全体が下がるのは、成約率の低いWeb広告のリード(見込み客)の割合が大きく増えたためです。全体の率は、各区分の率を構成比で重みづけした平均なので、構成比が動くと、どの区分も良くなっていても全体が下がることがあります。複数のデータを掛け合わせて初めて見える偏りについては、クロス集計の盲点をClaudeで見つける方法もあわせてご覧ください。
準備するもの
準備するものは、コード実行とファイル作成を使えるClaude、集計前の明細データ、区分の定義、比べる期間です。
| 準備するもの | 内容 |
|---|---|
| Claudeの機能 | 「コード実行とファイル作成」をオンにした状態。公式ヘルプでは、Free・Pro・Maxでは初期設定でオン、Team・Enterpriseではオーナーがオフにできると案内されています。 |
| 明細データ | 集計済みの表ではなく、1行1件の明細(日付・区分・結果など)。CSVやExcelで用意します。 |
| 区分の定義 | 経路、商品、顧客層など、施策と直接つながる区分を決めます。 |
| 比べる期間 | 前期と今期など、同じ長さの2つの期間を決めます。 |
| 件数の下限 | 率を比べるには少なすぎる区分を見分けるため、自社で件数の目安を決めます。 |
| 担当者 | 集計を任せる人と、結果を判断に使う人を決めます。 |
設定の手順
手順は、明細データを渡して列を確かめ、全体・区分ごと・構成比を出してから、逆転があれば構成比を固定した試算で確かめる順で進めます。
- Claudeの「Settings」(設定)→「Capabilities」で、「Code execution and file creation」がオンになっていることを確かめます。
- 比べる2つの期間の明細データを、CSVなどのファイルで用意します。
- 新しい会話(または分析用のプロジェクト)でファイルを添付します。
- 後述の指示文を貼り、まず列名・期間・件数をClaudeに一覧で確認させます。
- 全体、区分ごと、区分ごとの構成比の3つの表を作らせます。
- 全体と区分で増減の向きが逆になっている指標を、一覧で出させます。
- 逆転があった場合は、構成比を前期に固定したときの今期の全体値を試算させます。図1の例なら、11%×80%+32%×20%=15.2%となり、構成比が変わらなければ前期の14.0%より上がっていたことが分かります。
- 結果をExcelで受け取り、定例のレポートに「全体」と「区分ごと」と「構成比」を並べて載せる形に変えます。
そのまま使える指示文の例
指示文では、計算をコードで行わせ、全体・区分・構成比・固定した試算の4つを毎回同じ形で出させることが要点です。
【目的】 自社の成約率(または客単価・稼働率などの率の指標)について、全体と内訳で増減の向きが逆になっていないかを点検する。 【手順】 1. 添付した明細データの列名・期間・件数を確認し、一覧で示す。 2. 前期と今期それぞれについて、全体の値、区分ごとの値、区分ごとの件数の構成比を計算する。 3. 全体の増減の向きと各区分の増減の向きを比べ、逆になっている指標を一覧にする。 4. 逆になっている場合は、構成比を前期に固定したときの今期の全体値を計算し、実際の全体値と並べる。 5. 結果を「全体」「区分別」「構成比」「構成比を固定した試算」の4シートのExcelにまとめる。 【守るルール】 - 計算はコードで行い、暗算や推測で数字を書かない。 - 件数が自社で決めた目安未満の区分は、率の比較に注意書きをつける。 - 区分はデータにある値だけを使い、勝手にまとめたり分けたりしない。 - 欠けているデータや重複が見つかったら、計算の前に報告して止まる。 【報告】 ・全体と区分で向きが逆になっていた指標 ・構成比の変化(前期→今期) ・構成比を固定した試算の結果と、読み取れること(3行以内) ・作成したExcelファイル
うまく動かすコツと注意点
うまく動かすコツは、全体と内訳のどちらかを「正解」にするのではなく、問いに合わせて使い分けることです。
- 成約率・平均単価・稼働率のような、割り算で出す「率」や「平均」の指標を優先して点検します。
- 区分は施策と直接つながるものを1つ選び、いきなり細かく分けすぎないようにします。
- 件数が少ない区分は、率が偶然で大きく動くため、件数をいつも横に並べて表示します。
- どの区分で切るかによって結論が変わることがあるため、区分は集計の前に決め、結果を見てから変えないようにします。
- 施策の効果は区分ごとで、事業全体の結果は全体で見る、と役割を分けて報告します。
- 一度うまくいった指示文は定例レポートの型にし、毎回同じ形で構成比を載せます。
定例の集計を仕組み化する考え方は、データ集計・レポート作成の自動化でも紹介しています。
導入チェックリスト
- □ 点検する率の指標を決めた
- □ 施策とつながる区分を集計の前に決めた
- □ 集計前の明細データを用意した
- □ 率を比べる件数の目安を決めた
- □ 全体・区分・構成比・固定した試算の4つを出す指示文を用意した
- □ 定例レポートに構成比を載せる形にした
株式会社木立の実践
株式会社木立では、Claudeのスケジュールタスクで経営ダッシュボードを毎朝更新し、会計ソフト・宿泊の予約管理・広告・問い合わせ・社内の顧客管理などのデータを一画面にまとめて、役員向けにSlackで知らせています。また、Webサイトとランディングページのアクセスの日次レポートも自動でSlackに投稿しています。複数のデータを並べて見るほど、全体の数字だけでは分からない内訳の動きが大切になるため、全体と内訳を対にして見る点検は、日々のレポートを読むうえでも役立ちます。株式会社木立のAIコンサルティングは、ヒアリング1回でその直後から始められ、決まったマニュアルを使わず、進め方・使うAI・成果物をすべてお客様ごとにオリジナルで設計します。
よくある質問
シンプソンのパラドックスはどんな数字で起こりやすいですか?
成約率・平均単価・稼働率のように、割り算で出す「率」や「平均」の指標で起こりやすくなります。区分ごとの件数の割合が期間の間で大きく変わったときは、特に注意が必要です。
全体の数字と内訳の数字は、どちらを信じればよいですか?
どちらも正しい計算結果で、答えている問いが違います。施策の効果を見るなら内訳、事業全体の結果を見るなら全体が向いています。両方と構成比を並べ、何が全体を動かしたかを説明できる状態にするのが基本です。
ExcelでもできることをClaudeに任せる利点は何ですか?
全体・内訳・構成比・固定した試算という同じ手順を、毎回同じ形で漏れなく出させられることです。逆転が起きている指標を一覧で知らせるよう指示しておけば、見落としを減らせます。
区分はいくつまで分ければよいですか?
まずは経路や商品など、施策と直接つながる1つの区分から始めるのがおすすめです。区分を細かくしすぎると1区分の件数が少なくなり、率が偶然で大きく動きやすくなります。
まとめ
- シンプソンのパラドックスは、内訳と全体で増減の向きが逆になる現象で、多くは構成比の変化が原因です。
- Claudeに全体・区分ごと・構成比・構成比を固定した試算を毎回並べて出させると、逆転を見落としにくくなります。
- 施策の効果は内訳で、事業の結果は全体で見ると役割を分けると、数字の読み違いを防げます。
複数のデータを掛け合わせた分析や、定例レポートの自動化は、AIコンサルティングでご相談いただけます。自社の数字の見方を整えたい方は、お問い合わせください。