COLUMN / AI・DX
データクレンジングをClaudeで|表記ゆれと重複を集計前に整える手順
この記事の要点
- データクレンジングとは、集計の前に表記ゆれ・重複・欠けを整え、正しく数えられる状態にすることで、Claudeにはルールに沿った整理と変更の一覧づくりを任せられます。
- 重複や表記ゆれを残したまま集計すると、同じ顧客が2件と数えられてリード数が多く見えるなど、クロス集計の結果を読み違える原因になります。
- 元データは上書きせず、整えたファイルと「何をどう変えたか」の一覧を別に出させ、判断が分かれるものは統合せずに人が確認する運用が安全です。
問い合わせの一覧と顧客の一覧を突き合わせたら、同じ会社が「株式会社サンプル商事」と「(株)サンプル商事」で別々に数えられていた。広告から来たリードの数と成約の数を比べたら、重複のせいで成約率が実際より低く見えていた。複数のデータを組み合わせる分析では、こうした小さなずれが結論を変えてしまいます。
この記事では、Claudeを使って集計前のデータを整える手順を、ルールの決め方から確認の仕方まで、運用に乗せる前提で説明します。
データクレンジングとは?できること
データクレンジングとは、集計や分析の前に、表記ゆれ(同じものが違う書き方になっていること)・重複・欠けている値・形式の違いを整え、正しく数えられる状態にする作業です。Claudeは、アップロードしたCSVなどのデータファイルを読み、Pythonのプログラムを書いて整理し、Excelファイルとして出力できます(公式ヘルプ:Claudeでファイルを作成・編集する)。
大切なのは、整えるルールを先に決め、Claudeにはそのルールの適用と記録を任せることです。そうすると、毎月同じ基準で整えられ、あとから「なぜこの2件をまとめたのか」をたどれます。
表記ゆれと重複を残したまま数えると、件数が実際より多く見えます。次の表は整える前と後の見本です。
準備するもの
準備するものは、整えたいデータと、整えるルールを決める担当者です。
| 準備するもの | 内容 |
|---|---|
| Claudeのプラン | ファイル作成とコード実行は公式ヘルプ上Free・Pro・Max・Team・Enterpriseで利用可能。業務データを扱うならTeamまたはEnterpriseが前提 |
| 機能の設定 | 「Settings」の「Capabilities」で「Code execution and file creation」がオンになっていること |
| データ | 問い合わせ・顧客・予約などの一覧をCSVやExcelで用意(1ファイル30MBまで) |
| 整えるルール | 会社名の表記、全角・半角、日付の形式、重複とみなす条件、欠けている値の扱い |
| 確認の担当者 | 変更の一覧を見て、統合してよいか判断が分かれるものを決める人 |
設定の手順
初回は小さなデータで試し、ルールが固まったら毎月の作業に広げます。1手順1操作で進めます。
- Claudeの「Settings」から「Capabilities」を開き、「Code execution and file creation」がオンになっているか確認します。
- 整えたいデータのうち、まず1か月分など小さな範囲をCSVで書き出します。
- Claudeの新しいチャットにファイルを添付し、「列の一覧、件数、空欄の数、表記がばらついている列を報告してください」と依頼します。
- 報告を見て、整えるルール(例:「株式会社」「(株)」は外してそろえる、電話番号とメールアドレスが同じなら重複とみなす)を担当者が決めます。
- 次の章の指示文にルールを書き込み、Claudeに整理を依頼します。
- 出力された「整えたファイル」と「変更の一覧」をダウンロードします。
- 変更の一覧のうち「要確認」になったものを担当者が見て、統合するかどうかを決め、結果をClaudeに伝えて反映させます。
- 整える前と後の件数の差を記録し、集計の報告に添えます。
- ルールを文章にしてClaudeのプロジェクトの知識に置き、翌月からは同じルールで整えさせます。
画面の表記は表示言語や更新によって変わることがあります。見当たらない場合は公式ヘルプの最新の説明を確認してください。
そのまま使える指示文の例
ルールに沿って整え、変更の記録を必ず残させる指示文の例です。ルールの部分は自社のものに置き換えてください。
【目的】 自社の問い合わせ一覧を、集計に使える状態に整える。元データは残し、何をどう変えたかを記録する。 【手順】 1. 添付したファイルの列、件数、空欄の数を確認する。 2. 会社名から「株式会社」「(株)」「様」などを外し、全角・半角をそろえる。 3. 日付を「年-月-日」の形式にそろえる。 4. メールアドレスまたは電話番号が同じ行を重複の候補とする。 5. 重複の候補のうち、会社名・経路・日付がすべて一致するものだけを統合する。 6. 整えたファイルと、変更の一覧(元の値/変更後の値/理由)を別々のExcelファイルで出力する。 【守るルール】 ・元のファイルは書き換えない。 ・判断が分かれるもの(経路や日付が違う重複候補など)は統合せず「要確認」とする。 ・空欄を推測で埋めない。 ・個人の氏名や連絡先を報告の本文に書かない。 【報告】 ・整える前と後の件数、統合した件数、要確認の件数 ・変更の多かった列と、主な変更の種類 ・ルールで決めきれなかったことの一覧
うまく動かすコツと注意点
データを整える作業は、結論を左右する一方で目に見えにくい作業です。次の点を守ると、あとから検証できる状態を保てます。
- 元データ・整えたファイル・変更の一覧の3つを必ず分けて保存します。
- 重複の判断は厳しめに設定し、迷うものは統合しないほうが安全です。統合しすぎると、本来別の顧客が1件になってしまいます。
- 整える前と後の件数の差を毎回記録すると、急に差が大きくなった月に入力の仕方が変わったことに気づけます。
- クロス集計(2つ以上の項目を掛け合わせて集計する方法)をする前に、掛け合わせる列の表記がそろっているかを必ず確認させます。
- アップロードするファイルに、社外に出せない情報が含まれていないか事前に確かめます。
- 整えたデータを毎月のレポートにつなげる考え方はデータ集計・レポート作成の自動化、会計データとの組み合わせは管理会計の自動化も参考になります。
導入チェックリスト
運用を始める前に、次の項目を確認してください。
- □ コード実行とファイル作成の機能がオンになっている
- □ 整えるルール(表記・重複・欠け)を文章にした
- □ 元データを書き換えない決まりを指示文に入れた
- □ 変更の一覧を出させ、要確認の扱いを決めた
- □ 整える前と後の件数を記録する場所を作った
- □ ルールをプロジェクトに置き、翌月も同じ基準で整えられるようにした
株式会社木立の実践
株式会社木立では、Claudeのスケジュールタスクで経営ダッシュボードを毎朝更新しています。会計ソフト・宿泊の予約管理・広告・問い合わせ・社内の顧客管理など、出どころの違うデータを一画面にまとめるため、表記や数え方をそろえる工程を仕組みの中に組み込むことを重視しています。
データの種類が増えるほど、整える工程を人の手作業に頼ると抜けが出やすくなります。ルールを文章にしてClaudeに渡しておくと、担当者が替わっても同じ基準で整えられます。株式会社木立のAIコンサルティングは、ヒアリング1回でその直後から始められ、決まったマニュアルを使わず、進め方・使うAI・成果物をすべてお客様ごとにオリジナルで設計します。
よくある質問
データクレンジングとは何ですか?
データクレンジングとは、集計や分析の前に、表記ゆれ・重複・欠けている値・形式の違いを整え、正しく数えられる状態にする作業です。整えずに集計すると、件数や割合を読み違える原因になります。
Claudeでどんなファイルを整えられますか?
公式ヘルプによると、CSVやTSVなどのデータファイルを読み込んで分析でき、整えた結果はExcelファイルなどで出力できます。アップロードとダウンロードは1ファイル30MBまでです。
重複の判断をClaudeに任せても大丈夫ですか?
重複とみなす条件は人が決め、Claudeにはその条件の適用を任せます。条件に当てはまるか迷うものは統合せず「要確認」として残させ、担当者が最終的に判断する運用が安全です。
毎月同じルールで整えるにはどうすればよいですか?
整えるルールを文章にしてClaudeのプロジェクトの知識に置き、毎回の依頼でそのルールに従うよう指示します。整える前と後の件数を記録しておくと、ルールが合わなくなった時期にも気づけます。
まとめ
- データクレンジングは、集計前に表記ゆれ・重複・欠けを整え、正しく数えられる状態にする作業です。
- Claudeにはルールの適用と変更の記録を任せ、元データは書き換えません。
- 判断が分かれるものは統合せずに人が確認し、件数の差を毎回記録します。
自社の業務でClaudeをどう動かすか、設計から一緒に考えたい場合は、AIコンサルティングのページをご覧ください。ご相談はお問い合わせから受け付けています。