自社サイトはAIにどれだけ読まれ、どれだけ人を返してもらっているのか。Cloudflareの実測では2025年7月時点で、Anthropicはクロール38,065.7ページあたり訪問1件、OpenAIは1,091.4対1、Perplexityは194.8対1。従来型のGoogleは5.4対1だった。読まれる量と来る量の桁が違う。
何が測られたのか（対象・期間・条件）
CloudflareがCloudflare Radarの AI Insights データを使い、自社ネットワークを通過するAIボットのクロール量と、そこから戻ってくる参照トラフィック（リファラ）を比較した分析を公表した（出典：Cloudflare（Cloudflare Blog、Cloudflare Radar の AI Insights データを使用）、2025-08-29、https://blog.cloudflare.com/crawlers-click-ai-bots-training/）。
先に利害関係を書いておく。この記事はCloudflare社自身による発表であり、同社は当該製品（Bot Management、Verified Bots、pay per crawl、WebBotAuth といったAIクローラの検知・制御・課金の仕組み）の提供者である。AIボットの流入を可視化し制御する製品を売っている会社が、AIボットの流入実態を測って公表している。数字そのものを疑う理由にはならないが、どの数字が強調されているかは、この立場と切り離さずに読む必要がある。
数値ごとに母数と条件が異なるので、先に整理する。
| 指標 | 値 | 対象・期間・条件 |
|---|---|---|
| AIボット活動のうち学習（training）目的の割合 | 79%（本文表現は「nearly 80%」） | 2025年7月時点。Cloudflareネットワークを通過するAIクローラのリクエストが母数。用途分類は運営者の自己申告と業界情報に基づく |
| 同・1年前の値 | 72% | 2024年7月時点。前年同月比較の基準値 |
| GPTBot（OpenAI）がAIクローリング全体に占める比率 | 4.7% → 11.7% | 2024年7月→2025年7月の前年同月比較。分母はCloudflare上で観測されたAIクローラのリクエスト全体であり、全Webトラフィックの比率ではない |
| ClaudeBot（Anthropic）が同全体に占める比率 | 6% → 約10% | 2024年7月→2025年7月の前年同月比較。分母は同じくAIクローラ全体 |
| Anthropic のクロール対参照比 | 38,065.7 : 1 | 2025年7月時点。CloudflareのHTMLリクエストベース。クロールされたページ数／送られてきた訪問者1人あたり |
| Anthropic の同比率（年初） | 286,930.1 : 1 | 2025年1月時点。7月には38,065.7 : 1 まで低下（サイト側から見れば改善） |
| OpenAI のクロール対参照比 | 1,091.4 : 1 | 2025年7月時点 |
| Perplexity のクロール対参照比 | 194.8 : 1 | 2025年7月時点 |
| Google のクロール対参照比 | 5.4 : 1 | 2025年7月時点。従来型検索エンジンとの対照値 |
この表のうち、参照（リファラ）側の分析だけは母集団がさらに狭い。Cloudflareの「ニュース系顧客のデータセット（南北アメリカ・欧州・アジア）」に限定されており、しかも顧客数の増減バイアスを避けるために特定週の固定顧客セットを使っている。全顧客の実測合計ではない。
クロール対参照比というのは何を意味する数字か
クロール対参照比は「そのボットが自社サイトのページを何ページ読んだら、訪問者が1人返ってくるか」を示す。Googleの5.4 : 1 は、5.4ページ読ませれば1人来る、というこれまでのWebの取引条件である。記事を書く、クロールされる、検索結果に出る、人が来る。この循環があったからこそ、中小企業がコストをかけてコンテンツを作る意味があった。
これに対して2025年7月時点のAI各社の値は桁が違う。
- Perplexity は194.8 : 1。Googleの約36倍のページを読ませて訪問1件
- OpenAI は1,091.4 : 1。Googleの約202倍
- Anthropic は38,065.7 : 1。Googleの約7,049倍
ただしAnthropicについては、2025年1月時点の286,930.1 : 1 から7月の38,065.7 : 1 へ大きく下がっている。サイト運営者から見れば「読まれた量に対して返ってくる人が増えた」方向であり、この比率は固定ではなく動く。年初の1点だけを取って「AIは何も返さない」と結論づけるのは、この数字の読み方として正しくない。
そして著者自身が明記している通り、クロール対参照比は相対的な不均衡を示すもので、収益への影響を直接測ったものではない。訪問1件あたりの価値がAI経由で高いのか低いのかは、このデータからは分からない。5.4 : 1 の訪問と38,065.7 : 1 の訪問が同じ価値だという保証もない。
クロールの中身は「学習」に寄っている
もうひとつの軸が、AIボットが何のために来ているかである。2025年7月時点で、AIボット活動のうち学習目的が79%（本文表現は「nearly 80%」）を占め、1年前の2024年7月時点の72%から上がっている。
事業者別の構成も動いている。AIクローリング全体に占める比率で、GPTBot（OpenAI）が4.7%から11.7%へ、ClaudeBot（Anthropic）が6%から約10%へ、いずれも2024年7月から2025年7月の1年で増えた。ここでの分母はCloudflare上で観測されたAIクローラのリクエスト全体であって、全Webトラフィックに占める比率ではない点に注意がいる。
学習目的が約8割ということは、来訪の大半は「今この瞬間の質問に答えるため」ではなく「モデルに覚えさせるため」だという意味になる。前者ならその場で出典として自社名が出る可能性があるが、後者はモデルの中に溶けて出典が消える。読まれる量と指名される量が連動しない構造は、ここから来ている。
なお、この用途分類はCloudflareが独立検証したものではなく、運営者の自己開示と業界情報に依拠している。ボットが「私は学習目的です」と申告した内容を、そのまま集計した数字である。
中小企業にとって、これは何を意味するのか
「で、うちに関係あるのか」に答える。関係する。ただし「AIをブロックしろ」という話ではない。この記事はブロックを推奨するものではなく、実態把握の材料である。
これまでのWeb運用は、記事を出す→検索から人が来る→問い合わせにつながる、という一本の線で設計されてきた。その前提が、AI経由の読まれ方が増えるほど成立しにくくなる。数字が示しているのは「読まれてはいる。ただし人は返ってこない」という状態である。
実務的には、次の3点に接続する。
- 自社サイトのAIクローラ流入を把握する。 サーバーログかCDNの管理画面で、User-Agentごとのリクエスト数を見る。GPTBot、ClaudeBot、PerplexityBot などがどれだけ来ているか、まず現物を見る。ここを見ていない会社は、判断以前に材料がない
- クロールを許可するか、制限するか、課金するかの方針を決める。 全面許可も全面拒否も方針である。決めていない状態だけが方針ではない。判断材料は自社のビジネスモデルで、コンテンツ自体が商品なら制限側、認知が売上につながるなら許可側に寄る
- 「AIに読ませて指名で来てもらう」前提でコンテンツを設計する。 検索順位ではなく、AIの回答の中で自社名・製品名が正しく引かれることを狙う書き方に変える。事実、固有名、数字、条件を本文に明示するのはそのためである
計測側の考え方はAI検索時代の効果測定、コストをかけずに情報発信を回す設計はゼロコストメディアも合わせて読むと、判断の解像度が上がる。
この数字が使えない範囲
不都合な点をまとめて書く。ここを飛ばすと数字を誤用することになる。
- データ母集団はCloudflareのネットワークを通過するトラフィックに限定される。Cloudflareを使っていないサイトの実態は含まれず、Web全体の代表値ではない
- 参照（リファラ）側の分析は「ニュース系顧客のデータセット（南北アメリカ・欧州・アジア）」に限定されている。業種が偏っており、そのまま製造業や一般の中小企業サイトの実態として一般化できない
- 顧客数の増減バイアスを除くため特定週の固定顧客セットを用いており、全顧客の実測合計ではない
- ボットの用途（学習／検索／ユーザー操作）の分類は運営者の自己開示と業界情報に依拠しており、Cloudflareが独立検証したものではない
- Anthropicは検証（verification）対応が遅れており、クローラの偽装（なりすまし）が容易であるとCloudflare自身が述べている。したがってAnthropic関連の数値は他社より不確実性が高い。38,065.7 : 1 という値も、偽装トラフィックが混ざっている可能性を含んで読む必要がある
- 多くのAI事業者がWebBotAuthによる暗号学的検証を未導入で、ボット識別はUser-Agent等に依存する部分が残る。User-Agentは自己申告であり、詐称できる
- 北半球の夏季は活動が減るなど季節変動があることを著者が明記している。2025年7月という観測時点そのものが、年間で見て低めの時期にあたる
- クロール対参照比は相対的な不均衡を示すもので、収益への影響を直接測ったものではないと著者が断っている
なお、事前調査の段階では Bytespider（14.1%→2.4%）および Amazonbot（10.2%→5.9%）という数値も候補に挙がっていたが、出典本文で確認できなかったため本記事では採用していない。
TOEの読み筋
先に明記する。TOEでは、ここに書く内容を自社サイトで実施していない。 Cloudflare上でのAIクローラ別流入量の測定も、pay per crawl の運用も、現時点で手をつけていない。以下は実施報告ではなく、この数字を読んだうえでの読み筋である。
読み筋は3つある。
第一に、この数字を「AIに読まれるのは損だ」と読むのは早い。38,065.7 : 1 が半年で286,930.1 : 1 から下がってきたという事実は、AI事業者側も参照を返す方向に動いていることを示唆する。今の比率で将来を固定して制限をかけると、比率が改善したときに取り逃す側に回る。
第二に、中小企業が最初にやるべきはブロック設定ではなく計測である。自社サイトに月にどれだけAIクローラが来ているか、その負荷がサーバーコストに乗っているか。これを見ないまま robots.txt を書き換えるのは、材料なしの判断になる。多くの中小企業サイトでは、そもそもAIクローラの流入量が語るほど大きくない可能性もある。まず見る。
第三に、コンテンツ側の設計を変える必要はあるが、それは「AI向けに書く」ことではない。事実と条件と数字を本文に明示的に書く、という当たり前の書き方に戻ることである。人が読んで正確に理解できる文章は、AIが読んでも正確に引ける。逆に、雰囲気だけで書かれた記事はAIに引かれず、人にも刺さらない。
導入の順番そのものに迷う場合は中小企業のAI導入 最初の一歩が入口になる。
まとめ
- 2025年7月時点のクロール対参照比は、Anthropic 38,065.7 : 1、OpenAI 1,091.4 : 1、Perplexity 194.8 : 1、Google 5.4 : 1。読まれる量と人が来る量の桁が違う（出典：Cloudflare、2025-08-29）
- AIボット活動のうち学習目的が79%（2025年7月時点、1年前は72%）。来訪の大半は回答用ではなくモデル学習用で、出典として名前が出る保証はない
- ただしAnthropicの比率は2025年1月の286,930.1 : 1 から半年で低下しており、この構造は固定ではなく動く
- この分析はCloudflare自身によるもので、同社はAIクローラの検知・制御・課金製品の提供者である。母集団もCloudflare経由のトラフィックに限られ、参照側の分析はニュース系顧客に偏っている。Web全体の代表値ではない
- 中小企業の実務としては、(1)自社サイトのAIクローラ流入をログやCDNで把握する、(2)許可／制限／課金の方針を決める、(3)AIに正確に引かれる書き方に変える、の3点。TOEではいずれも未実施であり、上記は実施報告ではなく読み筋である