自社サイトのPVが落ちている。原因はコンテンツの質か。Cloudflareの観測では、クローラーリクエストに占めるAI学習目的の割合が2025年春の22%から2026年6月に52%へ上がり、高頻度でクロールされる一部分類では人間トラフィックが1年未満で最大40%減った。ただし参照流量の約88%は依然Google経由である。
何が測られたのか(対象・母数・時期)
Cloudflareが自社ネットワークを通過するトラフィックの観測値をまとめ、「Content Independence Day」から1年の変化として公表した(出典:Cloudflare Blog(Cloudflare社)、2026-07-01、https://blog.cloudflare.com/agentic-internet-bot-report/)。
先に利害関係を書いておく。この記事はCloudflare社自身による発表であり、同社はAI学習クローラーのブロック機能や、パブリッシャー向けの帰属・計測・制御ツールといった当該製品の提供者である。本文には「新規ドメインではAI学習クローラーをデフォルトでブロックする」といった自社施策・投資のアピールが多数含まれ、測定値と宣伝的主張が同じ文章の中に混在している。数字の出どころとして、この点は読者が最初に把握しておくべき前提である。
さらに、出典には「Cloudflare Investor Day 2026 Presentation」が含まれる。投資家向け資料由来の数値が混ざっており、学術論文のような測定手法の開示ではない。
数値ごとに母数が異なる点が、この発表を読むうえで最大の落とし穴になる。先に整理する。
| 指標 | 値 | 母数・条件 |
|---|---|---|
| クローラーリクエストのうちAI学習目的 | 52% | 2026年6月時点。分母はCloudflareネットワークが観測したクローラーリクエスト全体(人間のアクセスを含む全トラフィックではない)。出典はCloudflare RadarおよびCloudflare Investor Day 2026資料 |
| 同・AI学習目的クローラー(比較時点) | 22% | 2025年春時点。上記52%と同じ分母(クローラーリクエスト全体)。約1年で30ポイント上昇 |
| 検索・エージェント・学習を混在させる複合用途クローラー | 36% | 2026年6月時点。分母はクローラーリクエスト全体。純粋な検索目的のクロールは少数かつ減少傾向と本文は記載 |
| 高頻度クロール分類における人間トラフィックの減少 | 最大40%減 | 1年未満の期間での減少。本文は「最も高頻度にクロールされている分類の一部」と記すのみで、該当分類名と比較基準期間の明確な特定がない。ネットワーク全体の平均ではない |
| 参照流量に占めるGoogle経由 | 約88% | 分母はCloudflare観測の参照流量全体。測定時点の明記は本文になし |
| インターネットトラフィックのうち非人間(エージェント等) | 50%超 | Cloudflareネットワークで観測したトラフィック全体が分母。本文は「初めて歴史的な閾値を超えた」と記載。時点の詳細は記載なし |
| 出版社とAI企業のコンテンツライセンス契約 | 50件超 | 2023年以降の累計。集計範囲・網羅性の定義は記載なし |
| Cloudflareのネットワーク配下にあるWebの割合 | 20%超 | 本文がデータ代表性の根拠として提示した自社主張値 |
「AIが52%」は「訪問者の52%がAI」ではない
この発表でいちばん誤読されやすいのが52%である。分母はクローラーリクエスト全体であって、サイト訪問者全体ではない。つまり「自社サイトに来ている人の半分がAI」という意味ではなく、「機械的なアクセスの内訳を見たら、その半分がAI学習目的だった」という話である。36%(複合用途)も88%(Google経由)も同様に、それぞれ別の分母を持つ。
読み違えを防ぐために、母数の違いだけ押さえておきたい。
- 52%・36%の分母=クローラーリクエスト全体(機械アクセスの内訳)
- 88%の分母=参照流量全体(外部サイトからの流入元の内訳)
- 50%超の分母=ネットワークを通過するトラフィック全体(人間と非人間の比)
一方で、非人間トラフィックが全体の50%超という数字は分母が「トラフィック全体」なので、こちらは「もう過半が人間ではない」と読んでよい。ただしCloudflareネットワークを通過した分に限る。
クローラーの正体であるエージェント側の動きはAIエージェントとは何か、ツール実行の変化はAIエージェントのツール進化も参照されたい。
中小企業にとっての意味:PV減を「質の問題」と即断しない
自社サイトのアクセスが落ちたとき、最初に疑われるのはコンテンツの質や更新頻度である。だがこの観測が示すのは、少なくともグローバル平均では、人間の訪問とAI由来のアクセスがまったく別の動き方をしているということだ。高頻度でクロールされる分類の一部では、人間トラフィックが1年未満で最大40%減っている。
したがって実務上やるべきことは、対策の前に切り分けである。
- アクセス解析で、ボット・クローラー由来と人間由来を分けて集計しているかを確認する
- 分けたうえで、人間の訪問だけを前年同期と比べる
- 検索エンジン経由の流入と、AI回答経由と思われる流入を、可能な範囲で別指標として持つ
- 減っているのが人間の訪問なのか、単にクローラーの数え方が変わっただけなのかを判定する
切り分けをせずにリライトや記事量産に走ると、原因が違うところにあるまま工数だけ消える。AI検索側の測り方はAI検索の効果測定にまとめている。
参照流量の約88%はGoogle:全振りしない根拠
同じ発表の中に、AI最適化に全振りすべきでない根拠も入っている。参照流量に占めるGoogle経由が約88%だという値である。AI由来のクロールが機械アクセスの過半を占めるようになっても、実際に人を連れてくる経路としては依然Googleが圧倒的に大きい、という構図になる。
ただしこの88%には測定時点の明記が本文にない。「いつの時点の88%なのか」が確認できない数字を、そのまま自社の意思決定の根拠にするのは危うい。方向感としては「従来のSEOがまだ基盤である」と読み、具体的な配分計算には使わない、という扱いが妥当だろう。
そのうえで、経営判断として決めるべき論点が一つ増えている。robots.txt等でAI学習クローラーを許可するのか、拒否するのか、条件付きにするのかである。出版社とAI企業の間で結ばれたコンテンツライセンス契約は2023年以降の累計で50件超とされる。自社コンテンツが学習に使われることの是非は、技術ではなく方針の問題であり、担当者に丸投げできる種類の判断ではない。
この数字が使えない範囲(限界の明示)
発表の性質上、そのまま自社に当てはめられない部分がある。不都合な点を含めて列挙する。
- 母集団はCloudflareネットワークを通過するトラフィックのみである。本文は自社が「Webの20%超」を担うと主張するが、裏返せば約8割は観測の外にある
- 発信元は本記事が示す課題に対応する製品(AI学習クローラーのブロック、パブリッシャー向けの帰属・計測・制御ツール)の提供者であり、測定値と自社施策のアピールが混在している
- 出典に投資家向け資料(Cloudflare Investor Day 2026 Presentation)が含まれ、学術的な測定手法の開示ではない
- 「人間トラフィック最大40%減」はネットワーク全体の平均ではなく、一部の高頻度クロール分類に限定された値である。本文は該当分類名と比較基準期間を明確に特定しておらず、そのまま一般化すると事実誤認になる
- 52%・36%・88%の分母はいずれも「クローラーリクエスト全体」または「参照流量全体」であり、サイト訪問者全体や人間の利用者全体の割合ではない
- 日本国内・中小企業に限定した内訳は一切示されていない。グローバルなネットワーク全体の集計値であり、日本の中小企業サイトの実態を直接示すものではない
- 参照流量88%や非人間トラフィック50%超は、測定時点が本文に明記されていない
特に4点目は要注意である。「人間の訪問が4割減った」という一文だけが切り出されて社内に伝わると、実際には自社が該当しない分類の話であっても、危機感だけが先行する。数字を社内共有するときは、必ず条件をセットで渡したい。日本国内の実態については中小企業のAI実態調査のような国内一次調査と併せて見るほうが、判断を誤りにくい。
TOEの読み筋
先に明記しておく。TOEでは、この発表が示すクローラー制御方針(新規ドメインでのAI学習クローラーのデフォルトブロック等)に相当する運用は未実施である。以下は自社で検証済みの結論ではなく、この一次資料をどう読んだかという解釈である。
読み筋としては三つある。
第一に、いま優先度が高いのは対策ではなく計測の切り分けである。人間の訪問とクローラー由来のアクセスを分けて見られる状態になっていない限り、サイト改修の投資判断が根拠を持たない。「PVが減った」という一つの数字で意思決定している会社は、まずここを直すのが安いと考えている。
第二に、robots.txtでのAI学習クローラー制御は、技術タスクではなく経営判断として扱うべきだと見ている。自社サイトのコンテンツが、問い合わせの入口として機能しているのか、それとも業界内での認知形成として機能しているのかで、ブロックの損得が逆になるからだ。前者ならAI回答に引用されないことは機会損失になり得るし、後者なら制御する意味が出てくる。この判断はサイトの役割定義とセットでしかできない。
第三に、AI最適化への全振りは現時点では推奨しにくい。参照流量の約88%がGoogle経由という値は測定時点が不明だが、方向としてはまだ従来の検索が主経路である。AI検索対応は既存ページの強化として積むほうが、記事の新規量産より整合が取れる。
いずれも、Cloudflareの観測がグローバル値であり日本の中小企業の内訳を含まない以上、自社データで確かめる前提の仮説にとどまる。TOEとしても、まずは自社サイトでのボット/人間の分離集計から着手する段階にある。
まとめ
- クローラーリクエストに占めるAI学習目的の割合は、2025年春の22%から2026年6月に52%へ上がった。分母はクローラーリクエスト全体であり、サイト訪問者の内訳ではない
- 高頻度でクロールされる一部分類では人間トラフィックが1年未満で最大40%減ったが、これは全体平均ではなく、本文に該当分類名と比較基準期間の明記がない
- 一方で参照流量の約88%は依然Google経由。ただし測定時点が本文に記載されておらず、方向感の把握までにとどめるのが妥当である
- 中小企業がまずやるべきは対策ではなく切り分け。ボット由来と人間由来を分けて集計し、人間の訪問だけを前年と比べる
- この発表はCloudflare社自身によるもので、同社は該当課題に対応する製品の提供者である。母集団も自社ネットワーク通過分に限られ、日本の中小企業の内訳は示されていない