Cloudflareが「AIクローラー」を今日からデフォルトブロック — あなたのネット検索はどう変わる？

いいタイミングで聞いてくれたね。今日2026年9月15日から、Cloudflareという世界最大規模のWebインフラ企業が、AIに特定のウェブサイトを「読ませない」設定をデフォルトで有効にしたんだよ。

インターネット上の「交通整理役」だよ。世界中のウェブサイトの約2割がCloudflareを経由していて、サイバー攻撃を防いだり、ページの表示を速くしたりしてるんだ。つまりCloudflareが何かを決めると、ウェブ全体に影響が出るんだよ。

まさにそのイメージで正解だよ。クローラーというのはウェブ上を自動で巡回してページの内容を読み込むプログラムのことで、検索エンジンもAIも使ってるんだ。ChatGPTやPerplexityがウェブの最新情報を答えられるのも、クローラーがサイトを読み続けてるおかげだよ。

そう、その通りだよ。でも今回ブロックされるのは特定の種類のクローラーだけで、Cloudflareは3つに分けて考えてるんだ。「検索用」「エージェント用」「モデル学習用」の3種類で、今日からは広告が入ったページで後の2つをデフォルトでブロックするようになったんだよ。

むしろAIが読みすぎるせいで人間の訪問者が減ってるんだよ。調査では「AIに回答を生成されると、ユーザーが元のサイトに訪問するクリック数が約40%減った」というデータもあるんだ。つまりAIにコンテンツを"吸い取られる"だけで、広告収入も得られないという状況がサイト運営者を悩ませてたんだよ。

もちろん困るよ。だからCloudflareは「Pay Per Use」という仕組みも用意したんだ。AIの回答に自分のコンテンツが引用されたら報酬がもらえるプログラムで、「読ませる代わりにお金をもらう」という仕組みだよ。これはウェブコンテンツとAI業界の関係が、「無料で読み放題」から「権利と対価」の時代に変わりつつあることを示してるんだよ。

直接的にはすぐ影響しないけど、長期的には「AIが答えられる情報の範囲が変わる」という形で影響するかもしれないよ。そして「なぜAIが特定の情報を知らないのか？」という疑問の答えが、実はこういう権利・対価の問題にある場合も増えてくるんだよ。

その方向に進んでると思うよ。今回のCloudflareの動きは「AIは無料でウェブを読んでいい」という暗黙のルールに対する、業界からの最初の本格的な反論とも言えるんだ。AIが強力になるほど、コンテンツを作る側の権利をどう守るかという問題が大きくなる。これはAIと創作者・出版社の関係を定義し直す、歴史的な転換点になるかもしれないよ。