Cloudflareは、すべての顧客に対して「AIトレーニングをブロック」するオプションを拡張したと、同社はブログ投稿で述べました。この機能により、サイトは検索エンジンによってインデックスされ続ける一方で、そのコンテンツがAIモデルのトレーニングに使用されるのを防ぐことができ、検索クローリングとAIトレーニングの重複に対処します。

同社はまた、「責任ある」クローラーオペレーターの指定を導入しました。資格を得るためには、オペレーターはトレーニングとAI要約のオプトアウトを提供し、URLレベルのインデックス状況を開示し、オプトアウトが検索ランキングに影響を与えないことを約束する必要があります。Apple、Google、Microsoft、Amazon、Anthropic、Meta、OpenAIなどの企業がこの指定を受けました。

Cloudflareは、約17％のサイトが何らかの形でトレーニングブロック機構を有効にしている一方で、現在検索クローラーをブロックしているのは1％未満であると指摘しました。