A Cloudflare kiterjesztette az 'AI képzés blokkolása' lehetőséget minden ügyfél számára, közölte a cég egy blogbejegyzésben. A funkció lehetővé teszi, hogy a webhelyek továbbra is indexelve legyenek a keresőmotorok által, miközben megakadályozza, hogy tartalmukat AI modellek képzésére használják fel, kezelve a keresőrobotok és az AI képzés közötti átfedést.

A cég emellett bevezette a 'felelős' crawler üzemeltetői megjelölést. A jogosultsághoz az üzemeltetőknek lehetőséget kell biztosítaniuk a képzésből való kilépésre és az AI összefoglalókra, nyilvánosságra kell hozniuk az URL-szintű indexelési státuszt, és el kell kötelezniük magukat, hogy a kilépés nem befolyásolja a keresési rangsorolást. Az Apple, a Google, a Microsoft, az Amazon, az Anthropic, a Meta és az OpenAI voltak azok a szervezetek, akik megkapták ezt a megjelölést.

A Cloudflare megjegyezte, hogy körülbelül 17% webhely engedélyezett valamilyen formájú képzés-blokkoló mechanizmust, míg kevesebb mint 1% blokkolja jelenleg a keresőrobotokat.