Cloudflare on laajentanut 'estää AI-koulutus' -vaihtoehtonsa kaikille asiakkaille, yhtiö kertoi blogikirjoituksessa. Ominaisuus mahdollistaa sivustojen pysyä hakukoneiden indeksoituna samalla kun se estää niiden sisällön käytön AI-mallien kouluttamiseen, käsitellen hakukoneiden indeksoinnin ja AI-koulutuksen välistä päällekkäisyyttä.

Yhtiö esitteli myös 'vastuullisen' crawlerin operaattorin nimityksen. Kvalifioituakseen operaattoreiden on tarjottava mahdollisuus kieltäytyä koulutuksesta ja AI-yhteenvetoista, ilmoitettava URL-tason indeksointistatuksesta ja sitouduttava siihen, että kieltäytyminen ei vaikuta hakukonesijoituksiin. Apple, Google, Microsoft, Amazon, Anthropic, Meta ja OpenAI olivat joukossa niitä tahoja, joille nimitys myönnettiin.

Cloudflare huomautti, että noin 17 % sivustoista on ottanut käyttöön jonkinlaisen koulutuksen estomekanismin, kun taas alle 1 % estää tällä hetkellä hakukoneiden crawlereita.