Cloudflare on laiendanud oma 'AI koolituse blokeerimise' valikut kõigile klientidele, teatas ettevõte oma blogipostituses. See funktsioon võimaldab saitidel jääda otsingumootorite indekseerituks, samal ajal kui see takistab nende sisu kasutamist AI mudelite koolitamiseks, käsitledes otsingukraapimise ja AI koolituse vahelist ühisosa.

Ettevõte tutvustas ka 'vastutustundliku' kraaneri operaatori määratlust. Kvalifitseerimiseks peavad operaatorid pakkuma võimalust koolitusest loobuda ja AI kokkuvõtteid, avaldama URL-tasandi indekseerimise staatuse ning kinnitama, et loobumine ei mõjuta otsinguhinnanguid. Apple, Google, Microsoft, Amazon, Anthropic, Meta ja OpenAI olid hulgas organisatsioonidest, kes said selle määratlust.

Cloudflare märkis, et umbes 17% saitidest on lubanud mingisuguse koolituse blokeerimise mehhanismi, samas kui vähem kui 1% blokeerib praegu otsingukraapijaid.