Cloudflare uvodi kontrolu: sajt može ostati u pretrazi, ali zabraniti AI trening

Ključne činjenice

Cloudflare je objavio nove kontrole i oznaku Accountable za upravljanje pristupom AI crawlerima uz saradnju sa Appleom, Googleom i Microsoftom.

Cloudflare je predstavio novu mogućnost za vlasnike sajtova koji žele da zadrže prisustvo u internet pretrazi, ali ne žele da njihov sadržaj automatski bude korišćen za treniranje sistema veštačke inteligencije.

Kompanija navodi da nove kontrole razdvajaju dve potrebe koje su se do sada često tretirale zajedno: indeksiranje sadržaja radi pronalaženja u pretraživačima i pristup sadržaju za potrebe AI treninga.

Uz tehničke kontrole, Cloudflare uvodi i oznaku Accountable, zamišljenu kao deo zajedničkog modela ponašanja za takozvane mixed-use crawlere koji mogu da služe i pretrazi i AI sistemima.

Prema Cloudflareu, u izradi tog modela učestvuju i Apple, Google i Microsoft, što bi trebalo da vlasnicima sajtova olakša da preciznije odrede kako različiti automatizovani sistemi smeju da koriste njihov sadržaj.

Za izdavače i druge vlasnike velikih količina sadržaja najvažnija promena je mogućnost da ne moraju da biraju između potpunog blokiranja crawlerskog pristupa i potpunog otvaranja sadržaja za sve namene.

Cloudflare ovu promenu predstavlja kao način da pravila pristupa sadržaju postanu jasnija i proverljivija, dok će stvarni efekat zavisiti od toga koliko široko će novi model prihvatiti operatori pretraživača i AI sistema.