Det stora internetföretaget Cloudflare erbjuder nu sina kunder att blockera webbspindlar som samlar in information till AI-företags AI-modeller. Enligt Cloudflare har redan flera av deras kunder aktiverat den nya funktionen, bland annat mediaföretagen Condé Nast, TIME och The Associated Press (AP).

Samtidigt som Cloudflare släpper sin nya blockeringsfunktion lanserar man även något som man kallar för "Pay per crawl", något som innebär att AI-företag får betala en avgift för att deras webbspindlar ska kunna samla in information från Cloudflare-kunders webbplatser om kunderna tillåter det. Tanken bakom det är att mediaföretag och andra ska kunna få ersättning för det som AI-företagen i dagsläget mer eller mindre snor för att träna upp sina AI-modeller. Cloudflares VD Matthew Prince säger:

"Original content is what makes the Internet one of the greatest inventions in the last century, and it's essential that creators continue making it. AI crawlers have been scraping content without limits. Our goal is to put the power back in the hands of creators, while still helping AI companies innovate. This is about safeguarding the future of a free and vibrant Internet with a new model that works for everyone."

Cloudflares kunder kommer själva att kunna välja att tillåta att AI-bottar från vissa AI-företag får tillgång till deras webbplatser utan kostnad, medan de kan blockera eller avgiftsbelägga AI-bottar från andra företag. Ni ser hur gränssnittet för detta ser ut nedan.