Perplexity verkar ta data utan tillstånd igen
Cloudflare blockerar AI-företagets webbspindlar
Den stora internettjänsten Cloudflare uppger att AI-företaget Perplexity, som driver en chatbott med samma namn, återigen har börjat samla in data som webbplatsägare inte vill ska hamna i olika AI-modeller.
Enligt Cloudflare har Perplexitys så kallade webbspindlar börjat maskera sig för att kunna kringgå de regler som finns i brandväggar och så kallade robots.txt-filer för att kunna komma åt data som webbplatsägare vill hindra AI-företagen att samla in. Cloudflare skriver:
"We are observing stealth crawling behavior from Perplexity, an AI-powered answer engine. Although Perplexity initially crawls from their declared user agent, when they are presented with a network block, they appear to obscure their crawling identity in an attempt to circumvent the website’s preferences. We see continued evidence that Perplexity is repeatedly modifying their user agent and changing their source ASNs to hide their crawling activity, as well as ignoring — or sometimes failing to even fetch — robots.txt files."
Som konsekvens har Cloudflare nu tagit bort Perplexity från sin lista över "verifierade botar" och infört nya filter för att blockera deras så kallade "stealth"-trafik. Perplexity själva har svarat på kritiken och menar att Cloudflare förväxlat legitim, användardriven datainsamling där en användare begär aktuell information via en AI-bott, med illasinnad bott-trafik. I ett uttalande skriver Perplexity:
"When companies like Cloudflare mischaracterize user-driven AI assistants as malicious bots, they’re arguing that any automated tool serving users should be suspect—a position that would criminalize email clients and web browsers, or any other service a would-be gatekeeper decided they don’t like.
This controversy reveals that Cloudflare’s systems are fundamentally inadequate for distinguishing between legitimate AI assistants and actual threats. If you can’t tell a helpful digital assistant from a malicious scraper, then you probably shouldn’t be making decisions about what constitutes legitimate web traffic."
Läs gärna våra regler!