Cloudflare bejelentette, hogy eltávolította a Perplexity nevű crawler-t a hitelesített botok listájáról, és mostantól aktívan blokkolja annak hozzáférését a weboldalakhoz. E lépést a felhasználói panaszok és a Perplexity által elkövetett robots.txt szabályok megsértése miatt tették, amely során a Perplexity agresszív módszereket alkalmazott, hogy weboldalakat crawlerjeivel elérjen. Cloudflare rendelkezik egy Verified Bots (Hitelesített Botok) rendszerrel, amely lehetővé teszi a megbízható botok számára, hogy hozzáférjenek a Cloudflare által védett weboldalakhoz. E rendszer keretein belül a botoknak meg kell felelniük bizonyos előírásoknak, mint például a robots.txt protokollok betartása. A Perplexity esetében azonban kiderült, hogy megsértette ezeket a követelményeket, amikor nem a megadott IP címekről próbálta meg elérni a weboldalakat, hanem eltérő, nem nyilvános…