-
Perplexity: A Stealth Bot Blocked by Cloudflare – Mi Történt?
Cloudflare bejelentette, hogy eltávolította a Perplexity nevű crawler-t a hitelesített botok listájáról, és mostantól aktívan blokkolja annak hozzáférését a weboldalakhoz. E lépést a felhasználói panaszok és a Perplexity által elkövetett robots.txt szabályok megsértése miatt tették, amely során a Perplexity agresszív módszereket alkalmazott, hogy weboldalakat crawlerjeivel elérjen. Cloudflare rendelkezik egy Verified Bots (Hitelesített Botok) rendszerrel, amely lehetővé teszi a megbízható botok számára, hogy hozzáférjenek a Cloudflare által védett weboldalakhoz. E rendszer keretein belül a botoknak meg kell felelniük bizonyos előírásoknak, mint például a robots.txt protokollok betartása. A Perplexity esetében azonban kiderült, hogy megsértette ezeket a követelményeket, amikor nem a megadott IP címekről próbálta meg elérni a weboldalakat, hanem eltérő, nem nyilvános…
-
Perplexity: Miért blokkolja a Cloudflare a legitim AI asszisztenseket?
Perplexity, az AI asszisztenseket fejlesztő cég, reagált a Cloudflare állításaira, amelyek szerint az AI asszisztensek nem tisztelik a robots.txt fájlt, és titkos webes adatgyűjtést folytatnak. A Perplexity véleménye szerint a Cloudflare tévesen webrobotokként kategorizálja az AI asszisztenseket, amelyek valójában felhasználói kezdeményezésre működnek, és ezért nem kellene, hogy ugyanazok a korlátozások vonatkozzanak rájuk, mint a hagyományos webes crawlerekre. A Perplexity hangsúlyozza, hogy rendszere nem tárol vagy indexel tartalmakat előre. Az AI asszisztensek csak akkor kérik le a weboldalakat, amikor a felhasználó konkrét kérdéseket tesz fel. Például, ha egy felhasználó friss étteremértékelések iránt érdeklődik, az asszisztens azonnal lekérdezi és összefoglalja a releváns tartalmakat. Ez a megközelítés éles ellentétben áll a hagyományos crawlerekkel,…
