Poradniki
13 aug 2026 · 10 min
robots.txt dla botów AI: GPTBot, OAI-SearchBot, PerplexityBot i inne
Każdy dostawca AI wysyła kilka botów o różnych funkcjach: trening modeli, indeks wyszukiwarki AI i fetch na żądanie użytkownika. Wyjaśniamy, co robi każdy token w robots.txt, ile kosztuje jego blokada i jakie reguły wpisać dla trzech strategii.