Gratis · SEO
Generador de robots.txt para rastreadores de IA.
Bloquea o permite GPTBot, ClaudeBot, Google-Extended, PerplexityBot, CCBot y otros rastreadores de IA en robots.txt: bloquear el entrenamiento, mantener la búsqueda o bloquearlo todo.
Loading the calculator…
Cómo usar esta herramienta: Generador de robots.txt para rastreadores de IA
Introduce los datos o selecciona el archivo. Ajusta las opciones, genera el resultado y revísalo antes de copiarlo o descargarlo.
Límites y formatos compatibles
Los datos se procesan en tu dispositivo.
Notas técnicas en inglés
robots.txt is voluntary; some crawlers ignore it. User-agent names change, so check each company’s documentation. Everything is calculated in your browser; nothing you type is uploaded.
Training crawlers collect pages for model training; search crawlers index pages for AI answers; user agents fetch a page when a person asks. Blocked crawlers get “Disallow: /”; the others follow your normal rules.
The default policy blocks the 7 training crawlers (GPTBot, ClaudeBot, Google-Extended…) and keeps the 7 search and user-request crawlers allowed.