Ir al contenido
Herramienta gratuita · Técnico

Validador y generador de robots.txt

Comprueba si Googlebot, Bingbot o los rastreadores de IA como GPTBot y PerplexityBot pueden acceder a una URL, detecta errores en el archivo y crea un robots.txt nuevo.

Origen

Análisis gratuitos restantes hoy: 40

Cómo funciona

Tres pasos, cero configuración

1

Introduce el dominio

O pega un robots.txt para probarlo antes de publicarlo.

2

Elige URL y user-agent

Googlebot, Bingbot, GPTBot, ClaudeBot, PerplexityBot o uno personalizado.

3

Lee el veredicto

Permitido o bloqueado, con la regla que lo decide.

Un archivo pequeño con un impacto enorme

Una línea equivocada en robots.txt puede bloquear el rastreo de todo tu sitio, o dejar fuera justo a los rastreadores de IA que alimentan ChatGPT y Perplexity. El validador aplica las reglas de Google: gana la regla coincidente más larga y, en caso de empate, Allow prevalece sobre Disallow.

Además del veredicto para el user-agent elegido, una tabla muestra lo que pueden ver los principales bots de búsqueda y de IA, y se señalan los problemas de sintaxis. En la pestaña Generar puedes crear un archivo nuevo con tu política para los bots de IA.

FAQ

Preguntas frecuentes

No. Disallow impide el rastreo, no la indexación: una página bloqueada puede seguir apareciendo si recibe enlaces. Para excluirla usa una meta etiqueta noindex (y deja que se pueda rastrear).

¿Listo para aparecer en Google y en las respuestas de la IA?

Avísame