Herramienta gratuita
¿Tu robots.txt está bloqueando crawlers de IA?
Pega tu robots.txt abajo. Lo verificaremos contra 15 crawlers de IA conocidos y te mostraremos cuáles aún pueden acceder a tu contenido.
Cómo funciona
Esta herramienta analiza tu archivo robots.txt y verifica cada user agent de crawler de IA contra tus reglas.
Pega tu robots.txt
Copia el contenido de tu archivo robots.txt y pégalo en el cuadro de texto.
Verificamos 15 crawlers de IA
Analizamos tus directivas contra GPTBot, ClaudeBot, Bytespider y 12 más crawlers de IA conocidos.
Ve tu exposición
Obtén un informe claro mostrando qué crawlers están bloqueados y cuáles aún pueden acceder a tu sitio.