Validador de robots.txt

Descarga y analiza el robots.txt de un dominio, sus directivas y los sitemaps referenciados.

La descarga se realiza desde la red de AP Interactive, no desde tu navegador.

Sobre esta herramienta

El Validador de robots.txt descarga el archivo robots.txt de un dominio, analiza sus directivas (User-agent, Allow, Disallow, Crawl-delay) y lista los sitemaps referenciados. Útil para asegurarte de que no estás bloqueando por error páginas que quieres indexar.

Revisa qué rutas permites y bloqueas a cada bot.
Comprueba que declaras tu sitemap dentro del robots.txt.
Detecta bloqueos accidentales que hunden tu SEO.

Preguntas frecuentes

¿Un Disallow oculta mi página de Google?

No del todo. Disallow evita que se rastree, pero una URL bloqueada puede seguir apareciendo sin descripción si otros la enlazan. Para excluirla de verdad usa la etiqueta noindex, no solo robots.txt.

¿Debo enlazar el sitemap desde robots.txt?

Sí, es buena práctica añadir una línea Sitemap: con la URL de tu sitemap. Ayuda a los buscadores a descubrir todas tus URLs aunque no lo hayas enviado por Search Console.