Verificador robots.txt
Obtiene y analiza el robots.txt de cualquier sitio. Reglas de rastreo, directivas user-agent, sitemaps y detección de problemas SEO.
Ejecuta una verificación para ver resultados
API
POST /api/v1/web/robots5(1 vote)
¿Qué es Verificador robots.txt?
La herramienta de robots.txt obtiene y analiza el archivo robots.txt de cualquier sitio web, mostrando reglas de rastreo, directivas user-agent, sitemaps referenciados y posibles problemas SEO. Es esencial para verificar que los motores de búsqueda pueden rastrear correctamente tu sitio.