Cómo probar robots.txt
Valida reglas de rastreo en minutos—detecta bloqueos accidentales antes de que eliminen tu tráfico orgánico.
- Sin registro
- Prueba de robots.txt gratis
- Resultados al instante
Cómo probar robots.txt rápidamente
- Abre tudominio.com/robots.txt y confirma que devuelve 200
- Busca Disallow: / o reglas demasiado amplias
- Revisa los grupos user-agent de rastreadores clave
- Verifica que rutas importantes (servicios, blog, productos) estén permitidas
- Confirma que la línea Sitemap apunta a un sitemap XML válido
- Usa el Probador de robots.txt para una vista analizada
Vista previa del informe
Vista previa de puntuaciones de salud de rastreo, reglas arriesgadas y comprobaciones de sitemap para cualquier dominio.
Qué cubre una prueba de robots.txt
Probar robots.txt verifica qué rutas pueden solicitar los rastreadores y si tu sitemap es descubrible.
-
Grupos user-agent y reglas comodín
Señal on-page revisada durante el análisis.
-
Patrones de rutas Allow y Disallow
Señal on-page revisada durante el análisis.
-
Bloqueos amplios (p. ej. Disallow: /)
Señal on-page revisada durante el análisis.
-
Referencias de URL de sitemap
Señal on-page revisada durante el análisis.
-
Accesibilidad (respuesta HTTP 200)
Señal on-page revisada durante el análisis.
-
Reglas que afectan landing pages clave
Señal on-page revisada durante el análisis.
Por qué debes probar robots.txt con regularidad
- Reglas Disallow el día Reglas Disallow el día del lanzamiento son un error habitual en migraciones.
- Bloqueos nuevos de /admin Bloqueos nuevos de /admin o /api a veces afectan rutas públicas de assets.
- Los patrones comodín se Los patrones comodín se comportan distinto según el rastreador.
Paso a paso: prueba tu robots.txt
-
Paso 1: Confirma que robots.txt carga
Visita /robots.txt y verifica HTTP 200 con contenido de texto plano.
- ¿Devuelve 200?
- ¿No vacío?
- ¿Servido desde el dominio de producción?
-
Paso 2: Busca Disallow: /
Busca reglas que bloqueen todo el sitio para todos los user-agents.
Malo
User-agent: * / Disallow: /
-
Paso 3: Revisa grupos user-agent
Confirma que Googlebot y otros rastreadores clave no estén bloqueados por accidente.
-
Paso 4: Revisa secciones importantes
Verifica que rutas a servicios, productos, blog y assets sean rastreables.
- ¿/services o /products permitidos?
- ¿CSS/JS no bloqueados?
-
Paso 5: Verifica referencias de sitemap
Confirma que las líneas Sitemap: apuntan a sitemaps XML activos.
-
Paso 6: Usa la herramienta de prueba
Pega tu dominio en el Probador de robots.txt para ver reglas allow/disallow analizadas por bot.
Errores comunes al probar robots.txt
-
Reglas de staging dejadas en producción
Por qué perjudica El sitio sigue invisible para buscadores tras el go-live.
Cómo solucionarlo Añade robots.txt a tu checklist de lanzamiento y vuelve a probar en producción.
-
Bloquear directorios que contienen landing pages
Por qué perjudica Las URLs importantes heredan la regla Disallow del directorio padre.
Cómo solucionarlo Usa rutas Disallow específicas; añade excepciones Allow donde haga falta.
-
Reglas comodín sin probar
Por qué perjudica Patrones como /api/* pueden bloquear /api-docs o rutas similares.
Cómo solucionarlo Prueba cada ruta URL crítica contra las reglas analizadas en el probador.
Deja de leer robots.txt línea por línea
Visualiza reglas de rastreo y confirma que los buscadores lleguen a tus páginas de dinero.
- Obtención en vivo desde tu dominio
- Reglas analizadas por user-agent
- Detección de patrones de riesgo
- Comprobación de referencias de sitemap
Preguntas frecuentes
¿Con qué frecuencia debo volver a probar el archivo robots.txt?
Vuelve a probar tras migraciones, actualizaciones de CMS, cambios de CDN y cualquier edición de configuración del servidor. En sitios estables, una revisión mensual detecta desviaciones por plugins o cambios de agencia. Prueba siempre justo antes y después del lanzamiento. Guarda la URL de robots.txt y compara hashes tras despliegues si gestionas varios entornos. El monitoreo automatizado es ideal, pero una prueba manual tarda menos de un minuto.
¿Puede el archivo robots.txt dañar el SEO si no se configura correctamente?
Sí. Reglas Disallow demasiado amplias impiden que los rastreadores accedan a páginas, lo que frena indexación y señales de frescura. Bloquear assets necesarios para renderizar puede perjudicar cómo Google evalúa tus páginas. Referencias de sitemap faltantes no bloquean SEO directamente pero ralentizan el descubrimiento de contenido nuevo. La solución siempre es probar, acotar reglas y volver a solicitar rastreo en Search Console tras corregir.
¿Qué debo incluir en robots.txt además de las reglas?
Incluye una o más directivas Sitemap: que apunten a tus sitemaps XML. Ayuda a los rastreadores a descubrir URLs más rápido, especialmente en sitios grandes. También puedes añadir comentarios para tu equipo (líneas que empiezan por #), pero los rastreadores los ignoran. Mantén el archivo simple—la lógica compleja pertenece al CMS o la config del servidor, no a patrones robots sin probar.
¿Listo para probar tus reglas de rastreo?
Introduce tu dominio y mira exactamente qué pueden rastrear los buscadores.
Ejecutar prueba gratuita de robots.txt