Decide qué contenido debe ser público
Anota la URL exacta, el entorno, la persona responsable y el estado deseado. Una página de servicios, una confirmación de formulario y una vista previa privada tienen necesidades diferentes. La autorización para publicar contenido debe preceder al cambio técnico.
Ni robots.txt ni noindex controlan quién puede acceder al contenido. Un documento con datos de clientes necesita autenticación y permisos adecuados. No abras un entorno de pruebas únicamente porque una herramienta SEO marque su bloqueo como error.
Comprueba la respuesta real del servidor
Solicita la dirección afectada y registra fecha, código de estado inicial, redirecciones y URL final. Lee robots.txt en el protocolo y host correctos. Identifica el user-agent al que se aplica la regla; el permiso para un robot no demuestra el acceso de Googlebot.
Revisa la metaetiqueta robots del HTML y X-Robots-Tag en las cabeceras HTTP. Una plantilla corregida puede seguir recibiendo noindex desde el servidor. Examina la respuesta GET que entrega el contenido, porque HEAD puede comportarse de otra manera. Conserva las observaciones sin credenciales ni secretos.
| Observación | Posible significado | Siguiente comprobación |
|---|---|---|
| Disallow coincide con la ruta | El rastreo puede estar bloqueado | Robot y regla aplicables |
| Noindex en HTML o cabecera | Se ha excluido la indexación | ¿Puede el robot leer la regla? |
| Se exige iniciar sesión | Acceso protegido | ¿Debe ser público este contenido? |
| 200 sin bloqueo | Una condición técnica cumplida | Contenido, canonical y datos del buscador |
Resuelve un conflicto en una confirmación ficticia
Ejemplo ficticio: /campana/gracias/ contiene noindex y también una regla Disallow. La empresa quiere mostrar la confirmación tras el formulario, pero no en los resultados de búsqueda. Si el robot no puede recuperar la página, tampoco puede leer noindex. Una URL bloqueada puede aparecer sin su contenido rastreado.
En una confirmación pública sin datos sensibles, permitir el rastreo puede hacer legible noindex. Si la confirmación contiene información privada, la protección de acceso es una tarea diferente. Identifica otras URL afectadas antes de modificar una regla general.
Corrige la causa y repite una prueba acotada
Si una página de servicios debe poder indexarse, corrige el bloqueo accidental documentado. Comprueba después estado final, texto accesible, canonical, enlaces internos y sitemap. Incluye una página que deba seguir protegida para detectar cambios demasiado amplios.
Guarda valores anteriores y posteriores, fecha y responsable. Con acceso autorizado a Search Console, la inspección de URL puede complementar la comprobación HTTP. Superar una prueba en directo no demuestra que la página ya esté indexada. Sigue el estado del buscador por separado y utiliza el protocolo para concretar una revisión de SEO técnico con ImbaHub.