Bing "URLs that are robots.txt disallowed": encuentra la regla y corrígela

Dónde aparece

En Bing Webmaster Tools, abre Site Explorer y aplica el filtro "URLs that are robots.txt disallowed" (URLs bloqueadas por robots.txt). El robots.txt tester muestra qué línea bloquea una página. Bing Webmaster Tools y su ayuda están en inglés, así que aquí citamos cada estado tal como lo escribe Bing, en inglés.

Qué significa

Tu archivo robots.txt le pide a Bingbot que no obtenga estas páginas, y Bingbot le hace caso. Bing no puede leer páginas que no tiene permiso para rastrear.

Las directrices de Bing dicen que robots.txt controla el rastreo, no lo que muestra Bing. La ayuda de Bing también dice que una página bloqueada puede salir igualmente en los resultados sin descripción. Para dejar una página fuera de Bing, usa noindex y deja que Bingbot rastree la página para que vea la regla.

Causas habituales

• Una regla Disallow pensada para una carpeta también coincide con páginas que quieres; por ejemplo, Disallow: /p también bloquea /productos/.
• Existe un grupo User-agent: bingbot. Entonces Bingbot solo sigue ese grupo y se salta tus reglas de *, incluidas las líneas Allow.
• El Disallow: / del sitio de pruebas se publicó con el sitio.
• Un plugin, el tema o un ajuste de la plataforma escribió reglas por ti.
• Hay archivos CSS o JavaScript bloqueados, así que Bingbot no puede renderizar la página.

Cómo encontrar la regla

1. Abre tudominio.com/robots.txt en el navegador. Lee todos los grupos, no solo User-agent: *.
2. En Bing Webmaster Tools, abre el robots.txt tester. Introduce la página en Test URL, deja seleccionado Bingbot y haz clic en Test. Te muestra la línea que la bloquea.
3. Desde Site Explorer, puedes enviar una dirección bloqueada directamente al robots.txt tester.
4. Si usas un plugin de SEO o un creador de webs, revisa su ajuste de robots.txt. Puede que regenere el archivo cada vez que guardas.

Cómo solucionarlo

1. Borra o acota la regla que bloquea páginas que quieres en Bing. Termina las reglas de carpeta con una barra, por ejemplo Disallow: /privado/.
2. Si mantienes un grupo bingbot, copia en él todas las reglas del grupo * que también deban aplicarse a Bing.
3. Permite los archivos CSS y JavaScript que necesitan tus páginas.
4. Sube el archivo nuevo. En el robots.txt tester, haz clic en Fetch latest y vuelve a probar la página.
5. Haz clic en Request indexing en URL Inspection para las páginas que más importan.

Ignóralo en las páginas que bloqueas a propósito: zonas de administración, carritos, búsqueda interna y combinaciones de filtros sin fin. Las directrices de Bing recomiendan bloquear rutas de rastreo como esas.

Con CrawlCoach

En los planes de pago, CrawlCoach lee tu robots.txt y avisa de las reglas que bloquean a Bingbot en tus páginas públicas que están en Google. Hace lo mismo con los rastreadores de búsqueda de ChatGPT, Claude, Perplexity y Apple. La corrección indica el rastreador y las páginas, y CrawlCoach vuelve a revisar el archivo después de que lo cambies.

Preguntas frecuentes

Fuentes

Revisado el 8 de octubre de 2026. Google cambia Search Console y su ayuda de vez en cuando. Si algo no coincide con lo que ves en pantalla, consulta la fuente.

• Ayuda de Bing Webmaster Tools: Site Explorer (en inglés)
• Ayuda de Bing Webmaster Tools: robots.txt tester (en inglés)
• Directrices para webmasters de Bing (en inglés)
• Ayuda de Bing Webmaster Tools: ¿por qué mi sitio no está en el índice? (en inglés)
• Ayuda de Bing Webmaster Tools: Crawl control (en inglés)
• Ayuda de Bing Webmaster Tools: qué rastreadores usa Bing (en inglés)