Comprobaciones / Acceso de crawlers de IA
robots.txt bloquea a OAI-SearchBot
OAI-SearchBot decide si la búsqueda de ChatGPT puede mostrar tu sitio.
robots_oai_searchbot · Acceso de crawlers de IA · Error
Qué la activa
robots.txt no deja a OAI-SearchBot leer tu página de inicio (una regla Disallow en su propio grupo, o en el grupo * cuando ningún grupo lo nombra) y no le deja ningún otro camino abierto.
Qué cambiar
Elimina la regla Disallow para OAI-SearchBot en robots.txt.
Ejemplo
Líneas de robots.txt que permiten OAI-SearchBot:
User-agent: OAI-SearchBot
Allow: /Cómo confirmar la corrección
- Abre https://example.com/robots.txt: ningún grupo que nombre a OAI-SearchBot (o el grupo *, si ninguno lo hace) prohíbe la página de inicio
- Lanza un nuevo rastreo: la tabla de crawlers de IA muestra a OAI-SearchBot como permitido
Sobre OAI-SearchBot
OAI-SearchBot es el rastreador de OpenAI para la búsqueda de ChatGPT. Los sitios que se excluyen no se mostrarán en las respuestas de búsqueda de ChatGPT, aunque pueden seguir apareciendo como enlaces de navegación. Obedece robots.txt con el token OAI-SearchBot, y OpenAI publica 39 rangos de IP para él.
Según OpenAI, los sitios excluidos «no se mostrarán en las respuestas de búsqueda de ChatGPT». Ese es el coste: una tienda que bloquea OAI-SearchBot renuncia a la parte de ChatGPT que enlaza a las fuentes. OpenAI recomienda lo contrario a los sitios que quieren aparecer: permitir OAI-SearchBot en robots.txt y permitir las peticiones desde sus rangos de IP publicados.
Función: Búsqueda. Respeta robots.txt: Sí, sigue robots.txt.
OAI-SearchBot: operador, cadena user-agent y lista de direcciones
Con qué frecuencia aparece
En una muestra, el estudio midió los sitios cuyo robots.txt bloquea OAI-SearchBot: 0 de 294 sitios de Show HN (0 %) y 0 de 67 sitios de Lovable (0 %).
Descargado los días 20 y 21 de oct. de 2026 como CitedBot, robots.txt respetado, sin JavaScript. Estudio: Launch crawl 2026-10 (inglés).
Sobre esta comprobación
| ID de la comprobación | robots_oai_searchbot |
|---|---|
| Sección del informe | Acceso de crawlers de IA |
| Gravedad | Error |
| Cómo se decide | Medida: se lee directamente de la página o de la respuesta del servidor. |
| Añadida | Antes del 19 oct. 2026 (versiones 1 y 2), o una comprobación de todo el sitio sin fecha de versión |
| Estado | Medida en cada informe |
| El informe da el código | Sí, un bloque para todo el sitio |
Ajustes por plataforma
En robots.txt, el sitio del ajuste depende de la plataforma. Nuestras guías cubren 13: ajustes de rastreadores de IA por plataforma.
Comprobaciones relacionadas
- robots.txt bloquea a Claude-SearchBot
- robots.txt bloquea a Claude-User
- robots.txt deja a ChatGPT-User fuera de tu página de inicio y de la mayor parte del sitio
- robots.txt deja a Claude-SearchBot fuera de tu página de inicio y de la mayor parte del sitio
Mira si afecta a tu sitio
Pega tu dirección: rastreamos hasta 10 páginas y mostramos cada problema que encontramos, con su corrección. Sin cuenta, sin tarjeta.
Cada plan rastrea hasta su límite de páginas y lista estas comprobaciones con la corrección: planes.
Cómo funciona una auditoría: método