Comprobaciones / Acceso de crawlers de IA
robots.txt deja a OAI-SearchBot fuera de tu página de inicio y de la mayor parte del sitio
OAI-SearchBot solo puede leer las rutas que robots.txt le permite. Tu página de inicio y el resto del sitio le quedan cerrados, así que no puede citarlos.
robots_partial_oai_searchbot · Acceso de crawlers de IA · Error
Qué la activa
robots.txt no deja a OAI-SearchBot leer tu página de inicio, pero le deja abiertos algunos otros caminos; el hallazgo nombra los tres primeros.
Qué cambiar
Quita la regla Disallow: / para OAI-SearchBot en robots.txt o añade reglas Allow para las demás rutas que quieras que lea.
Ejemplo
Líneas de robots.txt que permiten OAI-SearchBot:
User-agent: OAI-SearchBot
Allow: /Cómo confirmar la corrección
- Abre https://example.com/robots.txt: el grupo que nombra a OAI-SearchBot (o el grupo *, si ninguno lo hace) deja abierta la mayor parte del sitio, no solo la página de inicio
- Lanza un nuevo rastreo: la tabla de crawlers de IA ya no marca a OAI-SearchBot como bloqueado en su mayor parte
Sobre OAI-SearchBot
OAI-SearchBot es el rastreador de OpenAI para la búsqueda de ChatGPT. Los sitios que se excluyen no se mostrarán en las respuestas de búsqueda de ChatGPT, aunque pueden seguir apareciendo como enlaces de navegación. Obedece robots.txt con el token OAI-SearchBot, y OpenAI publica 39 rangos de IP para él.
GPTBot es para el entrenamiento; bloquearlo no te quita de la búsqueda de ChatGPT, porque los ajustes son independientes.
OpenAI publica las direcciones que usa OAI-SearchBot en openai.com/searchbot.json. El 21 de octubre de 2026 ese archivo tenía 39 prefijos y llevaba la hora de creación 2026-01-02. Compara la dirección de los logs de tu servidor con esos prefijos antes de fiarte de una petición que solo afirma el nombre en su user agent. OpenAI dice también que, cuando obtiene robots.txt, puede añadir una marca `robots.txt` a la cadena de user agent, de modo que esas peticiones se distinguen fácilmente en los logs sin rutas.
Función: Búsqueda. Respeta robots.txt: Sí, sigue robots.txt.
OAI-SearchBot: operador, cadena user-agent y lista de direcciones
Con qué frecuencia aparece
No hemos medido lo frecuente que es en una muestra de sitios. Las cifras aparecen aquí cuando un estudio la cubre.
Sobre esta comprobación
| ID de la comprobación | robots_partial_oai_searchbot |
|---|---|
| Sección del informe | Acceso de crawlers de IA |
| Gravedad | Error |
| Cómo se decide | Medida: se lee directamente de la página o de la respuesta del servidor. |
| Añadida | Antes del 19 oct. 2026 (versiones 1 y 2), o una comprobación de todo el sitio sin fecha de versión |
| Estado | Medida en cada informe |
| El informe da el código | Sí, un bloque para todo el sitio |
Ajustes por plataforma
En robots.txt, el sitio del ajuste depende de la plataforma. Nuestras guías cubren 13: ajustes de rastreadores de IA por plataforma.
Comprobaciones relacionadas
- robots.txt deja a Claude-SearchBot fuera de tu página de inicio y de la mayor parte del sitio
- robots.txt deja a Claude-User fuera de tu página de inicio y de la mayor parte del sitio
- robots.txt deja a Perplexity-User fuera de tu página de inicio y de la mayor parte del sitio
- robots.txt deja a PerplexityBot fuera de tu página de inicio y de la mayor parte del sitio
Mira si afecta a tu sitio
Pega tu dirección: rastreamos hasta 10 páginas y mostramos cada problema que encontramos, con su corrección. Sin cuenta, sin tarjeta.
Cada plan rastrea hasta su límite de páginas y lista estas comprobaciones con la corrección: planes.
Cómo funciona una auditoría: método