Saltar al contenido
CitedByAuditar un sitio

Comprobaciones / Acceso de crawlers de IA

robots.txt bloquea a GPTBot

Bloquea a GPTBot, que recopila datos de entrenamiento. Esto mantiene tus páginas fuera del entrenamiento de futuros modelos, no fuera de ChatGPT ni de otras búsquedas con IA.

robots_gptbot · Acceso de crawlers de IA · Aviso

Qué la activa

robots.txt no deja a GPTBot leer tu página de inicio (una regla Disallow en su propio grupo, o en el grupo * cuando ningún grupo lo nombra) y no le deja ningún otro camino abierto.

Qué cambiar

Solo si quieres que tus páginas entren en el entrenamiento de futuros modelos: elimina la regla Disallow para GPTBot. La búsqueda de ChatGPT depende de OAI-SearchBot.

Ejemplo

Líneas de robots.txt que permiten GPTBot:

User-agent: GPTBot
Allow: /

Cómo confirmar la corrección

  1. Abre https://example.com/robots.txt: ningún grupo que nombre a GPTBot (o el grupo *, si ninguno lo hace) prohíbe la página de inicio
  2. Lanza un nuevo rastreo: la tabla de crawlers de IA muestra a GPTBot como permitido

Sobre GPTBot

GPTBot es el rastreador de entrenamiento de OpenAI. Bloquearlo con Disallow en robots.txt le indica a OpenAI que el contenido del sitio no debe usarse para entrenar sus modelos fundacionales de IA generativa. No controla la búsqueda de ChatGPT, que usa OAI-SearchBot. OpenAI publica 18 rangos de IP para GPTBot.

OpenAI presenta un Disallow para GPTBot como una señal sobre el entrenamiento: el contenido no debe usarse para entrenar modelos fundacionales de IA generativa. La misma página da el ejemplo de un sitio que permite a OAI-SearchBot aparecer en los resultados de búsqueda mientras bloquea a GPTBot, así que un bloqueo aquí no te saca por sí solo de las respuestas de búsqueda de ChatGPT. Bloquear o no es una decisión de negocio; ambas son legítimas.

Función: Entrenamiento. Respeta robots.txt: Sí, sigue robots.txt.

GPTBot: operador, cadena user-agent y lista de direcciones

Con qué frecuencia aparece

En una muestra, el estudio midió los sitios cuyo robots.txt bloquea GPTBot: 12 de 294 sitios de Show HN (4 %) y 0 de 67 sitios de Lovable (0 %).

Descargado los días 20 y 21 de oct. de 2026 como CitedBot, robots.txt respetado, sin JavaScript. Estudio: Launch crawl 2026-10 (inglés).

Sobre esta comprobación

ID de la comprobaciónrobots_gptbot
Sección del informeAcceso de crawlers de IA
GravedadAviso
Cómo se decideMedida: se lee directamente de la página o de la respuesta del servidor.
AñadidaAntes del 19 oct. 2026 (versiones 1 y 2), o una comprobación de todo el sitio sin fecha de versión
EstadoMedida en cada informe
El informe da el códigoSí, un bloque para todo el sitio

Ajustes por plataforma

En robots.txt, el sitio del ajuste depende de la plataforma. Nuestras guías cubren 13: ajustes de rastreadores de IA por plataforma.

Comprobaciones relacionadas

Mira si afecta a tu sitio

Pega tu dirección: rastreamos hasta 10 páginas y mostramos cada problema que encontramos, con su corrección. Sin cuenta, sin tarjeta.

Cada plan rastrea hasta su límite de páginas y lista estas comprobaciones con la corrección: planes.

Cómo funciona una auditoría: método