Saltar al contenido
CitedByAuditar un sitio

Comprobaciones / Acceso de crawlers de IA

robots.txt bloquea a Claude-User

Claude-User obtiene una página cuando una persona le pregunta a ese asistente por ella.

robots_claude_user · Acceso de crawlers de IA · Error

Qué la activa

robots.txt no deja a Claude-User leer tu página de inicio (una regla Disallow en su propio grupo, o en el grupo * cuando ningún grupo lo nombra) y no le deja ningún otro camino abierto.

Qué cambiar

Elimina la regla Disallow para Claude-User en robots.txt.

Ejemplo

Líneas de robots.txt que permiten Claude-User:

User-agent: Claude-User
Allow: /

Cómo confirmar la corrección

  1. Abre https://example.com/robots.txt: ningún grupo que nombre a Claude-User (o el grupo *, si ninguno lo hace) prohíbe la página de inicio
  2. Lanza un nuevo rastreo: la tabla de crawlers de IA muestra a Claude-User como permitido

Sobre Claude-User

Claude-User es el agente que Claude puede usar para acceder a un sitio web cuando una persona le hace una pregunta. Anthropic dice que desactivarlo impide recuperar tu contenido en respuesta a una consulta del usuario, lo que puede reducir tu visibilidad en la búsqueda web dirigida por el usuario. Es independiente de ClaudeBot y Claude-SearchBot.

Aquí es donde la redacción de Anthropic sobre el coste es más directa: desactivar Claude-User impide la recuperación «en respuesta a una consulta del usuario» y «puede reducir la visibilidad de tu sitio en la búsqueda web dirigida por el usuario». Una tienda que lo bloquea puede seguir siendo conocida por el modelo a través de otras fuentes, pero Claude no puede abrir la página cuando se le pide.

Función: Descarga iniciada por el usuario. Respeta robots.txt: Sí, Anthropic dice que sus robots respetan robots.txt.

Claude-User: operador, cadena user-agent y lista de direcciones

Con qué frecuencia aparece

No hemos medido lo frecuente que es en una muestra de sitios. Las cifras aparecen aquí cuando un estudio la cubre.

Sobre esta comprobación

ID de la comprobaciónrobots_claude_user
Sección del informeAcceso de crawlers de IA
GravedadError
Cómo se decideMedida: se lee directamente de la página o de la respuesta del servidor.
AñadidaAntes del 19 oct. 2026 (versiones 1 y 2), o una comprobación de todo el sitio sin fecha de versión
EstadoMedida en cada informe
El informe da el códigoSí, un bloque para todo el sitio

Ajustes por plataforma

En robots.txt, el sitio del ajuste depende de la plataforma. Nuestras guías cubren 13: ajustes de rastreadores de IA por plataforma.

Comprobaciones relacionadas

Mira si afecta a tu sitio

Pega tu dirección: rastreamos hasta 10 páginas y mostramos cada problema que encontramos, con su corrección. Sin cuenta, sin tarjeta.

Cada plan rastrea hasta su límite de páginas y lista estas comprobaciones con la corrección: planes.

Cómo funciona una auditoría: método