Vérifications / Accès des robots IA

robots.txt bloque Claude-User

Claude-User récupère une page lorsqu'une personne interroge cet assistant à son sujet.

robots_claude_user · Accès des robots IA · Erreur

Ce qui la déclenche

robots.txt n'autorise pas Claude-User à lire votre page d'accueil (une règle Disallow dans son propre groupe, ou dans le groupe * quand aucun groupe ne le nomme), et ne lui laisse aucun autre chemin ouvert.

Ce qu'il faut changer

Supprimez la règle Disallow pour Claude-User dans robots.txt.

Exemple

Lignes de robots.txt qui autorisent Claude-User :

User-agent: Claude-User
Allow: /

Comment confirmer la correction

Ouvrez https://example.com/robots.txt : aucun groupe qui nomme Claude-User (ou le groupe *, si aucun ne le nomme) n'interdit la page d'accueil
Lancez un nouveau crawl : le tableau des robots IA indique Claude-User comme autorisé

À propos de Claude-User

Claude-User est l'agent que Claude peut utiliser pour accéder à un site web lorsqu'une personne lui pose une question. Anthropic indique que le désactiver empêche la récupération de votre contenu en réponse à une requête d'utilisateur, ce qui peut réduire votre visibilité dans la recherche web dirigée par l'utilisateur. Il est distinct de ClaudeBot et de Claude-SearchBot.

C'est ici que la formulation d'Anthropic sur le coût est la plus directe : désactiver Claude-User empêche la récupération « en réponse à une requête d'utilisateur » et « peut réduire la visibilité de votre site pour la recherche web dirigée par l'utilisateur ». Une boutique qui le bloque peut rester connue du modèle par d'autres sources, mais Claude ne peut pas ouvrir la page quand on le lui demande.

Rôle : Récupération déclenchée par l'utilisateur. Respecte robots.txt : Oui, Anthropic indique que ses robots respectent robots.txt.

Claude-User : opérateur, chaîne user-agent et liste d'adresses

Fréquence

Nous n'avons pas mesuré sa fréquence sur un échantillon de sites. Les chiffres apparaissent ici quand une étude la couvre.

À propos de cette vérification

Identifiant	`robots_claude_user`
Section du rapport	Accès des robots IA
Gravité	Erreur
Comment elle est décidée	Mesurée : lue directement dans la page ou la réponse du serveur.
Ajoutée	Avant le 19 oct. 2026 (versions 1 et 2), ou une vérification de site sans date de version
État	Mesurée dans chaque rapport
Le rapport donne le code	Oui, un bloc pour tout le site

Réglages selon la plateforme

Pour robots.txt, l'endroit du réglage dépend de la plateforme. Nos guides en couvrent 13 : réglages des robots IA par plateforme.

Vérifications liées

Voir si cela concerne votre site

Collez votre adresse : nous explorons jusqu'à 10 pages et montrons chaque problème trouvé, avec sa correction. Sans compte, sans carte.

Vérifier mon site gratuitement

Chaque offre explore jusqu'à sa limite de pages et liste ces vérifications avec la correction : tarifs.

Comment fonctionne un audit : méthode