Vérifications / Accès des robots IA

robots.txt tient Claude-User à l'écart de votre page d'accueil et de la plupart du site

Claude-User ne peut lire que les chemins que robots.txt lui autorise. Votre page d'accueil et le reste du site lui restent fermés, donc il ne peut pas les citer.

robots_partial_claude_user · Accès des robots IA · Erreur

Ce qui la déclenche

robots.txt n'autorise pas Claude-User à lire votre page d'accueil, mais lui laisse quelques autres chemins ouverts ; le constat nomme les trois premiers.

Ce qu'il faut changer

Supprimez la règle Disallow: / pour Claude-User dans robots.txt, ou ajoutez des règles Allow pour les autres chemins que vous voulez faire lire.

Exemple

Lignes de robots.txt qui autorisent Claude-User :

User-agent: Claude-User
Allow: /

Comment confirmer la correction

Ouvrez https://example.com/robots.txt : le groupe qui nomme Claude-User (ou le groupe *, si aucun ne le nomme) laisse la plus grande partie du site ouverte, pas seulement la page d'accueil
Lancez un nouveau crawl : le tableau des robots IA ne signale plus Claude-User comme bloqué en grande partie

À propos de Claude-User

Claude-User est l'agent que Claude peut utiliser pour accéder à un site web lorsqu'une personne lui pose une question. Anthropic indique que le désactiver empêche la récupération de votre contenu en réponse à une requête d'utilisateur, ce qui peut réduire votre visibilité dans la recherche web dirigée par l'utilisateur. Il est distinct de ClaudeBot et de Claude-SearchBot.

Robot de qualité de la recherche ; son blocage affecte l'indexation pour la recherche, pas la question en direct d'un utilisateur.

L'article d'aide d'Anthropic n'indique pas de chaîne user-agent pour les trois robots, et précise que ses adresses IP sources figurent sur une liste vers laquelle il renvoie. Comme Anthropic indique aussi que bloquer ces adresses peut empêcher ses robots de lire robots.txt, l'article conseille de contrôler l'accès dans robots.txt plutôt qu'au niveau IP.

Rôle : Récupération déclenchée par l'utilisateur. Respecte robots.txt : Oui, Anthropic indique que ses robots respectent robots.txt.

Claude-User : opérateur, chaîne user-agent et liste d'adresses

Fréquence

Nous n'avons pas mesuré sa fréquence sur un échantillon de sites. Les chiffres apparaissent ici quand une étude la couvre.

À propos de cette vérification

Identifiant	`robots_partial_claude_user`
Section du rapport	Accès des robots IA
Gravité	Erreur
Comment elle est décidée	Mesurée : lue directement dans la page ou la réponse du serveur.
Ajoutée	Avant le 19 oct. 2026 (versions 1 et 2), ou une vérification de site sans date de version
État	Mesurée dans chaque rapport
Le rapport donne le code	Oui, un bloc pour tout le site

Réglages selon la plateforme

Pour robots.txt, l'endroit du réglage dépend de la plateforme. Nos guides en couvrent 13 : réglages des robots IA par plateforme.

Vérifications liées

Voir si cela concerne votre site

Collez votre adresse : nous explorons jusqu'à 10 pages et montrons chaque problème trouvé, avec sa correction. Sans compte, sans carte.

Vérifier mon site gratuitement

Chaque offre explore jusqu'à sa limite de pages et liste ces vérifications avec la correction : tarifs.

Comment fonctionne un audit : méthode