Aller au contenu
CitedBy

Accès des robots IA pour bol.com

Des robots qui décident si les assistants peuvent citer bol.com sont bloqués : OAI-SearchBot, ChatGPT-User, PerplexityBot, Bingbot, Googlebot. Robots d'entraînement seuls bloqués : GPTBot, ClaudeBot. C'est un choix légitime, qui ne retire pas bol.com des réponses.

RobotSert àrobots.txtRequête réelle
GPTBotEntraînement de modèlesAutorisé · 55 règles de chemin limitent ce robotRéponse 403 : refusé ou page de contrôle
OAI-SearchBotRecherche et citationsAutorisé · 55 règles de chemin limitent ce robotRéponse 403 : refusé ou page de contrôle
ChatGPT-UserPage chargée pour une personneAutorisé · 55 règles de chemin limitent ce robotRéponse 403 : refusé ou page de contrôle
PerplexityBotRecherche et citationsAutorisé · 55 règles de chemin limitent ce robotRéponse 403 : refusé ou page de contrôle
ClaudeBotEntraînement de modèlesAutorisé · 55 règles de chemin limitent ce robotRéponse 404
Google-ExtendedEntraînement de modèlesAutorisé · 55 règles de chemin limitent ce robotPas de requête (interrupteur robots.txt seul)
BingbotRecherche et citationsAutorisé · 55 règles de chemin limitent ce robotRéponse 403 : refusé ou page de contrôle
GooglebotRecherche et citationsAutorisé · 55 règles de chemin limitent ce robotRéponse 403 : refusé ou page de contrôle

robots.txt trouvé et lu.

Notre propre CitedBot a aussi reçu 403 sur la page d'accueil : le blocage ne vise pas que les robots IA.

Googlebot, Bingbot et les robots d'OpenAI sont aussi vérifiés par adresse IP. Un refus pour leur chaîne depuis notre adresse peut être un site qui se protège des imitations ; si le vrai robot est bloqué, Google Search Console et Bing Webmaster Tools le montrent.

La correction exacte

Votre serveur a répondu par un refus à GPTBot, OAI-SearchBot, ChatGPT-User, PerplexityBot, Bingbot, Googlebot quand le user-agent était celui de ce robot. Trouvez la règle responsable (protection anti-bots du CDN ou du pare-feu, extension de sécurité, règle user-agent du serveur) et laissez passer ces chaînes.

Ensuite : le reste du site

Cet outil lit une page et deux fichiers. Le contrôle gratuit explore un échantillon de pages et liste tout ce qui empêche les moteurs de recherche et les assistants de lire bol.com, avec la correction exacte pour chaque point.

Lancer le contrôle gratuit de bol.com

Méthode : robots.txt lu selon la norme RFC 9309 ; un GET de https://bol.com/ par robot, depuis le serveur de CitedBy (les vrais robots viennent de leurs propres plages d'adresses). Notre propre robot est CitedBot/1.0. Vérifié le 2026-10-21 (UTC).

Qui est qui

ChatGPT, Gemini, Copilot, Perplexity et Le Chat de Mistral répondent aux questions de vos acheteurs avec des robots différents. Les robots de recherche (OAI-SearchBot, PerplexityBot, Bingbot, Googlebot) décident si vous pouvez être cité. ChatGPT-User charge une page quand une personne la demande. Les robots d'entraînement (GPTBot, ClaudeBot, Google-Extended) alimentent des modèles : les bloquer est un choix qui ne vous retire pas des réponses.

Un point pour les sites français

En droit français, l'exception de fouille de textes et de données (article L122-5-3 du Code de la propriété intellectuelle, issu de la directive (UE) 2019/790) ne joue pas si le titulaire s'y oppose de manière lisible par machine, par exemple dans robots.txt. Bloquer un robot d'entraînement est donc un choix légitime. Information, pas un conseil juridique.

Voir un vrai résultat

Aussi gratuit : Vérificateur llms.txt