CitedBy / Données / Référence AI-Access / France
Référence AI-Access · lu le 26 octobre 2026 · première lecture le 23 octobre 2026 · English
France (.fr) : quels robots d'IA les sites populaires bloquent
Le 26 octobre 2026, 21,1 % de 437 sites .fr populaires demandaient dans leur robots.txt à GPTBot de ne pas entrer, et 24,5 % (intervalle à 95 % : 20,7 à 28,7) le demandaient à au moins l'un de GPTBot, ClaudeBot, Google-Extended et CCBot : rang 5 sur 25 domaines nationaux de l'UE, classés du plus au moins bloquant. 13,3 % bloquaient au moins un robot de recherche des moteurs de réponse, et sur les 25 pays ensemble, 7,7 %.
Ce que cela mesure
- 24,5 % (107 sur 437) bloquent au moins l'un de GPTBot, ClaudeBot, Google-Extended et CCBot le 26 octobre 2026 ; ils étaient 24,4 % le 23 octobre 2026. Les quatre : 14,2 % (62).
- 21,1 % bloquent GPTBot (92) ; 17,4 % bloquent ClaudeBot, 18,3 % Google-Extended et 22,0 % CCBot.
- 13,3 % (58) bloquent au moins un robot de recherche des moteurs de réponse (OAI-SearchBot, Claude-SearchBot, PerplexityBot). Googlebot, le témoin : 1,1 %.
- llms.txt : 4,9 % (21 sur 426 ayant répondu, intervalle à 95 % 3,2 à 7,4) publient un llms.txt valide, contre 11,7 % des 10 223 sites de l'UE ayant répondu (lu le 25 octobre 2026).
Entre le 23 octobre 2026 et le 26 octobre 2026, 1 des 437 sites lus aux deux dates a changé ce qu'il demande à au moins l'un des 14 robots d'IA (ont commencé à bloquer : 1 ; ont arrêté : 0). Voisins au classement : .fi (25,3 %), .nl (23,4 %). Tous les pays et CMS (en anglais).
Par robot
| Robot | Bloqué le 23 octobre 2026 (n 439) | Bloqué le 26 octobre 2026 (n 437) | Intervalle à 95 % | Les 25 pays, 26 octobre 2026 |
|---|---|---|---|---|
| GPTBot | 20,7 % (91) | 21,1 % (92) | 17,5 à 25,1 | 15,5 % |
| OAI-SearchBot | 8,9 % (39) | 8,9 % (39) | 6,6 à 12,0 | 5,4 % |
| ChatGPT-User | 13,9 % (61) | 14,0 % (61) | 11,0 à 17,5 | 7,3 % |
| ClaudeBot | 17,1 % (75) | 17,4 % (76) | 14,1 à 21,2 | 13,4 % |
| Claude-SearchBot | 7,3 % (32) | 7,3 % (32) | 5,2 à 10,2 | 4,0 % |
| Claude-User | 8,4 % (37) | 8,5 % (37) | 6,2 à 11,5 | 3,9 % |
| PerplexityBot | 12,5 % (55) | 12,6 % (55) | 9,8 à 16,0 | 7,1 % |
| Perplexity-User | 7,1 % (31) | 7,1 % (31) | 5,0 à 9,9 | 4,2 % |
| Google-Extended | 18,0 % (79) | 18,3 % (80) | 15,0 à 22,2 | 11,4 % |
| Applebot-Extended | 13,0 % (57) | 13,3 % (58) | 10,4 à 16,8 | 10,8 % |
| CCBot | 21,9 % (96) | 22,0 % (96) | 18,3 à 26,1 | 15,3 % |
| Bytespider | 20,5 % (90) | 20,6 % (90) | 17,1 à 24,6 | 14,4 % |
| Amazonbot | 17,5 % (77) | 17,6 % (77) | 14,3 à 21,5 | 13,6 % |
| meta-externalagent | 14,4 % (63) | 14,6 % (64) | 11,6 à 18,3 | 12,1 % |
| Googlebot (témoin) | 1,1 % (5) | 1,1 % (5) | 0,5 à 2,7 | 0,8 % |
| Bingbot (témoin) | 1,4 % (6) | 1,4 % (6) | 0,6 à 3,0 | 1,5 % |
« Bloque » signifie que le robot n'a pas le droit d'accéder à / d'après le robots.txt du site. Googlebot et Bingbot sont des témoins : les sites qui ferment la porte aux robots d'IA ne la ferment presque jamais à la recherche classique.
Méthode et limites
- Échantillon : les 600 domaines les mieux classés par Tranco pour chacun des 25 domaines nationaux de l'UE (Luxembourg 250), liste Tranco 56Z8N. Les mêmes sites sont relus chaque semaine : les dates de cette page sont des relectures d'une même liste, pas de nouveaux échantillons.
- Ce qui est lu : le
/robots.txtde chaque site, selon la RFC 9309 ; « bloque » signifie que le robot n'a pas le droit d'accéder à/. Les pourcentages sont calculés sur les sites dont le robots.txt a pu être lu ; les autres relèvent de la couverture, et non d'une autorisation. llms.txt : le fichier/llms.txtest valide s'il passe le contrôle de forme de llmstxt.org (méthode). - Limites : le robots.txt exprime une demande, pas ce qu'applique un pare-feu, et cet index ne mesure pas ce que cite un assistant. Un domaine national n'est pas le pays de l'exploitant. Sites populaires seulement : un échantillon aléatoire de sites donne des chiffres plus bas.
- Données : une ligne par domaine, 23 octobre 2026 · une ligne par domaine, 26 octobre 2026 · llms.txt par domaine, 25 octobre 2026. Licence CC BY 4.0 ; citer « CitedBy EU AI-Access Index, 26 octobre 2026 ».
Que dit votre robots.txt aux robots d'IA ?
Le test gratuit montre quels robots d'IA votre robots.txt et votre serveur laissent entrer, avec la correction exacte. Avec l'audit payant, nous explorons votre site jusqu'à la limite de pages de votre offre et donnons la correction exacte de chaque problème. À partir de 9 €, garantie de remboursement de 14 jours.