Prüfungen / Zugriff der KI-Crawler
robots.txt blockiert Claude-User
Claude-User ruft eine Seite ab, wenn jemand diesen Assistenten danach fragt.
robots_claude_user · Zugriff der KI-Crawler · Fehler
Was zu ändern ist
Entfernen Sie die Disallow-Regel für Claude-User in der robots.txt.
Beispiel
Zeilen in der robots.txt, die Claude-User erlauben:
User-agent: Claude-User
Allow: /Wie häufig es vorkommt
Wir haben nicht gemessen, wie häufig das in einer Stichprobe von Sites vorkommt. Zahlen erscheinen hier, sobald eine Studie es abdeckt.
Zu dieser Prüfung
| Prüfungs-ID | robots_claude_user |
|---|---|
| Berichtsabschnitt | Zugriff der KI-Crawler |
| Schweregrad | Fehler |
| Wie sie entschieden wird | Gemessen: direkt aus der Seite oder der Serverantwort gelesen. |
| Hinzugefügt | Vor dem 19. Okt. 2026 (Versionen 1 und 2) oder eine seitenweite Prüfung ohne Versionsdatum |
| Status | In jedem Bericht gemessen |
| Bericht liefert den Code | Ja, ein Block für die ganze Site |
Einstellungen je Plattform
Bei der robots.txt hängt es von der Plattform ab, wo die Einstellung liegt. Unsere Ratgeber behandeln 13: KI-Crawler-Einstellungen je Plattform.
Verwandte Prüfungen
- robots.txt blockiert ChatGPT-User
- robots.txt blockiert Claude-SearchBot
- robots.txt blockiert OAI-SearchBot
- robots.txt blockiert Perplexity-User
- robots.txt blockiert PerplexityBot
- robots.txt blockiert CCBot
Prüfen, ob es Ihre Website betrifft
Fügen Sie Ihre Adresse ein: Wir crawlen bis zu 10 Seiten und zeigen jedes gefundene Problem mit der Lösung. Ohne Konto, ohne Karte.
Jeder Tarif crawlt bis zu seinem Seitenlimit und listet diese Prüfungen mit der Lösung: Tarife.
So funktioniert ein Audit: Methode