Prüfungen / Zugriff der KI-Crawler

llms.txt verweist auf Seiten, die Crawler nicht nutzen können

Die Adressen in llms.txt sind die Seiten, die Sie Assistenten zum Lesen empfehlen. Einige sind noindex, durch robots.txt gesperrt, leiten weiter, liefern einen Fehler oder keine Seite verlinkt sie: Die Karte widerspricht der Website.

llms_txt_conflicts · Zugriff der KI-Crawler · Hinweis

Was sie auslöst

Eine in Ihrer llms.txt aufgeführte Adresse wird von robots.txt blockiert, antwortet mit einem Fehler, leitet weiter, steht auf noindex oder hat, bei einem abgeschlossenen Crawl, keinen Link von einer Seite und steht nicht in der Sitemap.

Was zu ändern ist

Entfernen Sie diese Adressen aus llms.txt oder korrigieren Sie die Seite: noindex oder robots-Regel entfernen, auf die Zieladresse verlinken und von einer Seite der Website aus verlinken.

So bestätigen Sie die Korrektur

Öffnen Sie jede Adresse aus llms.txt: Sie antwortet mit 200, hat kein noindex und ist durch robots.txt erlaubt
Starten Sie einen neuen Crawl

Wie häufig es vorkommt

Wir haben nicht gemessen, wie häufig das in einer Stichprobe von Sites vorkommt. Zahlen erscheinen hier, sobald eine Studie es abdeckt.

Zu dieser Prüfung

Prüfungs-ID	`llms_txt_conflicts`
Berichtsabschnitt	Zugriff der KI-Crawler
Schweregrad	Hinweis
Wie sie entschieden wird	Gemessen: direkt aus der Seite oder der Serverantwort gelesen.
Hinzugefügt	Vor dem 19. Okt. 2026 (Versionen 1 und 2) oder eine seitenweite Prüfung ohne Versionsdatum
Status	In jedem Bericht gemessen
Bericht liefert den Code	Nein, die Lösung wird im Text beschrieben

Prüfen, ob es Ihre Website betrifft

Fügen Sie Ihre Adresse ein: Wir crawlen bis zu 10 Seiten und zeigen jedes gefundene Problem mit der Lösung. Ohne Konto, ohne Karte.

Meine Website kostenlos prüfen

Jeder Tarif crawlt bis zu seinem Seitenlimit und listet diese Prüfungen mit der Lösung: Tarife.

So funktioniert ein Audit: Methode