Training
ClaudeBot
Training-Crawler
ClaudeBot ist der wichtigste Anthropic-Crawler für Modelltraining und Entscheidungen zum breiten Zugriff auf öffentliche Webinhalte.
Anthropic-Crawler
Liest Claude Ihre Website?
Claude-Sichtbarkeit hängt von mehr als einem Token ab. Anthropic nutzt getrennte Agents für Training, Live-Abrufe durch Nutzer und suchgestützten Zugriff, plus ältere Tokens, die noch in Logs auftauchen.
Anthropic
Die Claude-Agents sauber trennen
ClaudeBot, Claude-User und Claude-SearchBot beschreiben unterschiedliche Zugriffsmuster. Die Trennung zeigt, ob Claude Ihre öffentlichen Seiten trainieren, live abrufen oder über Suche erreichen kann.
Live-Abrufe
Claude-User
Live-Abruf durch Claude
Claude-User erscheint, wenn Claude eine Seite für eine konkrete Nutzeraktion abruft. Das ist der Live-Lese-Nachweis, den Website-Betreiber meist sehen wollen.
KI-Suche
Claude-SearchBot
Suchgestützter Claude-Zugriff
Claude-SearchBot gehört zu Such- und Retrieval-Flows, die aktuelle Antworten unterstützen können.
Alte Anthropic-Tokens
Ältere oder kompatible Tokens wie anthropic-ai und Claude-Web können in Loganalysen weiter wichtig sein. KI-Console führt sie in der Training-Gruppe, damit alte Nachweise nicht verloren gehen.
anthropic-ai
Claude-Web
robots.txt-Empfehlung
Nennen Sie die aktuellen Claude-Agents explizit und ergänzen Sie die alten Tokens, wenn Ihre Policy Anthropic-Zugriff erlauben soll. Private Pfade bleiben wie gewohnt blockiert.
Claude-Starterregeln
User-agent: ClaudeBot
Allow: /
User-agent: Claude-User
Allow: /
User-agent: Claude-SearchBot
Allow: /
User-agent: anthropic-ai
Allow: /
User-agent: Claude-Web
Allow: /
Sitemap: https://www.example.com/sitemap.xmlWie KI-Console Besuche belegt
KI-Console erkennt ClaudeBot, Claude-User, Claude-SearchBot, anthropic-ai und Claude-Web in Logs und Tracker-Meldungen und gruppiert sie, damit Live-Nachweis und Training-Traffic getrennt bleiben.
Was Claude-Zugriff nicht verspricht
Claude-Crawler zu erlauben verbessert technischen Zugriff, garantiert aber nicht, dass Claude die Website crawlt, zitiert, empfiehlt oder rankt.
Klare Antworten
Was skeptische Website-Betreiber zuerst wissen wollen
KI-Console verkauft keine magische Sichtbarkeit. Wir machen Ihre Website für KI-Systeme lesbarer und zeigen Nachweise, wo Logs sie hergeben.
Welcher Claude-Token beweist einen Live-Abruf?
Claude-User ist der klarste Live-Lese-Token, weil er zu einer konkreten Nutzeraktion gehört. ClaudeBot ist ein anderes Training-Signal.
Sind anthropic-ai und Claude-Web noch wichtig?
Ja, für historische Logs und Kompatibilität. Sie erscheinen vielleicht seltener als aktuelle Tokens, aber die Zuordnung verhindert verpasste ältere Anthropic-Nachweise.
Zeigt KI-Console Claude-Traffic getrennt?
Ja. KI-Console erkennt die Claude- und alten Anthropic-Tokens und trennt Live-, Training- und Such-Traffic im Crawler-Nachweis.
Eigene Website prüfen
Sehen Sie, welche KI-Signale jetzt funktionieren
Starten Sie zuerst den Gratis-Scan. Mit einem Konto verifizieren Sie die Domain, speichern Verlauf, generieren Dateien und dokumentieren Crawler-Besuche.