Crawlers OpenAI

ChatGPT lit-il votre site ?

Il n'existe pas un seul crawler ChatGPT. OpenAI utilise différents agents pour l'entraînement, l'accès live déclenché par l'utilisateur et le retrieval appuyé par recherche. Les séparer rend robots.txt et les preuves de visite plus clairs.

OpenAI

Les trois agents OpenAI importants

Une visite GPTBot, une visite ChatGPT-User et une visite OAI-SearchBot ne signifient pas la même chose. Le token montre quel type d'accès a eu lieu.

Entraînement

GPTBot

Entraînement et accès aux données web

GPTBot est le crawler OpenAI que la plupart des équipes associent à l'entraînement ou à la collecte web large. L'autoriser est une décision de politique, pas une preuve de réponse live dans ChatGPT.

Appels live

ChatGPT-User

Lecture live de pages

ChatGPT-User est le signal le plus fort qu'une personne a demandé à ChatGPT d'accéder à une page ou qu'un outil a demandé cette page à cet instant.

Recherche IA

OAI-SearchBot

Retrieval appuyé par recherche

OAI-SearchBot appartient aux workflows de recherche et retrieval. Il peut compter lorsque ChatGPT utilise des informations web actuelles plutôt que seulement la mémoire du modèle.

Conseil robots.txt

Si vous voulez que les systèmes liés à ChatGPT atteignent le contenu public, nommez explicitement les trois agents. Vous pouvez toujours bloquer les chemins privés ou autoriser les appels live tout en limitant l'accès d'entraînement.

Règles OpenAI de départ

User-agent: GPTBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: OAI-SearchBot
Allow: /

Sitemap: https://www.example.com/sitemap.xml

Comment KI-Console prouve les visites

KI-Console reconnaît GPTBot, ChatGPT-User et OAI-SearchBot dans les logs importés et via le tracker lorsqu'il est installé. Le Radar sépare les groupes pour que l'accès live ne disparaisse pas dans du trafic bot générique.

Ce qu'une visite ne prouve pas

Une visite de crawler ne garantit ni ranking, ni inclusion, ni citation, ni réponse positive. Elle prouve un accès technique à un moment donné, la base que vous pouvez contrôler.

Réponses directes

Ce que les propriétaires de sites sceptiques demandent d'abord

KI-Console ne vend pas de visibilité magique. Nous rendons votre site plus lisible pour les systèmes d'IA et montrons des preuves quand les logs le permettent.

ChatGPT-User est-il identique à GPTBot ?

Non. GPTBot est lié à l'entraînement ou à la collecte de données. ChatGPT-User est un appel live lié à une action utilisateur ou à une demande d'outil.

Puis-je autoriser ChatGPT-User mais bloquer GPTBot ?

Oui, robots.txt peut nommer les agents séparément. Vous pouvez ainsi soutenir les lectures live tout en prenant une autre décision pour l'accès d'entraînement.

KI-Console détecte-t-il les trois agents OpenAI ?

Oui. Le moteur de détection suit GPTBot, ChatGPT-User et OAI-SearchBot et les affiche avec leur groupe de crawler.

Vérifier votre site

Voyez quels signaux IA fonctionnent maintenant

Commencez par le scan gratuit. Avec un compte, vous vérifiez le domaine, gardez l'historique, générez des fichiers et documentez les visites de crawlers.

Lancer le scan gratuit S'inscrire gratuitement