Crawler OpenAI

ChatGPT legge il tuo sito?

Non esiste un unico crawler ChatGPT. OpenAI usa agent diversi per addestramento, accesso live attivato dall'utente e retrieval basato su ricerca. Separarli rende più chiare le decisioni robots.txt e le prove di visita.

OpenAI

I tre agent OpenAI importanti

Una visita GPTBot, una visita ChatGPT-User e una visita OAI-SearchBot non significano la stessa cosa. Il token indica quale tipo di accesso è avvenuto.

Addestramento

GPTBot

Addestramento e accesso ai dati web

GPTBot è il crawler OpenAI che molti team associano ad addestramento o raccolta web ampia. Consentirlo è una scelta di policy, non una prova di risposta live in ChatGPT.

Richieste live

ChatGPT-User

Letture live di pagine

ChatGPT-User è il segnale più forte che qualcuno ha chiesto a ChatGPT di accedere a una pagina o che uno strumento ha richiesto la pagina in quel momento.

Ricerca IA

OAI-SearchBot

Retrieval basato su ricerca

OAI-SearchBot appartiene ai workflow di ricerca e retrieval. Può contare quando ChatGPT usa informazioni web attuali invece della sola memoria del modello.

Indicazioni robots.txt

Se vuoi che i sistemi legati a ChatGPT raggiungano contenuti pubblici, nomina esplicitamente i tre agent. Puoi comunque bloccare percorsi privati o consentire richieste live limitando l'accesso più ampio all'addestramento.

Regole OpenAI iniziali

User-agent: GPTBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: OAI-SearchBot
Allow: /

Sitemap: https://www.example.com/sitemap.xml

Come KI-Console prova le visite

KI-Console riconosce GPTBot, ChatGPT-User e OAI-SearchBot nei log caricati e tramite tracker dove installato. Il Radar separa i gruppi, così l'accesso live non sparisce nel traffico bot generico.

Cosa non prova una visita

Una visita crawler non garantisce ranking, inclusione, citazione o risposta positiva. Prova l'accesso tecnico in un momento preciso, cioè la base che puoi controllare.

Risposte dirette

Cosa chiedono prima i proprietari di siti scettici

KI-Console non vende visibilità magica. Rendiamo il tuo sito più leggibile per i sistemi IA e mostriamo prove quando i log lo consentono.

ChatGPT-User è uguale a GPTBot?

No. GPTBot è legato ad addestramento o raccolta dati. ChatGPT-User è una richiesta live legata a un'azione utente o richiesta di tool.

Posso consentire ChatGPT-User ma bloccare GPTBot?

Sì, robots.txt può nominare gli agent separatamente. Così supporti le letture live degli utenti e prendi una scelta diversa sull'accesso di addestramento.

KI-Console rileva tutti e tre gli agent OpenAI?

Sì. Il motore di rilevamento segue GPTBot, ChatGPT-User e OAI-SearchBot e li mostra con il loro gruppo crawler.

Verifica il tuo sito

Scopri quali segnali IA funzionano adesso

Inizia con la scansione gratuita. Con un account verifichi il dominio, conservi lo storico, generi file e documenti nel tempo le visite dei crawler.

Avvia scansione gratuita Registrati gratis