website@ki-console.com

Crawler OpenAI

ChatGPT legge il tuo sito?

ChatGPT legge le pagine pubbliche tramite tre agent OpenAI: GPTBot raccoglie dati di addestramento, OAI-SearchBot costruisce l’indice della ricerca di ChatGPT, ChatGPT-User preleva pagine quando qualcuno lo chiede. Secondo OpenAI, le regole robots.txt potrebbero non valere per ChatGPT-User. Un quarto agent, OAI-AdsBot, controlla solo le pagine di destinazione degli annunci.

OpenAI

I tre agent OpenAI importanti

Una visita di GPTBot, una di ChatGPT-User e una di OAI-SearchBot non significano la stessa cosa. Il token indica quale tipo di accesso è avvenuto. Il quarto agent OpenAI, OAI-AdsBot, controlla solo le pagine di destinazione degli annunci in ChatGPT e non ha a che fare con addestramento o ricerca.

Addestramento

GPTBot

Addestramento e accesso ai dati web

GPTBot raccoglie contenuti web che OpenAI può usare per addestrare i suoi modelli. Bloccarlo segnala che i tuoi contenuti non devono entrare nell’addestramento. Consentirlo è una scelta di policy, non la prova di una risposta live in ChatGPT.

Richieste live

ChatGPT-User

Letture live di pagine

ChatGPT-User è il segnale più forte che qualcuno ha chiesto a ChatGPT di accedere a una pagina o che uno strumento GPT l’ha richiesta in quel momento. OpenAI indica che le regole robots.txt potrebbero non valere qui, perché è una persona a far partire la richiesta. Un blocco non è quindi una garanzia.

Ricerca IA

OAI-SearchBot

Retrieval basato su ricerca

OAI-SearchBot rende le pagine reperibili nella ricerca di ChatGPT. Secondo OpenAI, bloccarlo tiene un sito fuori dalle risposte di ricerca, anche se può comparire come semplice link; le modifiche richiedono circa 24 ore.

Risposte dirette

Cosa chiedono prima i proprietari di siti scettici

KI-Console non vende visibilità magica. Rendiamo il tuo sito più leggibile per i sistemi IA e mostriamo prove quando il tracker o i log le forniscono.

ChatGPT-User è uguale a GPTBot?

No. GPTBot è legato ad addestramento o raccolta dati. ChatGPT-User è una richiesta live legata a un'azione utente o richiesta di tool.

Posso consentire ChatGPT-User ma bloccare GPTBot?

Sì, robots.txt può nominare gli agent separatamente: consenti ChatGPT-User e OAI-SearchBot e blocchi GPTBot per l’addestramento. Nota che OpenAI non si impegna a rispettare robots.txt per le richieste attivate dall’utente come ChatGPT-User.

KI-Console rileva gli agent OpenAI?

Sì. Il motore di rilevamento traccia GPTBot, ChatGPT-User, OAI-SearchBot e OAI-AdsBot e li mostra con il loro gruppo di crawler.

Quanto tempo passa prima che ChatGPT veda una modifica?

Con il recupero in diretta, subito: ChatGPT-User preleva la pagina nel momento in cui qualcuno chiede. Con l'indice di ricerca servono giorni o settimane, a seconda di quando torna OAI-SearchBot. Con l'addestramento, mai più: ciò che sta nel modello cambia solo con il modello successivo. Chi vuole correggere un'informazione falsa sulla propria azienda la corregge quindi sul sito e fa in modo che il recupero in diretta funzioni: è la via più rapida.

Bloccare GPTBot è dannoso?

Per la visibilità di oggi quasi nulla, perché GPTBot riguarda l'addestramento futuro, non la risposta odierna. Ma chi blocca GPTBot e per sbaglio blocca con lui ChatGPT-User e OAI-SearchBot — con una regola generica o una protezione anti-bot — si taglia fuori dal recupero in diretta. È l'errore che vediamo più spesso: l'intenzione mirava all'addestramento, il danno ha colpito la visibilità.

Perché ChatGPT nomina il mio concorrente e non me?

Di solito non perché il concorrente sia più grande, ma perché sulla sua pagina la risposta alla domanda posta sta scritta per esteso. Un modello nomina ciò che può citare. Chi scrive « ripariamo veicoli ibridi di tutte le marche a Berna e dintorni » viene nominato proprio su quella domanda; chi scrive « il vostro partner competente per la mobilità » no. Confrontate la vostra pagina e la sua rispetto alla domanda che vi interessa: la differenza sta quasi sempre nella concretezza, non nella dimensione.

Verifica il tuo sito

Scopri quali segnali IA funzionano adesso

Inizia con la scansione gratuita. Con un account verifichi il dominio, conservi lo storico, generi file e documenti nel tempo le visite dei crawler.