Entrenamiento
ClaudeBot
Crawler de entrenamiento
ClaudeBot es el principal crawler Anthropic asociado a entrenamiento de modelos y decisiones de acceso amplio a la web pública.
Crawlers Anthropic
¿Claude lee tu sitio?
La visibilidad en Claude depende de más de un token. Anthropic usa agentes separados para entrenamiento, consultas en vivo de usuarios y acceso apoyado por búsqueda, además de tokens antiguos que aún aparecen en logs.
Anthropic
Separar bien los agentes Claude
ClaudeBot, Claude-User y Claude-SearchBot describen patrones de acceso distintos. Separarlos ayuda a ver si Claude puede entrenar con, recuperar en vivo o alcanzar tus páginas públicas mediante búsqueda.
Consultas en vivo
Claude-User
Consulta en vivo de Claude
Claude-User aparece cuando Claude recupera una página para una acción de usuario concreta. Es la señal de lectura en vivo que los propietarios de sitios suelen querer probar.
Búsqueda IA
Claude-SearchBot
Acceso Claude apoyado por búsqueda
Claude-SearchBot está ligado a flujos de búsqueda y retrieval que pueden apoyar respuestas actuales.
Tokens Anthropic legacy
Tokens antiguos o compatibles como anthropic-ai y Claude-Web pueden seguir importando en análisis de logs. KI-Console los mantiene en el grupo entrenamiento para no perder pruebas históricas.
anthropic-ai
Claude-Web
Guía robots.txt
Nombra explícitamente los agentes Claude actuales e incluye los tokens legacy si tu política permite acceso Anthropic. Las rutas privadas siguen bloqueadas como siempre.
Reglas iniciales Claude
User-agent: ClaudeBot
Allow: /
User-agent: Claude-User
Allow: /
User-agent: Claude-SearchBot
Allow: /
User-agent: anthropic-ai
Allow: /
User-agent: Claude-Web
Allow: /
Sitemap: https://www.example.com/sitemap.xmlPor qué el acceso de Claude cuenta de otro modo
Claude no tiene un índice de búsqueda público en el que uno pudiera ganarse una posición. No hay clasificación, ni colocación, ni ranking que mejorar. Lo que hay es la consulta en el momento de la pregunta, y ahí solo cuentan que su página sea accesible y que contenga la respuesta. Para quien gestiona una web es una buena noticia: no hay nada que comprar ni ventaja por presupuesto. Quien es accesible y claro parte del mismo sitio que una gran empresa.
Cuando los clientes le dan su página a Claude ellos mismos
Buena parte de los accesos de Claude no nacen de una búsqueda, sino de que alguien pega una dirección en una conversación: «¿qué dice esta página?», «compara estas dos ofertas». Es la visita más valiosa de todas, porque detrás hay una persona con una intención concreta. Pero fracasa si la página rechaza la consulta, y entonces el cliente no ve un error de su servidor, solo que Claude no puede decir nada al respecto. Justo por eso vale la pena seguir siendo accesible para Claude-User.
Lo que hace citable una página
Claude nombra las fuentes con enlace cuando bebe de ellas. Se cita lo que se puede extraer limpiamente: un párrafo que se sostiene solo, con una afirmación clara y un número o una fecha dentro. No es citable una frase que remite al párrafo anterior sin repetirlo. Una prueba práctica: copie un párrafo de su web en un archivo vacío. ¿Sigue teniendo sentido fuera de contexto y es exacto? Entonces es citable.
Crawl-delay: aquí sí funciona
Anthropic documenta expresamente que sus bots admiten Crawl-delay. Es poco habitual: Google lleva años ignorando esa directiva. Así que si la carga de rastreo es un problema, puede frenar a Anthropic con un valor en segundos en lugar de bloquear del todo. Casi siempre es la mejor decisión: un bloqueo cuesta visibilidad de forma permanente, un retraso solo cuesta tiempo. Se escribe en el mismo grupo que las demás reglas de ese agente.
Cómo KI-Console prueba visitas
KI-Console detecta ClaudeBot, Claude-User, Claude-SearchBot, anthropic-ai y Claude-Web en logs e informes del tracker, y los agrupa para separar prueba en vivo y tráfico de entrenamiento.
Lo que el acceso Claude no promete
Permitir crawlers Claude mejora el acceso técnico, pero no garantiza que Claude rastree, cite, recomiende o posicione el sitio.
Respuestas directas
Lo que primero preguntan los propietarios de sitios escépticos
KI-Console no vende visibilidad mágica. Hacemos tu sitio más legible para sistemas de IA y mostramos pruebas cuando los logs lo permiten.
¿Qué token Claude prueba una lectura en vivo?
Claude-User es el token de lectura en vivo más claro porque está ligado a una acción de usuario concreta. ClaudeBot es una señal de entrenamiento distinta.
¿Debo seguir mirando anthropic-ai y Claude-Web?
Sí para logs históricos y compatibilidad. Pueden aparecer menos que los tokens actuales, pero mapearlos evita perder pruebas Anthropic antiguas.
¿KI-Console muestra tráfico Claude separado?
Sí. KI-Console reconoce los tokens Claude y Anthropic legacy y separa tráfico en vivo, entrenamiento y búsqueda en el flujo de prueba crawler.
¿Tengo que permitir ClaudeBot para que Claude lea mi página?
No. ClaudeBot es el rastreador de entrenamiento; la lectura dentro de una conversación corresponde a Claude-User. Puede prohibir ClaudeBot y permitir Claude-User: es una postura habitual y bien fundada, los contenidos no deben ir al entrenamiento, pero una persona que está mirando la página en ese momento debe poder verla. Lo importante es que las reglas se escriban por separado y que no haya encima un bloqueo general.
¿Cómo distingo una consulta real de Claude de una falsa?
Por el agente de usuario solo, de ninguna manera: se falsifica en una línea. Anthropic publica los rangos de direcciones IP de sus agentes; una consulta desde un rango ajeno no es una consulta de Claude, diga lo que diga el identificador. KI-Console hace esa comparación en lugar de creerse la cadena. Para una comprobación propia basta con mirar de qué red vino la petición.
Comprueba tu sitio
Mira qué señales IA funcionan ahora
Empieza con el escaneo gratis. Con una cuenta verificas el dominio, guardas historial, generas archivos y documentas visitas de crawlers en el tiempo.