Respuesta corta
cohere-training-data-crawler se observa como rastreador de datos de entrenamiento de Cohere; no se conoce documentación oficial clara.
Guia de crawlers IA
cohere-training-data-crawler se observa como rastreador de datos de entrenamiento de Cohere; no se conoce documentación oficial clara.
Respuesta corta
cohere-training-data-crawler se observa como rastreador de datos de entrenamiento de Cohere; no se conoce documentación oficial clara.
Datos del crawler
Token user-agent
cohere-training-data-crawler
Operador
Grupo KI-Console
Crawler autonomo: permite acceso, manten contenido publico legible y monitoriza logs.
robots.txt
Documentacion
No se encontro documentacion oficial clara para este token exacto.
Los directorios del sector asocian el token a Cohere. A falta de documentación clara del operador, conviene tratarlo con prudencia como rastreador de IA o de respuestas observado.
En KI-Console este bot pertenece al grupo «entrenamiento». Una visita puede indicar recogida de datos con fines de modelo o de recuperación, pero no prueba un canal de producto de Cohere concreto.
Bloquear cohere-training-data-crawler puede reducir como los sistemas de Cohere ven, indexan, usan para entrenamiento o recuperan tu contenido publico. Permitirlo mejora el acceso tecnico, pero nunca garantiza rastreo, ranking, cita ni respuesta IA positiva.
El comportamiento de este token ante robots.txt no está claramente documentado. Los fragmentos siguen siendo una política correcta para los rastreadores respetuosos.
Usa el token exacto cohere-training-data-crawler en robots.txt. Mantén rutas privadas bloqueadas por separado si solo una parte del sitio debe estar disponible.
Permitir :bot
User-agent: cohere-training-data-crawler
Allow: /
Bloquear :bot
User-agent: cohere-training-data-crawler
Disallow: /
Respuestas directas
KI-Console no vende visibilidad mágica. Hacemos tu sitio más legible para sistemas de IA y mostramos pruebas cuando los logs lo permiten.
cohere-training-data-crawler es un crawler o token de control robots.txt operado por Cohere. Los datos superiores muestran objetivo, comportamiento robots.txt y reglas exactas para permitir o bloquear.
Usa User-agent: cohere-training-data-crawler y Disallow: /. robots.txt es una directiva para crawlers conformes, no una barrera tecnica.
Puede reducir la visibilidad en sistemas de Cohere si esos sistemas ya no pueden rastrear, indexar, entrenar o recuperar tu contenido. El efecto depende del tipo de bot y del producto.
Comprueba tu sitio
Empieza con el escaneo gratis. Con una cuenta verificas el dominio, guardas historial, generas archivos y documentas visitas de crawlers en el tiempo.