Reponse courte
bedrockbot est le jeton robots.txt générique du robot web d'Amazon Bedrock pour les bases de connaissances.
Guide des crawlers IA
bedrockbot : bien configurer robots.txt
bedrockbot est le jeton robots.txt générique du robot web d'Amazon Bedrock pour les bases de connaissances.
Faits crawler
Faits sur bedrockbot
Token user-agent
bedrockbot
Operateur
Amazon Web Services
Groupe KI-Console
Entraînement
Crawler autonome : autoriser l acces, garder le contenu public lisible et surveiller les logs.
robots.txt
Oui, documente
Documentation
Ouvrir la documentation sourceQu est-ce que bedrockbot ?
Amazon Bedrock peut explorer les sites qu'un client configure comme source de données pour une base de connaissances. AWS décrit des règles bedrockbot et bedrockbot-UUID.
Objectif et sens SEO
Dans KI-Console, ce robot appartient au groupe « entraînement ». Plus précisément, il s'agit d'alimenter et d'interroger une base de connaissances pour des applications Bedrock configurées par le client.
Visibilite et confidentialite
Bloquer bedrockbot peut reduire la maniere dont les systemes de Amazon Web Services voient, indexent, utilisent pour l entrainement ou recuperent votre contenu public. Autoriser ameliore l acces technique, mais ne garantit jamais crawl, classement, citation ou reponse IA positive.
AWS documente que le robot web respecte robots.txt selon la RFC 9309 et qu'il examine les règles bedrockbot-UUID avant les règles génériques bedrockbot.
robots.txt pour bedrockbot
Utilisez le token exact bedrockbot dans robots.txt. Gardez les chemins prives bloques separement si seule une partie du site doit etre accessible.
Autoriser :bot
User-agent: bedrockbot
Allow: /Bloquer :bot
User-agent: bedrockbot
Disallow: /Réponses directes
Ce que les propriétaires de sites sceptiques demandent d'abord
KI-Console ne vend pas de visibilité magique. Nous rendons votre site plus lisible pour les systèmes d'IA et montrons des preuves quand les logs le permettent.
Qu est-ce que bedrockbot ?
bedrockbot est un crawler ou un token de controle robots.txt opere par Amazon Web Services. Les faits ci-dessus indiquent son objectif, son comportement robots.txt et les regles exactes pour autoriser ou bloquer.
Comment bloquer bedrockbot dans robots.txt ?
Utilisez User-agent: bedrockbot et Disallow: /. robots.txt est une directive pour les crawlers conformes, pas une barriere technique.
Bloquer bedrockbot reduit-il la visibilite IA ?
Cela peut reduire la visibilite dans les systemes de Amazon Web Services si ces systemes ne peuvent plus crawler, indexer, entrainer ou recuperer votre contenu. L effet depend du type de bot et du produit.
Vérifier votre site
Voyez quels signaux IA fonctionnent maintenant
Commencez par le scan gratuit. Avec un compte, vous vérifiez le domaine, gardez l'historique, générez des fichiers et documentez les visites de crawlers.