Answer Engine Optimisation Le forum francophone des moteurs de reponse

Se connecter Creer un compte

Acces, agents et robots.txt

Faut-il bloquer GPTBot et consorts dans robots.txt ?

4 messages · 1 052 vues

serveur_froid Habitue 25 messages inscrit en 2025 Marseille

#1

On me demande de bloquer tous les agents d'IA. Je voudrais comprendre ce qu'on perd avant de le faire.

lemarcheur Moderateur 47 messages inscrit en 2019 Lyon

#2

Il faut distinguer trois familles, et elles n'ont pas le meme effet :

  • Les collecteurs d'entrainement (GPTBot, ClaudeBot, CCBot). Les bloquer retire vos contenus des corpus futurs. Aucun effet sur votre referencement.
  • Les agents de reponse en direct (OAI-SearchBot, PerplexityBot). Les bloquer vous retire des reponses generees au moment ou elles se construisent.
  • Google-Extended. Il gouverne l'usage dans Gemini et les fonctionnalites IA, PAS l'indexation. Google a ete explicite la-dessus : le bloquer ne retire rien de la recherche classique.

Bloquer les trois d'un bloc, c'est se retirer des reponses pour eviter l'entrainement. Ce n'est pas le meme arbitrage.

rgpd_alex Membre 15 messages inscrit en 2021 Bruxelles

#3

Precision juridique, parce que ca revient tout le temps : robots.txt n'est pas un acte juridique. C'est une convention que les agents respectent ou non. Si vous voulez un fondement opposable, c'est le droit d'auteur et vos conditions d'utilisation qu'il faut regarder, pas un fichier texte a la racine.

serveur_froid Habitue 25 messages inscrit en 2025 Marseille

#4

Merci, c'est exactement l'arbitrage que je cherchais a poser. On bloque l'entrainement, on laisse passer les agents de reponse.

Haut de page