Google, Microsoft, OpenAI et Anthropic vont honorer un signal commun dans le fichier robots.txt pour permettre aux sites de retirer leur contenu de l’entraînement des modèles d’intelligence artificielle. Auparavant, un éditeur souhaitant refuser l’utilisation devait rédiger des règles distinctes pour chaque entreprise de crawl. Ce signal partagé découle d’une ébauche de l’IETF, initiée par Kevin Kelley d’Anthropic, et a reçu l’aval des quatre acteurs majeurs.
Ce mécanisme utilise le fichier robots.txt, déjà employé pour guider les robots d’indexation. Un site ajoutera un groupe pour un nouveau « jeton de politique » nommé __usage_ai-training, puis listera les chemins à exclure de l’entraînement. Krishna Madhavan, principal chef de produit pour Microsoft Bing, a souligné que « les éditeurs ne devraient pas devoir choisir entre être découvrables dans Bing et décider comment les modèles génératifs utilisent leur travail » (The Next Web).
Les calendriers d’implémentation diffèrent. Microsoft appliquera ces préférences à partir du 1er février 2027, remplaçant les balises NoArchive et NoCache utilisées depuis 2023. OpenAI vise une mise en œuvre « dans les mois à venir », précisant que ses contrôles existants, comme GPTBot, resteront en vigueur. Google prévoit de prendre en charge le signal en 2027 ; si un site refuse l’usage IA via ce jeton sans mentionner Google-Extended, Google le considérera comme un blocage sur ce dernier.
Ce jeton ne constitue pas un ordre de crawl, mais une simple déclaration de préférence. Un site dépourvu de ce groupe n’a exprimé aucune préférence, et les règles antérieures s’appliquent. En outre, le document n’a pas encore reçu l’approbation formelle de l’IETF. Microsoft a rappelé que ces préférences « ne créent aucun arrangement de licence ou de paiement ».
Au-delà du blocage, la pression monte pour une rémunération. Cloudflare a déjà demandé aux robots de payer pour accéder aux contenus, et en Australie, l’ABC et SBS réclament une compensation aux entreprises d’IA pour l’utilisation de leurs actualités. On surveille également si Meta adoptera ce signal commun, malgré le soutien exprimé par Andy Stone sur X.
Sources
- Google, Microsoft, OpenAI and Anthropic back one AI training opt-out, The Next Web, 31 octobre 2026
- The biggest names in AI are backing a new way to opt out of scraping, The Verge, 30 octobre 2026
Crédits photo
- Image en une : EFTA00002518 – Server rack with multiple hard drives and network cables connected in a data center…, par Federal Bureau of Investigation, Public domain, via Wikimedia Commons (recadrée)
