Main gantée tenant une puce électronique carrée noire avec un symbole blanc gravé, sur un fond blanc uni.

Anthropic veut empêcher les entreprises de masquer l’IA utilisée

Anthropic développe FlashProve, une technologie qui permettrait de vérifier si une réponse a été produite par le modèle d’intelligence artificielle qu’une entreprise prétend utiliser. Ce système repose sur la cryptographie pour créer une sorte de justificatif mathématique de l’identité du modèle responsable d’une sortie donnée. L’objectif, selon la compagnie, est de donner aux utilisateurs la possibilité de confirmer qu’ils interagissent avec l’IA annoncée, et non avec une version moins performante ou différente.

Ce mécanisme pourrait aussi freiner les tentatives de fournisseurs qui remplaceraient secrètement leurs modèles avancés par des alternatives moins chères. Il pourrait également compliquer les cas où une société utilise un modèle différent de celui qu’elle déclare avoir employé pour prouver un certain niveau de performance.

Le principe repose sur ce qu’on appelle l’« inférence prouvable » : il s’agit de générer une preuve cryptographique attestant que le contenu provient d’un modèle spécifique. Cela ressemble aux signatures numériques utilisées dans les e-mails pour identifier l’expéditeur, mais ici, la vérification porte sur l’IA créatrice du contenu.

Vue rapprochée d'un bureau avec un ordinateur portable affichant des notations mathématiques complexes, à côté d'une pile de documents techniques.

Pour que cela fonctionne, les développeurs de modèles devraient publier une sorte d’empreinte digitale pour chaque système lancé. Cette identification serait ensuite comparée aux réponses produites par l’IA via des mécanismes cryptographiques. Un point important, c’est que ces empreintes digitales ne révéleraient pas les poids du modèle – ces valeurs internes qui définissent son fonctionnement. Anthropic et OpenAI, par exemple, gardent ces informations privées, mais ils pourraient participer à ce système sans dévoiler leur secret commercial. De plus, la technologie est conçue pour être légère, permettant la vérification directement sur un appareil local.

Au-delà des services grand public

L’utilité de FlashProve ne se limite pas aux chatbots. Les chercheurs citent des exemples concrets. Un développeur pourrait affirmer avoir utilisé un modèle avancé de cybersécurité pour analyser une bibliothèque logicielle à la recherche de vulnérabilités. Avec ce système, il serait possible de vérifier cryptographiquement si le modèle annoncé a bien été utilisé dans cet audit. Une autre application envisagée serait la validation d’un plan d’affaires par une IA jugée appropriée pour la tâche.

Le problème que FlashProve cherche à résoudre est donc la dissimulation : une entreprise annonce une IA de pointe mais utilise en réalité un modèle moins coûteux pour optimiser ses marges. La vérification rendrait cette tromperie techniquement difficile.

Un avancement de recherche

Malgré cette présentation, FlashProve demeure un projet de recherche. Anthropic a rendu publique une spécification technique détaillée ainsi que des composants fonctionnels sous licence ouverte, encourageant la communauté à examiner et à améliorer cette initiative. Les chercheurs ont précisé que cette publication représente une étape intermédiaire, et non la conclusion de leurs travaux. La société n’a pas communiqué de plans pour intégrer cette technologie dans ses propres services ou sur d’autres plateformes d’IA.

Il faudra suivre si la communauté parvient à stabiliser ce système de traçabilité, car l’adoption de cette vérification pourrait redéfinir la confiance que l’on accorde aux systèmes d’intelligence artificielle.

Sources