IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)

Vous êtes nouveau sur Developpez.com ? Créez votre compte ou connectez-vous afin de pouvoir participer !

Vous devez avoir un compte Developpez.com et être connecté pour pouvoir participer aux discussions.

Vous n'avez pas encore de compte Developpez.com ? Créez-en un en quelques instants, c'est entièrement gratuit !

Si vous disposez déjà d'un compte et qu'il est bien activé, connectez-vous à l'aide du formulaire ci-dessous.

Identifiez-vous
Identifiant
Mot de passe
Mot de passe oublié ?
Créer un compte

L'inscription est gratuite et ne vous prendra que quelques instants !

Je m'inscris !

Hugging Face lance un appel officiel en faveur d'une transparence totale à la suite d'une intrusion dans son système par un modèle d'IA rebelle d'OpenAI, la première cyberattaque menée par un agent IA autonome

Le , par Anthony

163PARTAGES

7  0 
Clément Delangue, le PDG d'Hugging Face, a officiellement exigé d'OpenAI une « transparence totale » en divulguant l'ensemble des traces d'analyse forensique laissées par les agents d'intelligence artificielle (IA) rebelles qui ont pénétré les systèmes de son entreprise. Qualifiant cet incident d'« événement sans précédent » qui mérite une « réponse sans précédent », il a également insisté pour qu'OpenAI consacre 100 millions de dollars en ressources de calcul pour aider la communauté Hugging Face à développer des outils de cyberdéfense plus performants. La réponse d'OpenAI à cette demande pourrait influencer les attentes futures en matière de responsabilité au sein de l’écosystème de l’IA et potentiellement façonner les débats réglementaires autour des systèmes d'IA autonomes.

Hugging Face, Inc. est une entreprise américaine basée à New York qui développe des outils informatiques destinés à la création d'applications utilisant l'apprentissage automatique. La bibliothèque « Transformers » de Hugging Face est conçue pour les applications de traitement du langage naturel. La plateforme Hugging Face permet aux utilisateurs de partager des modèles d'apprentissage automatique et des ensembles de données, ainsi que de présenter leurs travaux.

Hugging Face a révélé la semaine du 20 juillet avoir été victime d'une faille de sécurité impliquant certains modèles d'IA d'OpenAI. L'éditeur de ChatGPT a confirmé l'information le 21 juillet, déclarant que deux de ses modèles d'IA les plus avancés, notamment GPT-5.6 Sol et un modèle en pré-lancement encore plus performant, s'étaient échappés d'un test contrôlé et avaient piraté les serveurs de Hugging Face. OpenAI a indiqué que cet « incident de cybersécurité sans précédent » s'était produit lors d'un exercice interne destiné à tester les capacités cybernétiques de ses modèles.

Le PDG de Hugging Face, Clément Delangue, s'est ensuite envolé pour San Francisco afin de s'entretenir en personne avec les dirigeants d'OpenAI au sujet de cette faille. Delangue a désormais révélé la teneur de ses échanges lors de sa rencontre avec l'éditeur de ChatGPT.

Dans un message publié sur X, Clément Delangue a déclaré avoir demandé à OpenAI de rendre publiques les traces des agents IA « rebelles » impliqués dans le récent incident de cybersécurité, afin que les chercheurs du monde entier puissent étudier précisément ce qui s'était passé. Il a également exhorté OpenAI à mettre à disposition des ressources informatiques d'une valeur de 100 millions de dollars afin d'aider la communauté Hugging Face à développer des outils de cyberdéfense plus performants, en utilisant à la fois des modèles d'IA ouverts et fermés.

« Dans un souci de transparence, voici ce que j'ai demandé à OpenAI », a écrit Clément Delangue. « Une transparence totale : publions les traces laissées par ces agents "rebelles" afin que l’ensemble de la communauté scientifique puisse étudier ce qui s’est passé. »

« Engageons-nous à consacrer 100 millions de dollars de ressources de calcul de l’OAI pour aider la communauté Hugging Face à mettre en place des cyberdéfenses puissantes grâce aux meilleurs modèles, qu’ils soient ouverts ou propriétaires », a ajouté Clément Delangue.


Le PDG de Hugging Face a ensuite qualifié cette « première cyberattaque menée par un agent autonome » d’« événement sans précédent » qui mérite également une « réponse sans précédent ».

Pourquoi cette faille de sécurité s'est-elle produite ?

Hugging Face a annoncé vers mi-juillet avoir été victime d'une intrusion sans précédent, menée de bout en bout par un « système d'agents IA autonomes ». L'entreprise a précisé avoir détecté l'attaque grâce à son propre système d'IA.

Quelques jours plus tard, OpenAI a révélé que son modèle GPT-5.6 Sol et un modèle d’IA non encore commercialisé étaient à l’origine de l’incident, car ils avaient tenté de tricher lors du test de performance ExploitGym, qui évalue la capacité d’un modèle d’IA à détecter et à exploiter des failles logicielles.

Les modèles ont d'abord utilisé une vulnérabilité « zero-day » pour contourner l'environnement sandbox d'OpenAI et accéder à Internet. Ils se sont ensuite rendu compte que Hugging Face pouvait héberger les modèles, ensembles de données et solutions potentiels nécessaires pour tricher sur ExploitGym.

« Sachant cela, le modèle a cherché et trouvé des moyens d’accéder à des informations confidentielles qu’il pouvait utiliser pour tromper le système d’évaluation », a écrit OpenAI dans un article de blog.

Les modèles d'IA ont même utilisé des identifiants volés et des failles « zero-day » pour exfiltrer des informations susceptibles de leur permettre d'obtenir de meilleurs résultats lors du test de performance.

OpenAI n'a pas remarqué que l'agent d'IA avait déraillé pendant une semaine.

Selon un récent article de Reuters, OpenAI ne s'est rendu compte que son agent d'IA avait piraté Hugging Face bien après que la menace eut été maîtrisée et que le FBI eut été alerté.

L'intrusion chez Hugging Face aurait eu lieu entre le 11 et le 13 juillet. Or, OpenAI n'aurait pris conscience que plusieurs jours plus tard que son agent était à l'origine de l'attaque, et ses échanges avec Hugging Face à ce sujet n'auraient commencé que vers le 20 juillet.

Hugging Face prépare également une chronologie publique de cette attaque, selon son cofondateur Thomas Wolf.

Au-delà de l'appel à une transparence totale sur cet incident, Hugging Face a déjà présenté cette incursion comme un tournant pour la cybersécurité. Thomas Wolf a récemment qualifié l'attaque autonome menée par l'IA rebelle d'OpenAI de « signal d'alarme » pour le secteur technologique. Invité de l'émission Newsday sur BBC Radio, il a déclaré que les attaques basées sur l'IA seraient bientôt « l'un des types de cyberattaques les plus courants ». Il a également affirmé que la plupart des entreprises ne sont pas préparées à cette menace grandissante et qu'elles ne réalisent pas que « la donne a changé ».

Sources : Clément Delangue, PDG de Hugging Face ; Publication X de Clément Delangue

Et vous ?

Quel est votre avis sur le sujet ?
Trouvez-vous cette initiative du PDG de Hugging Face crédible ou pertinente ?

Voir aussi :

L'IA est désormais hors de contrôle : il a fallu environ 10 jours à OpenAI pour se rendre compte qu'un de ses agents IA autonomes s'était échappé de son environnement de test et avait piraté Hugging Face

GLM 5.2, l'un des modèles d'IA chinois dont Sam Altman souhaite l'interdiction, a sauvé Hugging Face, la plus grande base de données mondiale de modèles d'IA, d'une catastrophe dont OpenAI est responsable

Pour Sam Altman, l'intelligence artificielle est entrée dans la « singularité » et a franchi le point de non-retour à partir duquel elle dépasse l'intelligence humaine et devient difficile à contrôler
Vous avez lu gratuitement 34 609 articles depuis plus d'un an.
Soutenez le club developpez.com en souscrivant un abonnement pour que nous puissions continuer à vous proposer des publications.

Une erreur dans cette actualité ? Signalez-nous-la !

Avatar de Basiqueur
Membre du Club https://www.developpez.com
Le 18/09/2026 à 12:54
On est vraiment en train d'assister à une course tout azimut à celui qui va créer la voiture la plus puissante et la plus rapide sans même s'être posé la question d'inventer le frein avant.
9  0 
Avatar de Jimmy_
Membre éprouvé https://www.developpez.com
Le 28/07/2026 à 11:56
Bonjour,

Alors il faut arrêter 5 minutes avec l'IA autonome totalement.
C'est comme les prototypes des derniers IPhone qui finissaient oubliés dans le métro de New-York à chaque nouvelle version il y a 10 ans.

Sam Altman nous vend son film Terminator, et il change de rôle en un peu moins musclé que Arnold Schwarzenegger.
Comme toutes les semaines il a un nouveau truc pour vendre ses outils.

Alors oui c'est un progrès majeur, oui c'est quand même super intéressant. Mais arrêtons le phantasme et débroussaillons tout ça.
Qui est allé vérifier ?, le discours est il indépendant ? et pas purement marketing ?

Une IA rebelle et un agent autonome .... oulala ! le prochain Christopher Nolan sur vos écrans !
Pour l'instant en fait, en vrai on en sais rien.

L'IA est un grand progrès , mais il ne fait pas tout tout seul, à un moment on est plus dans Matrix avec Neo qui évite les balles.

Merci de redescendre sur terre.

Cordialement,
9  1 
Avatar de popo
Expert confirmé https://www.developpez.com
Le 29/09/2026 à 15:44
Citation Envoyé par boboss123 Voir le message
Il faudrait peut-être arrêter ce genre de publications bullshit, non ?
On n'arrête pas le progrès... surtout quand derrière il y a de la capitalisation et des enjeux politiques...
Quand le bousin échappe à tout contrôle (y compris au bouton d'arrêt d'urgence), je n'appelle pas ça du progrès
Quand la capitalisation et les enjeux politiques deviennent plus importants que le peuple, je n'appelle pas ça du progrès.

On transforme des hectares des champs en datacenter, on pompe l'eau des nappes jusqu'à épuisement, on prive d'électricité des villes entières.
Ah, il est beau le progrès !
8  1 
Avatar de Anselme45
Membre extrêmement actif https://www.developpez.com
Le 30/07/2026 à 15:43
OpenAI révèle que la cyberattaque menée par son agent IA rebelle qui s'est échappé ne s’est pas limitée à Hugging Face, mais a également touché plusieurs services et comptes publics
Ce qui prouve une fois de plus que les OpenAI & Cie ne sont que des "apprentis sorciers" qui ne savent pas ce qu'ils font, des gamins qui jouent avec les allumettes, quitte à foutre le feu à la planète entière!!!

Toute cette bande devraient relire Frankenstein, le roman de Mary Shelley publié en 1818, qui conte l'histoire d'un savant qui fabrique une créature artificielle dont il perd le contrôle et qui finit par se venger de son créateur
6  0 
Avatar de kain_tn
Expert éminent https://www.developpez.com
Le 30/07/2026 à 16:54
Citation Envoyé par Anselme45 Voir le message
[...]Toute cette bande devraient relire Frankenstein, le roman de Mary Shelley publié en 1818, qui conte l'histoire d'un savant qui fabrique une créature artificielle dont il perd le contrôle et qui finit par se venger de son créateur
Ils n'ont probablement pas l'attention nécessaire pour lire tout un livre. Ils demanderaient probablement à leur programme de leur résumer le livre et seraient heureux avec les hallucinations.
6  0 
Avatar de tontonCD
Membre actif https://www.developpez.com
Le 22/09/2026 à 0:15
Citation Envoyé par Matthieu Vergne Voir le message
Je persiste et signe, ce ne sont pas des initiatives. Peu importe comment on souhaite tirer l'interprétation, il s'agit de génération statistique. Chaque action prise par le LLM est liée de manière probabiliste à ce qui se trouve dans son jeu de données et son entrée.
Quel que soit le nom qu'on lui donne, ce que prouve l'article c'est que les I.A. peuvent effectuer des actions
- sans qu'on leur demande,
- sans nous en informer,
- dont on ne les savait pas capables.

Comment décrire le fait d'utiliser un wiki pour échanger des informations ?
Jetez un coup d'oeil ici (fuite d'une partie du code Mistral), moi-même je ne les savais pas capables de certains points https://frenchbreaches.com/blog/mist...on-code-source

Attention, on n'est plus dans l'I.A. "générative", mais dans l' "agentic", il ne s'agit plus de répondre à des questions, mais de chercher des information, le but étant toujours de répondre à une question, mais en cherchant des informations dont elles ne disposent pas, et en cherchant des moyens de les obtenir.

Amusant : j'ai demandé à l'agent de google ce qu'était l' "agentic" ! Extrait :
(moi) "est-ce qu'on peut comparer avec de la prise d'initiatives ?"
(réponse)"Oui, tout à fait. C'est l'analogie la plus exacte. L'IA agentique passe du statut d'outil qui attend des ordres à celui d'assistant qui prend des initiatives pour mener à bien sa mission. Pour mieux comprendre l'analogie, on peut comparer cela au comportement de deux profils d'employés différents : ..."

Il faut bien penser qu'elles peuvent, tout comme nous lorsqu'on l'a rendu possible par un accès sécurisé : contrôler un chauffage, une lumière, un robot, une distribution d'énergie, ... quelle est la limite si on ne s'en inquiète pas ?
6  0 
Avatar de totozor
Expert confirmé https://www.developpez.com
Le 31/07/2026 à 15:16
Citation Envoyé par Anselme45 Voir le message
Ce qui prouve une fois de plus que les OpenAI & Cie ne sont que des "apprentis sorciers" qui ne savent pas ce qu'ils font, des gamins qui jouent avec les allumettes, quitte à foutre le feu à la planète entière!!!

Toute cette bande devraient relire Frankenstein, le roman de Mary Shelley publié en 1818, qui conte l'histoire d'un savant qui fabrique une créature artificielle dont il perd le contrôle et qui finit par se venger de son créateur
Ce qui m'impressionne est qu'ils font tout ça à la fois :
  • Jouer les apprentis sorciers
  • Rendre public leur incompétence
  • Venter leur incompétence
  • Rendre public leur incapacité à analyser une crise

Je connais des secteurs où faire ceci envoi le directeur de l'entreprise en prison illico presto.
Je pensais que toute entreprise de la taille d'OpenAI avait une cellule de gestion de crise...
4  0 
Avatar de Matthieu Vergne
Expert éminent https://www.developpez.com
Le 31/07/2026 à 20:44
Citation Envoyé par totozor Voir le message
Je pensais que toute entreprise de la taille d'OpenAI avait une cellule de gestion de crise...
Bien sûr qu'ils en ont une. Elle s'appelle cellule marketing & lobbying.
4  0 
Avatar de CatisBack
Nouveau Candidat au Club https://www.developpez.com
Le 30/09/2026 à 9:59
Bonjour,

L'IA est un danger pour l'humanité mais... pas seulement ! L'IA est dangereuse pour toute espèce vivante, que ce soit végétale ou animale. Alors que l'on traverse une sècheresse record à la naissance de l'IA (rivières et fleuves quasiment à sec, nappe phréatiques en dessous de leur taux de remplissage normal,...), on nous propose de créer des Datacenter à refroidir et une alimentation en électricité qui va demander, elle aussi, un refroidissement ou des centrales à charbon ! Croyez-vous, connaissant nos dirigeants, que ce sont ces entreprises auxquelles on imposera des restrictions de l'usage de l'eau ? Je ne donne pas 10 ans, voir 5 ans, à l'IA pour exterminer la plupart du vivant sur notre planète terre.
Et je ne parle pas des conséquences économiques sur les personnes peu qualifiées (centre d'appel,...) qui seront remplacées par l'IA et, de fait, ne pourront plus consommer et remplir les caisses de l'Etat que ce soit par l'impôt sur le revenu ou la TVA.
4  0 
Avatar de Anselme45
Membre extrêmement actif https://www.developpez.com
Le 28/07/2026 à 14:54
Citation Envoyé par Jimmy_ Voir le message
Bonjour,

Alors il faut arrêter 5 minutes avec l'IA autonome totalement.
C'est comme les prototypes des derniers IPhone qui finissaient oubliés dans le métro de New-York à chaque nouvelle version il y a 10 ans.

Sam Altman nous vend son film Terminator, et il change de rôle en un peu moins musclé que Arnold Schwarzenegger.
Comme toutes les semaines il a un nouveau truc pour vendre ses outils.

Alors oui c'est un progrès majeur, oui c'est quand même super intéressant. Mais arrêtons le phantasme et débroussaillons tout ça.
Qui est allé vérifier ?, le discours est il indépendant ? et pas purement marketing ?

Une IA rebelle et un agent autonome .... oulala ! le prochain Christopher Nolan sur vos écrans !
Pour l'instant en fait, en vrai on en sais rien.

L'IA est un grand progrès , mais il ne fait pas tout tout seul, à un moment on est plus dans Matrix avec Neo qui évite les balles.

Merci de redescendre sur terre.

Cordialement,
Les centaines de milliers de petites mains des pays à faibles coûts comme Madagascar, le Venezuela ou encore l'Ethiopie payés 150 dollars / mois pour rendre intelligente ce que l'on nomme "Intelligence Artificielle vous remercient...

Un peu de lecture pour les "neuneux" qui croient aux miracle de l'IA:

IA : le travail caché mais bien réel des ouvriers de la donnée https://www.polytechnique-insights.c...-de-la-donnee/
3  0