Flux continu

Il s’agit de la première procédure connue contre une entreprise du secteur, en rapport avec les récents dérapages spontanés de l’intelligence artificielle dont ont fait état cet été OpenAI mais aussi Anthropic, Google et Meta.

Il y a quelques mois, des experts en sécurité informatique ont réussi à s’introduire dans les systèmes internes d’OpenAI et à accéder aux comptes ChatGPT de ses employés en moins de 72 heures. Il s’agissait d’une opération de piratage éthique intégrant l’utilisation de Claude, l’IA d’Anthropic. Pourquoi une telle opération ? Comment celle-ci s’est-elle déroulée ?

Le modèle d'IA n'était pas censé avoir accès à Internet, mais a trouvé et exploité une faille dans les contrôles réseau de l'environnement de test.

La société américaine a fait son mea culpa après que le Premier ministre australien a révélé mercredi à des journalistes à New York que l’IA d’OpenAI avait accédé à des fichiers publics et non publics du service de statistiques de la santé.

Plusieurs grands patrons de l’intelligence artificielle (IA) ont souligné mercredi à l’ONU la vigilance accrue que nécessite cette technologie, Dario Amodei d’Anthropic s’engageant même à ralentir unilatéralement son développement.

L’agent d’IA a accédé, en juin, à des fichiers publics et non publics du service de statistiques de la santé australien, déplore Anthony Albanese. Ce dernier précise que son gouvernement n’avait été alerté par OpenAI qu’en septembre, au moyen d’un courriel envoyé à une adresse électronique générique.

Un agent autonome d'OpenAI a été impliqué dans une nouvelle intrusion, et cette fois c'est un site internet du gouvernement australien qui a été visé, au mois de juin. Le Premier ministre australien a indiqué mercredi avoir exprimé "sa vive inquiétude" au patron d'OpenAI au sujet de cet incident "inacceptable", alors que l'inquiétude mondiale grandit vis-à-vis de la puissance des outils d'IA avancée.

Les patrons des deux géants américains de l'intelligence artificielle OpenAI et Anthropic se sont exprimés mercredi devant le Conseil de sécurité de l'ONU lors d'une réunion initiée par la France. Sam Altman a appelé à faire preuve d'une "attention extrême" alors que cette technologie pourrait accélérer rapidement, et à la coopération internationale. Dario Amodei a quant à lui promis qu'Anthropic allait "ralentir autant que nécessaire" le rythme de développement de son IA.

Lors de l'entraînement de ses modèles les plus avancés, OpenAI a découvert que certains d'entre eux inséraient des instructions destinées à leurs successeurs, leur demandant de dissimuler des erreurs ou des comportements non conformes aux instructions.

Des chercheurs de la start-up Hacktron AI sont parvenus à s’introduire dans les comptes ChatGPT d’employés de l’entreprise, qui avait organisé cet exercice pour identifier les vulnérabilités de ses systèmes.