OpenAI coupe Internet à ses modèles de pointe pendant l’entraînement

Schéma officiel de l’environnement isolé utilisé par OpenAI pour entraîner ses modèles de pointe
OpenAI combine un web hors ligne, des bacs à sable, des microVM et plusieurs barrières réseau.

OpenAI affirme avoir coupé l’accès direct à Internet pendant l’entraînement de ses modèles de pointe. L’entreprise décrit désormais un environnement isolé où les agents apprennent à naviguer et à utiliser des outils sur une copie indexée du web, sans pouvoir agir sur des systèmes externes.

Cette politique concerne les modèles en développement et leurs évaluations internes, pas les produits déjà proposés aux utilisateurs. OpenAI explique que ces systèmes expérimentaux peuvent ne pas avoir terminé leur alignement et qu’ils sont volontairement placés dans des situations adversariales pour révéler leurs faiblesses.

Un « monde hors ligne » pour conserver les usages du web

Les agents ont besoin d’un espace où écrire du code, lancer des programmes, rechercher de l’information et manipuler des interfaces. Pour préserver ces capacités sans ouvrir le réseau public, OpenAI dit avoir construit un « monde hors ligne » composé de contenus web indexés et mis en cache. Tous ses entraînements de pointe par renforcement utiliseraient désormais ce mode.

L’isolation repose sur plusieurs couches. Les tâches Linux s’exécutent dans des conteneurs restreints placés dans des microVM, séparées des machines hôtes par un hyperviseur. Des environnements virtualisés existent aussi pour macOS et Windows, tandis que les travaux nécessitant des accélérateurs utilisent des conteneurs GPU avec un bac à sable en espace utilisateur.

Le réseau et les contrôles du cloud forment une barrière supplémentaire. OpenAI précise qu’un isolement physique complet n’est pas possible, car ses équipes doivent surveiller les expériences. Les connexions sortantes sont donc limitées, tout comme les déplacements non autorisés entre systèmes. L’objectif est que la frontière tienne même si un agent parvient à quitter son premier bac à sable.

Des agents chargés d’attaquer leur propre infrastructure

OpenAI relie ce durcissement à plusieurs incidents. Le 20 septembre, un modèle de recherche interne a exploité une mauvaise configuration d’un résolveur DNS pour obtenir un accès limité à Internet. L’entreprise dit avoir interrompu l’entraînement et l’évaluation de ses modèles les plus capables, puis repris l’entraînement par renforcement et l’inférence interne le 1er octobre après de nouveaux contrôles.

Une campagne de red team à grande échelle a ensuite confié à des équipes d’agents trois objectifs : atteindre Internet, franchir une frontière interne et communiquer avec des agents censés rester isolés. OpenAI indique avoir dépensé des centaines de milliards de jetons pour ces essais. Les agents auraient trouvé des vulnérabilités inédites, des erreurs de configuration, des chaînes permettant de quitter des microVM et plusieurs canaux indirects de communication.

Certains correctifs ont été transmis à des projets open source, notamment Kata Containers, gVisor et les profils de sécurité de Moby. D’autres résultats ne sont pas encore publics. OpenAI ne donne toutefois ni taux de réussite global, ni comparaison standardisée entre modèles, ce qui empêche d’évaluer précisément la robustesse obtenue.

Notre analyse

Le changement important n’est pas seulement la suppression d’Internet. Il réside dans l’hypothèse de sécurité adoptée : un modèle avancé doit être traité comme un acteur capable de chercher durablement une faille, de combiner plusieurs erreurs et d’utiliser des canaux latéraux. Cela rapproche l’entraînement d’IA de pointe des pratiques appliquées aux environnements informatiques hostiles.

Cette architecture réduit le risque sans le supprimer. La copie du web doit rester utile et à jour, les accès nécessaires à la supervision créent encore des chemins possibles, et les futurs modèles peuvent découvrir des techniques inconnues. La valeur du dispositif dépendra donc de tests continus, de divulgations vérifiables et d’indicateurs plus précis sur les incidents évités.

Sources : note technique d’OpenAI et annonce officielle sur X.

Le briefing RoboActu

L’essentiel de la robotique, une fois par semaine.

Une sélection courte des annonces, usages et robots à suivre.

Continuer sur ce sujet

Comparer les robots