Ropedia ouvre un programme destiné aux universités et laboratoires qui travaillent sur la robotique, l’intelligence incarnée et l’interaction humain-robot. Les équipes sélectionnées pourront accéder à HOMIE Gen2, un dispositif porté sur la tête qui enregistre des données multimodales issues d’activités humaines réelles.
Capturer le geste humain hors du laboratoire
HOMIE Gen2 associe plusieurs caméras et capteurs afin de synchroniser les mouvements, les interactions avec les objets et le contexte visuel d’une tâche. Ropedia présente cette nouvelle génération comme un moyen de collecter des données dans des environnements ordinaires, sans reconstituer chaque scène dans un studio de capture.
Les laboratoires pourront traiter les enregistrements avec leurs propres outils ou utiliser l’infrastructure de Ropedia. L’objectif est de produire des jeux de données utilisables pour entraîner ou évaluer des modèles vision-langage-action, des modèles du monde et des systèmes de compréhension égocentrique.
Le programme ne fournit pas un robot prêt à apprendre. Il apporte le matériel et la chaîne de données nécessaires pour enregistrer des démonstrations humaines. Ces séquences doivent ensuite être nettoyées, annotées et adaptées à la morphologie ainsi qu’aux capteurs du robot cible.
Un lot de 500 heures pour l’évaluation
En parallèle du prêt de kits HOMIE Gen2, Ropedia annonce un programme d’évaluation comprenant 500 heures de données d’IA physique. La société n’a pas détaillé dans son communiqué le nombre de laboratoires retenus, le calendrier de livraison ni les conditions financières de l’accès au matériel.
Ropedia indique déjà collaborer avec des chercheurs de Princeton, Carnegie Mellon, l’Université de Californie à San Diego, l’Université de l’Illinois à Urbana-Champaign, Hong Kong Polytechnic University et Westlake University, ainsi qu’avec l’Allen Institute for AI. Cette liste décrit son réseau actuel, sans signifier que tous ces établissements participent au nouveau programme.
Des données ouvertes et un kit de recherche
La société met aussi en avant Xperience-10M, son jeu de données ouvert consacré aux interactions humaines vues à la première personne. Selon Ropedia, il couvre dix millions de séquences, soit environ 100 000 heures, et a dépassé 2,7 millions de téléchargements sur Hugging Face. Ces chiffres sont déclaratifs et devront être rapprochés des versions effectivement accessibles aux chercheurs.
Les candidatures au kit de recherche sont ouvertes sur le site de Ropedia. Les équipes intéressées doivent présenter leur projet, leur institution et l’usage envisagé des données. L’entreprise conserve donc une sélection, contrairement à un matériel commercial disponible sur catalogue.
Notre analyse
Le manque de données physiques variées reste un frein majeur à l’apprentissage robotique. Les vidéos du web décrivent surtout l’apparence des actions, alors qu’un robot a besoin de repères temporels, de mouvements et parfois de profondeur ou d’efforts. Un système portable peut élargir la collecte, mais la quantité ne garantit ni la qualité ni le transfert vers une machine. L’intérêt scientifique du programme dépendra de la documentation des capteurs, des licences, des biais du corpus et des résultats publiés par les laboratoires retenus.
Sources : communiqué Ropedia ; page officielle du programme académique.
