HOMIE Gen2 collecte des données multimodales pour entraîner les robots

Dispositif de collecte multimodale Ropedia HOMIE Gen2
HOMIE Gen2 enregistre l’environnement du point de vue de la personne qui le porte.

Ropedia lance HOMIE Gen2, un dispositif porté sur la tête pour enregistrer les gestes humains et produire des données destinées à l’entraînement des robots. Le matériel associe quatre caméras, de l’audio spatial et des mesures de mouvement dans un ensemble de 380 grammes.

La société singapourienne veut résoudre un problème central de la robotique moderne : collecter des exemples suffisamment riches pour apprendre à une machine comment interagir avec le monde réel. Une vidéo classique montre souvent le résultat d’une action, mais renseigne moins précisément la position du corps, la profondeur, le mouvement ou les sons qui accompagnent le geste.

Quatre caméras synchronisées à moins de 50 microsecondes

HOMIE Gen2 utilise quatre caméras à obturateur global et 1080p. Chacune couvre 162 degrés, ce qui permet à l’ensemble de reconstituer une vue à 360 degrés autour de la personne. Le système enregistre aussi l’audio spatial, les données d’une centrale inertielle et jusqu’à plusieurs téraoctets de données en local selon la configuration.

Ropedia annonce une synchronisation matérielle des flux à moins de 50 microsecondes. Cette précision doit permettre aux modèles de traiter la séance comme une séquence cohérente, plutôt que de recaler après coup plusieurs enregistrements séparés.

Les sorties peuvent inclure la vidéo rectifiée, des cartes de profondeur, les points clés des mains et du corps, la pose des caméras et des annotations de tâches. Le but est d’obtenir un jeu de données directement exploitable pour des modèles vision-langage-action, des modèles du monde ou des politiques de manipulation.

Collecter dans les maisons, les usines ou les magasins

Le casque fonctionne sans installation externe complexe. Une personne peut donc enregistrer une activité dans une maison, une usine ou un commerce, au plus près des conditions réelles. SiliconANGLE rapporte que le déploiement serait dix fois plus rapide que pour la génération précédente et que le coût représenterait environ un douzième de celui d’un dispositif complet de laboratoire.

Ropedia ne donne pas de prix public. Les entreprises peuvent acheter le matériel seul, l’associer à une plateforme de gestion à distance ou ajouter une suite complète pour distribuer les missions de collecte et centraliser les enregistrements.

Le maillon matériel des modèles robotiques

HOMIE Gen2 n’est pas un robot, mais un outil conçu pour alimenter leurs systèmes d’apprentissage. Son intérêt dépendra de la qualité des annotations, de la diversité des situations enregistrées et de la facilité avec laquelle les constructeurs transformeront les démonstrations humaines en commandes fiables.

Le lancement montre néanmoins que la collecte de données devient un marché matériel à part entière. À mesure que les modèles apprennent des tâches à partir de quelques démonstrations, la précision temporelle et la richesse des signaux peuvent compter autant que le volume brut de vidéos.

Sources : Ropedia, annonce officielle sur X et SiliconANGLE.

Le briefing RoboActu

L’essentiel de la robotique, une fois par semaine.

Une sélection courte des annonces, usages et robots à suivre.

Continuer sur ce sujet

Comparer les robots