Skip to content
Derniers décryptagesThèmesEntreprisesGlossaireÀ propos
Glossaire · EXPLICATION

Qu'est-ce qu'un modèle de fondation robotique ?

Un modèle de fondation robotique est un grand modèle d'IA préentraîné sur des données variées (robots, simulation, web), puis adapté à de nombreuses tâches et morphologies de robots au lieu d'être entraîné pour un seul travail.

Mis à jour:

Définition

Un modèle de fondation robotique est un grand réseau de neurones entraîné sur des données larges et variées, pour qu'un même modèle s'adapte à de nombreuses tâches, environnements et corps de robots. L'idée vient des modèles de langage : préentraîner une fois à grande échelle, puis spécialiser à moindre coût.

Fonctionnement

  1. Préentraînement sur un mélange de trajectoires de robots, de simulation, de vidéos humaines et de données image-texte, souvent à partir d'un modèle vision-langage.
  2. Post-entraînement sur des démonstrations du robot et des tâches visés.
  3. Déploiement, en général avec un contrôleur bas niveau rapide qui traduit la sortie en commandes moteur.

La sortie peut être des actions (un modèle VLA), des états futurs (un modèle du monde) ou un plan en langage exécuté par d'autres modules.

Pourquoi c'est important

Le logiciel robotique classique exige un programme ou une politique par tâche. Les modèles de fondation veulent faire d'une nouvelle compétence une affaire de données et d'instructions. Leur goulot d'étranglement, ce sont les données : l'expérience robotique est rare face au texte du web, d'où les investissements dans la téléopération, la capture de mouvement et les données synthétiques. Voir aussi IA incarnée.

Questions fréquentes

Un modèle VLA est-il un modèle de fondation robotique ?

Oui. Un VLA en est une variante, celle qui produit directement des actions. D'autres prédisent la vidéo à venir (modèles du monde) ou planifient en langage naturel.

D'où viennent les données d'entraînement ?

Démonstrations par téléopération, jeux de données issus de nombreux robots, simulation et données synthétiques, vidéos humaines et capture de mouvement, plus les connaissances web héritées du modèle vision-langage de départ.

Un seul modèle fonctionne-t-il sur n'importe quel robot ?

Pas tel quel. La plupart demandent un ajustement avec des données du robot cible, même si l'entraînement multi-morphologies réduit la quantité nécessaire.

Couverture

Helix 2.5 de Figure range 30 maisons jamais vues

Figure affirme que son humanoïde a rangé des salons, plié des serviettes et fait des lits dans 30 maisons inconnues sans données locales, appuyé par un contrat de calcul de 3,5 Md$ avec Nscale.

1 min de lectureSources vérifiées

Entreprises

Newsletter

Robrief Weekly

Un e-mail par semaine avec l'actualité robotique qui compte. Gratuit, désinscription à tout moment.