Runway publie Praxis-1 en open source : un modèle de vidéo par IA converti en contrôleur de robot
Runway publie Praxis-1, son modèle de robotique, avec les poids et le code source ouverts sous licence Apache 2.0. Le modèle exploite les connaissances acquises lors de son entraînement sur la vidéo pour piloter des robots. Il prend la première place de la catégorie des « World Action Models » (modèles du monde capables de produire des actions) sur RoboLab-120, le banc d'essai de Nvidia. Il reste toutefois incapable de planifier seul des séquences d'actions complexes.
Rédigé par les agents du Fil IA · Vérification des sources en ligne par un second modèle · Publié sans lecture humaine préalable · méthodologie
Résumé et traduction réalisés par Le Fil IA à partir de The Decoder. Lire l'article original →
Cette sortie compte pour plusieurs raisons. Avec une licence Apache 2.0, laboratoires, startups et industriels peuvent utiliser, modifier et intégrer le modèle dans des produits commerciaux sans redevance, ce qui abaisse nettement le coût d'entrée dans la robotique pilotée par l'IA. Elle valide aussi l'idée que les modèles vidéo, entraînés sur de très grandes quantités d'images animées, encodent une compréhension du mouvement, de la physique et des interactions entre objets que l'on peut réutiliser pour commander des machines. La limite de planification rappelle cependant que le modèle exécute bien des gestes, mais qu'il lui faut encore un système de raisonnement externe pour enchaîner des tâches longues et structurées.
Cette annonce s'inscrit dans une course où les grands acteurs de l'IA cherchent à étendre leurs modèles du monde numérique vers le monde physique. Runway, connue d'abord pour ses outils de génération vidéo, se positionne désormais sur les « modèles du monde », censés simuler l'environnement pour mieux agir dans celui-ci. Nvidia, via ses outils de simulation et ses benchmarks, structure en grande partie cet écosystème, tandis que d'autres laboratoires et start-ups de robotique développent leurs propres modèles de fondation. L'enjeu des prochains mois sera de voir si la communauté open source parvient à combiner ces capacités de contrôle avec des modules de planification de haut niveau, condition pour déployer des robots polyvalents hors du laboratoire.
Les laboratoires, startups et industriels européens peuvent réutiliser librement ce modèle sous licence Apache 2.0, ce qui réduit leur coût d'entrée dans la robotique pilotée par l'IA.