Gemini Robotics On-Device : l’IA embarquée pour piloter les robots hors ligne
Google DeepMind dévoile Gemini Robotics On-Device, un modèle de langage capable de s’exécuter directement à bord des robots, sans connexion internet. Héritier du modèle Gemini Robotics de mars, il permet aux machines d’interpréter des instructions en langage naturel et de contrôler leurs mouvements de façon autonome.
Un modèle IA local puissant
Conçu pour fonctionner localement sur des plateformes robotiques, Gemini Robotics On-Device offre des performances proches de celles de son équivalent cloud. Selon Google, il dépasse la plupart des autres modèles embarqués dans des tests standardisés, tout en garantissant réactivité et respect de la vie privée, grâce à l’absence de transmission de données vers un serveur distant.
Des applications variées en démonstration
Lors d’une démonstration, des robots ont réalisé des manipulations du quotidien : ouvrir des sacs, plier du linge et assembler des pièces sur une chaîne industrielle. Initialement entraîné sur les robots ALOHA, ce modèle a ensuite été adapté avec succès au bi-bras Franka FR3 et au robot humanoïde Apollo d’Apptronik. Google souligne la capacité du Franka FR3 à accomplir des tâches qu’il n’avait jamais “vues”, confirmant la robustesse de l’approche.
Un SDK pour accélérer l’adoption
Pour faciliter l’intégration et la personnalisation, DeepMind met à disposition un Gemini Robotics SDK. Les développeurs peuvent y former leurs robots en montrant 50 à 100 démonstrations de tâches dans le simulateur MuJoCo. Ce kit de développement simplifie la création de comportements spécifiques et accélère le déploiement sur le terrain.
Un écosystème en pleine expansion
L’intérêt pour l’IA embarquée en robotique croît chez de nombreux acteurs. Nvidia travaille sur des modèles fondation pour humanoïdes, Hugging Face propose des modèles et datasets open source, et le startup RLWRLD développe des fondations pour la manipulation robotique. Cette dynamique témoigne de la mutation rapide du secteur vers plus d’autonomie et de polyvalence.
👉 Source ici