Google DeepMind a dévoilé Gemini Robotics On-Device, un nouveau modèle d’intelligence artificielle qui fonctionne directement sur le matériel robotique sans nécessiter de connexion Internet permanente. L’annonce a été faite mardi dans un article de blog officiel signé par Carolina Parada, directrice principale et responsable de la robotique chez Google DeepMind.
Contrairement aux systèmes dépendants du cloud, ce nouveau modèle est conçu pour fonctionner entièrement en local, ce qui en fait un outil précieux dans les environnements réels où la rapidité et la connectivité sont essentielles.
Gemini Robotics On-Device s’appuie sur le modèle original Gemini Robotics présenté en mars. Cette dernière version est conçue pour les robots à deux bras et offre des réponses à latence réduite ainsi qu’une gestion robuste des tâches, même dans des environnements où le réseau est limité.
Selon Google, le modèle peut bien généraliser à différents types de tâches et d’environnements. Il a été montré en train d’effectuer des actions complexes, comme ouvrir des sacs à fermeture éclair et manipuler des objets inconnus, et il s’adapte apparemment rapidement à de nouvelles instructions, en nécessitant seulement 50 à 100 démonstrations pour son entraînement.
Parada a écrit, « Gemini Robotics On-Device offre une forte capacité de généralisation visuelle, sémantique et comportementale… tout en fonctionnant directement sur le robot. »
Le modèle d’IA peut-il s’adapter à différents types de robots ?
Initialement entraîné pour les robots ALOHA, le modèle On-Device a été adapté avec succès, selon Google, au Franka FR3 et au robot humanoïde Apollo d’Apptronik. Malgré ces architectures différentes, le modèle d’IA a été capable de suivre des commandes en langage naturel et d’accomplir des tâches précises, comme plier des robes et effectuer des opérations d’assemblage de ceintures.
Selon Google, cette souplesse montre que le même cerveau artificiel peut être transféré à différentes plateformes robotiques avec un minimum d’ajustements.
Pour aider les développeurs à expérimenter avec le modèle et à l’affiner, Google déploie également le Gemini Robotics SDK. Cette boîte à outils permet aux utilisateurs de tester l’IA dans MuJoCo, un simulateur physique conçu pour la modélisation robotique. L’accès au SDK est actuellement réservé aux participants au programme de testeurs de confiance de Google.
Grâce à cette configuration, les développeurs peuvent entraîner l’IA à réaliser des tâches personnalisées à partir de démonstrations réelles ou simulées. Google précise que le système est conçu pour « favoriser l’expérimentation rapide » et qu’il peut améliorer ses performances grâce à l’affinage.
Quel est son niveau de sécurité ?
Google affirme que la sécurité est une priorité absolue. Le modèle s’inscrit dans une initiative plus vaste axée sur la sécurité, supervisée par l’équipe Responsible Development & Innovation (ReDI) de DeepMind et par le Responsibility & Safety Council.
Ces groupes veillent à ce que chaque étape, du traitement des instructions à l’action physique, fasse l’objet de tests approfondis afin de prévenir les comportements dangereux. Des évaluations de sécurité et des exercices de « red teaming » sont recommandés avant tout déploiement du modèle dans des applications réelles.
Quel sera l’impact de ce nouveau modèle d’IA sur le secteur ?
Alors que des concurrents comme NVIDIA, Hugging Face et RLWRLD, en Corée du Sud, explorent eux aussi la robotique, l’initiative de Google renforce sa position à l’avant-garde du déploiement de l’IA dans le monde physique. L’arrivée de Gemini Robotics On-Device pourrait accélérer les progrès des machines autonomes destinées à être utilisées dans les foyers, les usines et même les zones sinistrées.