Dites-le, imaginez-le et regardez-le prendre forme. C’est l’idée qui sous-tend un nouveau système du MIT capable de transformer de simples mots en objets réels et utilisables.
Des chercheurs du MIT ont mis au point un système d’assemblage robotique piloté par l’IA qui permet de concevoir et de fabriquer des objets physiques simplement en les décrivant en langage courant. Plutôt que d’apprendre à utiliser des outils complexes de conception assistée par ordinateur (CAO), les utilisateurs peuvent simplement décrire ce qu’ils veulent, comme une lampe ou une étagère, et le système s’occupe du reste.
Le projet combine l’IA générative et l’assemblage robotique pour accélérer la conception et la rendre plus accessible, en particulier aux personnes sans formation technique.
Comment fonctionne le système
Le processus commence par une instruction écrite ou orale, comme « fabrique-moi une chaise ». À partir de là, un modèle d’IA générative crée une version numérique en 3D de l’objet. Un second modèle d’IA analyse ensuite la forme et la fonction de l’objet et détermine où chaque pièce doit être placée en fonction de l’usage prévu.
Le système s’appuie sur deux types de pièces préfabriquées : des éléments structurels et des panneaux. Un modèle de vision et de langage (VLM) analyse la géométrie de l’objet et détermine où des panneaux sont nécessaires, par exemple pour l’assise ou le dossier d’une chaise. Une fois la conception finalisée, un système robotique assemble automatiquement l’objet.
« Tôt ou tard, nous voulons pouvoir communiquer et parler à un robot et à un système d’IA de la même manière que nous nous parlons pour fabriquer des choses ensemble. Notre système constitue une première étape vers cet avenir », a déclaré Alex Kyaw, auteur principal de l’étude.
Les humains gardent le contrôle
Contrairement aux systèmes entièrement automatisés, les utilisateurs restent impliqués tout au long du processus de conception. Ils peuvent donner leur avis et affiner l’objet au fur et à mesure qu’il prend forme, afin d’orienter l’IA selon leurs préférences personnelles.
« L’espace de conception est très vaste, nous le réduisons donc grâce aux retours des utilisateurs. Nous pensons que c’est la meilleure façon de procéder, car les préférences varient d’une personne à l’autre et il serait impossible de créer un modèle idéalisé pour tout le monde », a déclaré Kyaw.
Richa Gupta, coauteure de l’article, a ajouté que « le processus avec l’humain dans la boucle permet aux utilisateurs d’orienter les modèles conçus par l’IA et de s’approprier le résultat final ».
Si le système actuel se concentre sur des objets simples composés de plusieurs pièces, les chercheurs estiment que cette architecture pourrait à terme être utilisée pour des conceptions plus complexes, notamment des éléments architecturaux ou des composants aérospatiaux. À long terme, cette technologie pourrait permettre de fabriquer localement des meubles ou d’autres objets, plutôt que d’expédier des produits encombrants depuis des usines.
« Nous espérons réduire considérablement les obstacles à l’accès aux outils de conception. Nous avons montré qu’il était possible d’utiliser l’IA générative et la robotique pour transformer rapidement et durablement des idées en objets physiques, de manière accessible », a déclaré Randall Davis, auteur principal de l’étude.
À lire aussi : le MIT a créé un terrain de jeu virtuel où les robots apprennent à réfléchir.