Ponder a reality where you could verbalize a demand for a chair, and it comes to life right before your eyes within minutes. Courtesy of innovative breakthroughs by MIT researchers, a scenario like this is no longer solely the stuff of science fiction. Developed is an AI-controlled mechanism christened “speech-to-reality,” providing users with the ability to literally talk their concepts into existence. By integrating robotics with generative AI, the system is capable of converting spoken cues into physically tangible assembled objects.
Das Herzstück dieser fortschrittlichen Innovation ist ein Roboterarm, der auf einem Arbeitstisch positioniert ist. Der Benutzer muss nur einen einfachen Wunsch äußern, etwa in der Art von “Ich möchte einen einfachen Hocker”, und den Rest erledigt das System. Der Prozess beginnt mit einer Spracherkennungssoftware, die den Wunsch mit Hilfe eines umfassenden Sprachmodells entschlüsselt. Daraufhin konstruiert eine generative 3D-KI ein digitales Netz des gewünschten Objekts. Anschließend wird dieses Netz in ein voxel-zentriertes Design übersetzt, das wiederum in modulare Teile zerlegt wird, die der Roboter zusammenbauen kann.
Bevor die eigentliche Konstruktion beginnt, prüfen geometrische Algorithmen den Entwurf auf seine praktische Durchführbarkeit, indem sie die Stabilität bewerten, Überhänge reduzieren und Teilverbindungen planen. Alexander Htet Kyaw, ein MIT-Postgraduiertenstudent und Stipendiat an der Morningside Academy for Design, beschreibt den Prozess als eine erstmalige Verschmelzung von natürlicher Sprachverarbeitung, generativer 3D-KI und robotischer Montage. Der letzte Schritt ist ein robotergesteuerter Pfadplan, der das Objekt zeitnah zusammensetzt.
Das System wurde im Rahmen des Kurses “How to Make Almost Anything” unter der Leitung von Professor Neil Gershenfeld entwickelt. Alexander hat das System im Center for Bits and Atoms (CBA) des MIT in Zusammenarbeit mit seinen Kommilitonen Se Hwan Jeon aus dem Maschinenbau und Miana Smith aus dem CBA weiter verfeinert. Mit diesem System hat das Team eine Reihe von Gegenständen hergestellt, von Hockern, Regalen und kleinen Tischen bis hin zu Stühlen und sogar Ziergegenständen wie einer Hundestatue. Durch den schnellen Zusammenbau und die reibungslose Demontage erweist sich das System als schnell und nachhaltig zugleich.
Das System erweist sich als überlegen gegenüber dem herkömmlichen 3D-Druck, der ein langsamer Prozess sein kann, der sich oft über Stunden oder sogar Tage erstreckt. Und was noch wichtiger ist: Es beseitigt das Hindernis, dass man über Kenntnisse in 3D-Modellierung oder Roboterprogrammierung verfügen muss. Dieser neue Ansatz bedeutet, dass jeder, der sprechen kann, Zugang zum Design- und Herstellungsprozess hat. Mit Blick auf die Nachhaltigkeit hat das Team dafür gesorgt, dass die modularen Teile wiederverwendbar sind, so dass die Objekte zerlegt und in neuen Formen wieder aufgebaut werden können.
As of now, the team is striving to improve the structural durability of the resultant products, by substituting magnetic connection points with more sturdy joint techniques. They’re also contemplating how to scale the system for distributed mobile robots, potentially allowing construction of expansive structures. Motivated by replicators from “Star Trek” and the construction bots from “Big Hero 6”, Alexander envisages a future where physical object creation is as simplistic as speaking out the request. He’s additionally trying to embed gesture recognition and augmented reality interfaces into the system for more instinctive interaction between humans and robots.
Ihre Forschung wurde in einem Vortrag mit dem Titel “Speech to Reality: On-Demand Production using Natural Language, 3D Generative AI, and Discrete Robotic Assembly” auf dem ACM Symposium on Computational Fabrication vorgestellt, das am 21. November am MIT stattfand. Einen tieferen Einblick in die Studie können Sie auf der Website Originalartikel auf MIT News.
Diese Website verwendet Cookies.