Forscher schalten GPT-6 Astra direkt in einen Roboter ein und lassen ihn eine unbekannte Küche aufräumen
decoder ·
Forscher der Stanford University und des Caltech haben HomeBody entwickelt, ein System, das es einem humanoiden Unitree G1-Roboter ermöglicht, eine unbekannte Küche autonom zu reinigen, indem er auf das Sprachmodell GPT-6 Astra zurückgreift. Dieser Ansatz verzichtet auf die traditionelle, trainierte Steuerschicht und erlaubt es dem visuell-sprachlichen Modell, direkt auf eine Bibliothek modularer Fähigkeiten wie Greifen und Navigation zuzugreifen. Der Roboter erkundet zunächst die Umgebung, um in Nvidias Isaac Sim einen digitalen Zwilling zu erstellen; dabei werden Objekte und deren Positionen im räumlichen Gedächtnis gespeichert, um auch außerhalb des Sichtfelds liegende Gegenstände zu verfolgen. Bei Befehlen wie „Küche reinigen“ plant das Sprachmodell jeden Schritt einzeln und korrigiert Fehler während der Ausführung selbstständig. Trotz dieser Fortschritte weist das System Einschränkungen auf, darunter Latenzprobleme, überhitzte Servos an den Fingern und hohe Rechenkosten. Das Projekt unterstreicht erhebliche Verbesserungen im räumlichen Denken großer Sprachmodelle, wirft jedoch auch Sicherheitsbedenken hinsichtlich der direkten Robotersteuerung auf. OpenAI hatte zuvor angekündigt, mit Fokus auf Anwendungen für den privaten Gebrauch wieder in den Robotikmarkt einzusteigen.
decoder