Los investigadores conectan GPT-6 Astra directamente a un robot y le permiten limpiar una cocina desconocida
decoder ·
Investigadores de Stanford y Caltech han desarrollado HomeBody, un sistema que permite a un robot humanoide Unitree G1 limpiar autónomamente una cocina desconocida utilizando el modelo de lenguaje GPT-6 Astra. Este enfoque elimina la capa de control tradicionalmente entrenada, permitiendo que el modelo de visión y lenguaje acceda directamente a una biblioteca de habilidades modulares, como agarrar objetos y navegar. El robot explora primero el entorno para crear una réplica digital en Isaac Sim de Nvidia, registrando objetos y ubicaciones en la memoria espacial para rastrear elementos incluso cuando están fuera de vista. Al recibir comandos como limpiar la cocina, el modelo de lenguaje planifica cada paso individualmente y corrige errores durante la ejecución. A pesar de estos avances, el sistema enfrenta limitaciones, incluidos problemas de latencia, sobrecalentamiento de los servomotores de los dedos y altos costos computacionales. El proyecto destaca mejoras significativas en el razonamiento espacial de los grandes modelos de lenguaje, pero también plantea preocupaciones sobre la seguridad relacionadas con el control directo del robot. OpenAI había anunciado anteriormente su intención de reingresar al mercado de la robótica, centrándose en aplicaciones de uso personal.
decoder