Pesquisadores conectam o GPT-6 Astra diretamente a um robô e o deixam limpar uma cozinha desconhecida
decoder ·
Pesquisadores da Universidade de Stanford e do Caltech desenvolveram o HomeBody, um sistema que permite ao robô humanoide Unitree G1 limpar autonomamente uma cozinha desconhecida utilizando o modelo de linguagem GPT-6 Astra. Essa abordagem elimina a camada tradicional de controle treinado, permitindo que o modelo de visão e linguagem acesse diretamente uma biblioteca de habilidades modulares, como pegar objetos e navegar. O robô primeiro explora o ambiente para criar um gêmeo digital no Isaac Sim da Nvidia, registrando objetos e localizações na memória espacial para rastrear itens mesmo quando estão fora de vista. Ao receber comandos como "limpar a cozinha", o modelo de linguagem planeja cada etapa individualmente e corrige erros durante a execução. Apesar desses avanços, o sistema enfrenta limitações, incluindo problemas de latência, superaquecimento dos servomotores dos dedos e altos custos computacionais. O projeto destaca melhorias significativas no raciocínio espacial de grandes modelos de linguagem, mas também levanta preocupações sobre segurança relacionadas ao controle direto do robô. A OpenAI havia anunciado anteriormente suas intenções de retornar ao mercado de robótica, com foco em aplicações de uso pessoal.
decoder