Block de Jack Dorsey presenta Dessa, una IA de voz expresiva que funciona localmente
aiinsider ·
La empresa de Jack Dorsey, Block, ha lanzado Dessa, un nuevo modelo de IA de voz desarrollado por su laboratorio de investigación que opera localmente en hardware de consumo. El modelo es capaz de producir discurso emocionalmente expresivo, incluyendo risas, pausas y llanto, sin depender de conversiones externas de texto a voz. A diferencia de muchos competidores que utilizan modelos de lenguaje grandes separados para el conocimiento, Dessa deriva su comprensión conversacional directamente de sus datos de entrenamiento. El sistema funciona como un modelo full-duplex, lo que le permite hablar y escuchar simultáneamente, similar al GPT-Live de OpenAI. Block afirma que este enfoque evita la pérdida de información asociada con la conversión de voz a texto, lo que resulta en una experiencia de usuario más natural. Aunque está entrenado con habla humana utilizando un único rack de GPU NVIDIA, el modelo aún no está disponible públicamente, pero se está probando con investigadores de seguridad. Puede ejecutarse en dispositivos como el MacBook M4 Max, lo que potencialmente ayudaría a Block a impulsar más experiencias de voz a menores costos.
aiinsider