Block de Jack Dorsey présente Dessa, une IA vocale expressive fonctionnant localement
aiinsider ·
L'entreprise de Jack Dorsey, Block, a lancé Dessa, un nouveau modèle d'IA vocale développé par son laboratoire de recherche et fonctionnant localement sur du matériel grand public. Le modèle est capable de produire une parole expressivement riche, incluant des rires, des pauses et des pleurs, sans dépendre de conversions externes de texte en parole. Contrairement à de nombreux concurrents qui utilisent des grands modèles de langage distincts pour les connaissances, Dessa tire sa compréhension conversationnelle directement de ses données d'entraînement. Le système fonctionne comme un modèle full-duplex, lui permettant de parler et d'écouter simultanément, à l'image de GPT-Live d'OpenAI. Block affirme que cette approche évite la perte d'information associée à la conversion de la parole en texte, offrant ainsi une expérience utilisateur plus naturelle. Bien qu'entraîné sur de la parole humaine à l'aide d'un seul rack de GPU NVIDIA, le modèle n'est pas encore disponible au public mais fait l'objet de tests par des chercheurs en sécurité. Il peut fonctionner sur des appareils tels que le MacBook M4 Max, ce qui pourrait aider Block à déployer davantage d'expériences vocales à moindre coût.
aiinsider