Block di Jack Dorsey presenta Dessa, un'IA vocale espressiva che funziona localmente
aiinsider ·
L'azienda di Jack Dorsey, Block, ha lanciato Dessa, un nuovo modello di intelligenza artificiale vocale sviluppato dal suo laboratorio di ricerca che funziona localmente su hardware consumer. Il modello è in grado di produrre discorso espressivo a livello emotivo, inclusi risate, pause e pianti, senza affidarsi a conversioni separate da testo a voce. A differenza di molti concorrenti che utilizzano modelli linguistici di grandi dimensioni separati per le conoscenze, Dessa deriva la sua comprensione conversazionale direttamente dai dati di addestramento. Il sistema funziona come un modello full-duplex, consentendogli di parlare e ascoltare simultaneamente, in modo simile a GPT-Live di OpenAI. Block afferma che questo approccio evita la perdita di informazioni associata alla conversione del parlato in testo, risultando in un'esperienza utente più naturale. Sebbene addestrato su voci umane utilizzando un rack di GPU NVIDIA singolo, il modello non è ancora disponibile al pubblico ma è in fase di test da parte di ricercatori della sicurezza. Può funzionare su dispositivi come il MacBook M4 Max, potenzialmente aiutando Block a potenziare più esperienze vocali a costi inferiori.
aiinsider