Clonazione di voci e volti grazie all’intelligenza artificiale generativa, cosa c’è oltre il trend , tendenza e l’innovazione.
La generazione di contenuti sembra essere la principale tendenza tecnologica del 2023.
Grazie alla capacità di creare nuovi contenuti tramite algoritmi, questa tecnologia sta acquisendo una crescente consapevolezza pubblica, soprattutto grazie a artisti del calibro di ChatGPT.
Si tratta di una tecnologia in stile chatbot, basata su modelli linguistici di grandi dimensioni (LLM) in grado di produrre testi di vario genere, come saggi, poesie, articoli di notizie e addirittura programmi per computer.
Ma non è tutto: c’è anche DALL-E, un’altra creazione di OpenAI supportata da Microsoft, che si concentra invece sulla generazione di contenuti visivi.
In questo modo, la tecnologia di generazione di contenuti si sta evolvendo a ritmi sempre più elevati, creando nuove opportunità e sfide per il futuro.
Sebbene alcuni sostengano che l’arrivo di ChatGPT rappresenti il debutto dell’intelligenza artificiale nel mainstream, la verità è che siamo solo agli albori di una nuova era di applicazioni basate sull’IA che rivoluzioneranno ogni settore dell’industria, dal sondaggio dei consumatori alla fotografia di stock, dall’immobiliare al marketing dei contenuti.
Ed è proprio in questo contesto che una startup emergente sta cercando di farsi valere, offrendo alle aziende la possibilità di creare video “unici” su misura per ogni singolo cliente, utilizzando una sola registrazione iniziale come base.
Questa tecnologia rappresenta un’innovazione rivoluzionaria e potrebbe trasformare completamente il modo in cui le aziende si relazionano con i propri clienti.
Tuttavia, il vero potenziale dell’IA è ancora tutto da scoprire e siamo solo agli inizi di una nuova era di sviluppo tecnologico.
Come la startup Tavus sta usando la clonazione di voci e volti grazie all’intelligenza artificiale generativa
L’innovativa startup Tavus sta gettando le basi per una nuova era di comunicazione personalizzata.
Il loro obiettivo è di consentire alle aziende di creare video “unici” su misura per ogni individuo, utilizzando dati testuali inviati tramite un modulo online o profilazioni sui social media.
Questo permetterà alle aziende di inviare un flusso infinito di presentazioni video personalizzate ai loro potenziali clienti o candidati.
La piattaforma di Tavus è stata recentemente finanziata con successo in un round iniziale di finanziamenti, guidato dall’investitore della Silicon Valley Sequoia e con la partecipazione di altri importanti sostenitori come Accel Partners, Index Ventures, Lightspeed Ventures e YC Continuity.
L’intelligenza artificiale è il futuro e Tavus è una delle startup all’avanguardia di questa rivoluzione tecnologica.
La piattaforma di Tavus consente a team di vendita e marketing di inviare flussi infiniti di presentazioni video personalizzate a potenziali clienti, utilizzando dati testuali ricevuti tramite moduli online.
Allo stesso modo, i cacciatori di teste possono inviare video personalizzati a potenziali candidati, utilizzando i dati raccolti dai loro profili LinkedIn.
La start-up, fondata da Quinn Favret e dal CEO Hassan Raza, ha raccolto 6,1 milioni di dollari in un round iniziale di finanziamenti, guidato dall’investitore della Silicon Valley Sequoia, con la partecipazione di Accel Partners, Index Ventures, Lightspeed Ventures e YC Continuity.
Tavus è stata ideata per affrontare la ripetitività e l’onerosità del processo di creazione di video personalizzati per diverse categorie di utenti.
Grazie alla piattaforma di Tavus, infatti, gli utenti possono creare modelli di video AI in pochi minuti, generando successivamente un numero illimitato di versioni del video originale.
In questo modo, qualsiasi azienda può creare video personalizzati in modo semplice ed efficiente, ottimizzati per le specifiche esigenze dei clienti o dei candidati.
Il processo di onboarding iniziale richiede che l’utente, ad esempio un reclutatore o un dirigente delle vendite, registri un video di 15 minuti basato su uno script fornito da Tavus, che viene utilizzato per addestrare l’intelligenza artificiale.
Quindi, l’utente registra un modello per ogni campagna che desidera creare.
Il primo step per utilizzare Tavus richiede che l’utente, ad esempio un dirigente delle vendite o un recruiter, registri un video di 15 minuti basato su uno script fornito dalla piattaforma.
Questo video viene poi utilizzato per addestrare l’intelligenza artificiale. Successivamente, l’utente registrerà un modello per ogni campagna che vuole creare.
Gli utenti possono personalizzare il loro video selezionando i vari elementi attraverso un editor web-based, che consente loro di specificare ogni variabile (ad esempio nome dell’azienda, nome o posizione del dirigente), oltre ad aggiungere inviti all’azione e così via.

La piattaforma Tavus supporta anche variabili di forma più lunga, utilizzando snippet alimentati da ChatGPT per creare introduzioni personalizzate, una funzionalità che i suoi utenti hanno richiesto molto spesso.
Per esempio, lo script di base su cui viene creato un video può essere configurato per includere un’introduzione di una frase generata dal profilo LinkedIn di una persona specifica.
Questo approccio consente agli utenti di creare video altamente personalizzati e coinvolgenti per il loro pubblico di destinazione.

In pratica, Tavus sta cercando di emulare ciò che i software di marketing di massa hanno fatto nel campo delle e-mail per anni, portandolo nel mondo visivamente più coinvolgente dei video.
In realtà, questo potrebbe sollevare alcune perplessità per alcuni: le persone saranno così accoglienti di un tono di vendita personalizzato quando scopriranno che il mittente non ha realmente fatto un video solo per loro?
Ma forse c’è qualcosa di un po’ inquietante in un video generato dall’intelligenza artificiale che utilizza informazioni personali raccolte da un database, il che significa che qualcosa progettato per essere personale alla fine potrebbe sembrare incredibilmente impersonale quando l’utente viene a conoscenza di come è stato realizzato.
Le questioni sollevate da tali scenari continueranno ad aumentare man mano che l’IA diventerà più radicata nella nostra vita quotidiana.
E Favret si affretta a sottolineare che, sebbene le vendite e il marketing siano casi d’uso ovvi per la sua tecnologia, non sono limitati a quei settori: sta vedendo l’adozione da parte di “un gruppo eclettico di utenti”, tra cui reclutatori, rettori universitari e dirigenti di livello C.
“Spesso si crede erroneamente che Tavus sia esclusivamente rivolto ai team di vendita e marketing”, ha spiegato Favret.
“Ma in realtà abbiamo utenti che utilizzano Tavus in modi innovativi e potenti durante l’intero percorso del cliente.
Gli esperti del nostro network applicano ampiamente Tavus in diversi ambiti organizzativi, tra cui il successo dei clienti, la promozione del prodotto, il reclutamento e altre funzioni legate al go-to-market”.
Ma chi si propone di essere clonato esattamente?
“In genere l’utente clona se stesso, ma non è raro che le aziende optino per una figura centrale, come un dirigente o un portavoce, al fine di mantenere un’immagine coerente dell’azienda”, ha aggiunto Favret.
“Tavus è progettato per essere facile da usare e adatto a ogni tipo di utente, consentendo a tutti di clonarsi in pochi minuti.”
Sotto la superficie, Tavus sostiene di utilizzare l’apprendimento automatico per addestrare un modello sui gesti facciali e sui movimenti delle labbra, creando un sistema che replica realisticamente questi movimenti in sincronia con l’audio sintetizzato.
Per quanto riguarda l’integrazione, le aziende possono accedere a Tavus principalmente in due modi.
Metà degli utenti utilizzano la dashboard web, mentre gli altri integrano Tavus nei propri sistemi tramite API o lo incorporano in modo nativo.
Ci sono inoltre diverse personalizzazioni disponibili, tra cui l’aggiunta di effetti speciali, la regolazione della velocità e dell’intonazione e la scelta del sesso della voce sintetizzata.
“Spesso notiamo che i team di vendita utilizzano e implementano Tavus direttamente attraverso la piattaforma, in quanto sono in grado di generare in modo efficiente grandi quantità di video per le campagne pianificate”, ha dichiarato Favret.
“Altri team utilizzano Tavus in modo più programmatico, integrandolo direttamente nei loro sistemi.
Questo consente agli utenti di creare flussi di lavoro “basati sugli eventi” in cui un video Tavus può essere generato e inviato in risposta a un trigger”.
Inoltre, è possibile personalizzare ulteriormente i video Tavus, modificandone il tono di voce, la lingua, l’aspetto e altro ancora.
Ad esempio, “guidato dall’evento”, se un potenziale cliente invia un modulo sul sito Web di un’azienda, l’azienda può generare e inviare automaticamente un video Tavus personalizzato a quel lead utilizzando i dati inseriti dal potenziale cliente stesso.
“In questo modo, le aziende possono sfruttare il momento opportuno per massimizzare le conversioni, senza dover attendere che un membro del team registri il video”, ha continuato Favret.
L’uso improprio dell’Intelligenza Artificiale è un tema molto discusso al giorno d’oggi.
Alcune delle aziende più grandi del mondo, come Microsoft e Google, stanno gareggiando per portare l’IA generativa nelle mani delle imprese e dei consumatori il più rapidamente possibile.
Allo stesso tempo, le startup di IA generativa, come GlossAI, stanno emergendo sul mercato, utilizzando l’IA per aiutare le aziende a creare facilmente scenette di marketing.
Inoltre, Carattere tipografico sta sperimentando l’utilizzo dell’IA per la generazione di immagini e di copie di marketing nell’azienda.
Tuttavia, questo tipo di utilizzo dell’IA potrebbe essere pericoloso se non regolamentato adeguatamente.
Nell’ambito dell’intelligenza artificiale generativa, esistono molte aziende che stanno cercando di fare la differenza.
In particolare, per quanto riguarda Tavus, Windsor è un’azienda che da alcuni anni sta lavorando su un progetto simile, sebbene con una forte attenzione all’e-commerce.
Inoltre, c’è anche Sintesi, con sede a Londra e sostenuta da un gruppo di investitori di alto livello, che si concentra sulla creazione di avatar digitali a partire da testi utilizzati nella formazione e nei video dimostrativi.
Questo dimostra come l’intelligenza artificiale stia rivoluzionando molteplici campi, spingendo le aziende a innovare e trovare nuove soluzioni creative.
È evidente che, prima del recente clamore intorno all’IA generativa, c’era già un movimento in crescita in quella direzione nel mondo delle startup, un’opportunità che Tavus sta ora cercando di sfruttare.
In effetti, nonostante la sua breve esistenza, Tavus ha già acquisito clienti di rilievo come la società di dati immobiliari Co-protagonista e lo scaleup tecnologico francese AB Gustoso.
Tuttavia, è importante prendere in considerazione il potenziale uso improprio di questo tipo di tecnologia.
Potrebbe essere possibile caricare un video di qualcun altro che parla e utilizzarlo per creare nuovi video attraverso un modello di intelligenza artificiale?
Non c’è certo carenza di esempi di imbrogli deepfake, sia nel video che nella voce.
E alcune aziende, come la startup fondata dai creatori di South Park, Deep Voodoo, stanno già raccogliendo fondi da investitori per i loro sforzi in campo di deepfake.
La diffusione di questa tecnologia nella società solleva questioni sempre più pressanti riguardo alle implicazioni etiche, anche se le intenzioni alla base sono buone.
Secondo Favret, Tavus ha implementato una funzionalità che rende più difficile l’inganno del sistema, richiedendo agli utenti di eseguire una verifica vocale e di registrarsi dal vivo sulla piattaforma Tavus.
Tuttavia, rimane da vedere se queste misure saranno sufficienti a proteggere la privacy degli utenti e a prevenire eventuali abusi della tecnologia.
“Secondo Favret, l’impiego della tecnologia di Tavus può essere applicato in vari campi, come ad esempio la formazione professionale, il supporto ai pazienti anziani, la localizzazione e il supporto alle vittime di calamità naturali.
Tuttavia, la tecnologia di deepfake è una questione molto delicata e richiede una discussione approfondita sulla sua etica e sul suo impatto sulla società.
Per questo motivo, Tavus è impegnata nella promozione di un utilizzo etico della sua tecnologia e nella definizione di regole chiare per l’uso dei propri servizi”.
La visualizzazione del denaro è spesso una questione delicata per molte aziende e individui, soprattutto quando si tratta di servizi che richiedono un pagamento regolare come Tavus.
Fortunatamente, la piattaforma offre diverse opzioni per soddisfare le esigenze di ogni tipo di azienda, dal piano introduttivo di base fino al piano aziendale personalizzato.
Il piano introduttivo di base è pensato per le piccole imprese e ha un costo mensile di $275.
Ci sono alcune restrizioni, come il numero di video che possono creare, ma questo piano offre comunque un’opzione accessibile per le imprese appena avviate o quelle con un budget limitato.
D’altra parte, il piano aziendale personalizzato offre maggiore flessibilità e personalizzazione, ma il prezzo varia in base alle esigenze dell’azienda.
In definitiva, Tavus offre una vasta gamma di opzioni per soddisfare le esigenze di qualsiasi azienda, grande o piccola.
Sia che si scelga il piano introduttivo di base o il piano aziendale personalizzato, è importante considerare attentamente le proprie esigenze e il proprio budget per assicurarsi di scegliere la soluzione migliore.
Favret ha sottolineato che i piani di Tavus sono altamente personalizzati in base alle esigenze specifiche delle aziende, tuttavia a livello generale adottano un modello di pagamento basato sull’utilizzo.
In pratica, gli utenti vengono addebitati in base al numero di postazioni disponibili e al numero di video generati.
“Questo approccio flessibile ci consente di soddisfare le diverse esigenze dei nostri clienti, garantendo al contempo una maggiore trasparenza e flessibilità nei prezzi”, ha aggiunto Favret.
Prima di questo recente round di finanziamento, Tavus aveva ottenuto una modesta somma di denaro come parte della sua partecipazione al programma YC nel 2021.
L’elenco completo dei partecipanti al round di finanziamento iniziale include: Sequoia, Accel Partners, Index Ventures, Lightspeed Ventures, YC Continuity, SV Angel, Hack VC, Remus Capital, Mantis Capital, Liquid2 Ventures, Zillionize, Soma Capital, GTMfund, Terra Nova e vari investitori segreti.