Microsoft și-a prezentat cele mai recente cercetări în domeniul inteligenței artificiale text-to-speech cu un model numit VALL-E, care poate simula vocea cuiva doar pe baza unui eșantion audio de trei secunde, a relatat Ars Technica. 

Discursul poate fi armonizat nu numai cu timbrul, ci și cu tonul emoțional al vorbitorului și chiar cu acustica unei încăperi. Într-o zi, acest tool putea fi folosit pentru dezvoltarea de aplicații text-to-speech personalizate sau de înaltă calitate. Dar, la fel ca deepfake-urile, prezintă riscuri de utilizare abuzivă.

VALL-E este ceea ce Microsoft numește un „model de limbaj cu codec neural". Acesta este derivat din rețeaua neuronală de compresie Encodec, alimentată de inteligența artificială de la Meta, generând sunet din textul introdus și din scurte mostre de la un vorbitor luat ca referință.

Într-o lucrare, cercetătorii descriu modul în care au antrenat VALL-E folosind 60.000 de ore de vorbire în limba engleză de la peste 7.000 de vorbitori din biblioteca audio LibriLight a Meta. Vocea pe care încearcă să o imite trebuie să fie foarte apropiată de o voce din datele utilizate pentru antrenament. În acest caz, sunt folosite date de instruire pentru a deduce cum ar suna vorbitorul țintă, dacă ar verbaliza textul dorit.

Rezultatele sunt variate, unele sună de parcă ar vorbi o mașinărie, iar altele sunt surprinzător de realiste. Faptul că păstrează tonul emoțional al mostrelor originale este ceea ce face ca unele dintre ele să fie cu adevărat deosebite. Pentru a îmbunătăți modelul, Microsoft plănuiește să extindă baza de date dedicată antrenării acestui produs software. De asemenea, compania explorează modalități de a reduce cuvintele neclare sau rostite greșit.

Microsoft a ales să nu publice codul open source, posibil din cauza riscurilor inerente menționate și anterior. Mai departe, felul în care va evolua VALL-E e de urmărit pentru că, mai mult ca sigur, va fi unul spectaculos. 

__________________________________________________________________________________________________

Urmăriți emisiunile preferate pe protvplus.ro: