ȘtiriTech&IT

Facebook și Instagram pot dubla coloana sonoră a clipurilor vorbite în alte limbi cu traduceri AI rostite în vocea protagoniștilor

La fel ca YouTube, Meta pune la dispoziția creatorilor Facebook și Instagram un nou instrument pentru dublarea automată a coloanei sonore, permițând lărgirea bazei de fani/urmăritori prin includerea și acelor utilizatori care vorbesc alte limbi de circulație.

Cine a trăit vremurile casetelor VHS cu siguranță își aduce aminte vremea filmelor dublate cu vocea aceleași traducătoare care recita, uneori plictisită sau sorbind din cafea, tot ce spuneau personajele din filmul respectiv. Meta va oferi de acum aceste servicii de traducere/dublare a clipurilor video, dar folosind inteligența artificială pentru a recrea vocea originală a protagoniștilor.

Instrumentul anunțat cu ocazia evenimentului Meta Connect in 2024 poate identifica automat limba vorbită în videoclipurile încărcate, folosind apoi inteligența artificială pentru a genera piste audio alternative în alte limbi suportate. În actuala etapă de testare este suportată dublarea clipurilor vorbite din engleză în limba spaniolă și viceversa, dar cu siguranță vor fi adăugate mult mai multe limbi de circulație în perioada imediat următoare.

Diferită de funcționalitatea similară care permite autogenerarea subtitrărilor în formă text, dublarea coloanei sonore implică folosirea rețelelor de procesare neurală Meta AI, putând dura ceva timp până să vedem această funcționalitate disponibilă la nivel global. Pentru a evita posibile situații stânjenitoare, Meta încurajează creatorii Facebook și Instagram să vizioneze/asculte clipurile dublate înainte de publicare.

meta facebook instagram traduceri AI

Din punct de vedere tehnic, clipurile dublate cu ajutorul AI vor avea extra-coloane sonore adăugate la momentul publicării clipului video. Versiunea tradusă va fi selectată automat pentru utilizatorii care au setat aplicația de mobil în limba respectivă, dar va exista și opțiunea comutării manuale la coloana sonoră dorită.

Opțional, creatorii de conținut vor putea activa și sincronizarea mimicii faciale asistată de AI, asigurând că mișcările buzelor se potrivesc cuvintelor rostite în versiunea dublată a coloanei sonore. Dar probabil că nu vei dori să faci asta dacă stilul tău include și comunicarea prin expresiile feței, lăsând AI-ul să-ți modeleze mimica faciala la fel ca într-un joc video.

Pregătind terenul pentru extinderea bazei de urmăritori, Meta pune la dispoziția creatorilor noi instrumente backend, de folosit pentru a urmări felul în care conținutul tău se răspândește către alte categorii demografice. O nouă metrică din fila Informații va permite creatorilor să își sorteze numărul de vizualizări în funcție de limbă, probabil pentru a demonstra eficacitatea acestor traduceri generate prin inteligență artificială.

 

Lasă un răspuns

Adresa ta de email nu va fi publicată. Câmpurile obligatorii sunt marcate cu *

Acest site folosește Akismet pentru a reduce spamul. Află cum sunt procesate datele comentariilor tale.

Back to top button