Amazon està incorporant una nova eina d'intel·ligència artificial als seus continguts audiovisuals amb un objectiu concret: millorar la sincronització entre les veus doblades i els moviments dels llavis dels actors. La tecnologia no es limita a generar o substituir l'àudio, sinó que modifica digitalment determinades parts del rostre perquè la pronunciació aparenti coincidir amb l'idioma del doblatge.
La companyia ja ha començat a provar aquest sistema a Maxton Hall, una de les seves produccions alemanyes més conegudes. En aquesta primera fase, la tecnologia s'està utilitzant per adaptar la sèrie a l'anglès. Amazon ha presentat el projecte com una via per facilitar l'accés a produccions internacionals i aconseguir una millor integració en l'experiència dels espectadors.
Una tecnologia que modifica el rostre
El funcionament parteix de la imatge original de la producció. La intel·ligència artificial analitza els moviments dels actors i modifica la zona de la boca i la part inferior del rostre per fer-la coincidir amb les paraules pronunciades en la nova pista d'àudio.
D'aquesta manera, l'espectador no només escolta una veu diferent, sinó que també pot percebre uns moviments labials adaptats a l'idioma que està escoltant. L'objectiu és reduir una de les diferències més evidents del doblatge tradicional: que la durada i l'articulació de les paraules no sempre coincideixen amb els moviments originals de la boca.
Amazon encara no ha mostrat públicament una demostració d'aquesta eina, per la qual cosa no és possible valorar amb detall el resultat final. La companyia tampoc ha concretat per ara quan podria ampliar la seva utilització a altres produccions o idiomes.
Amazon i la seva aposta per la IA a Prime Video
Aquesta iniciativa se suma a altres projectes amb intel·ligència artificial que Amazon està desenvolupant per a la seva plataforma de vídeo. La companyia ja ha experimentat amb sistemes de doblatge assistit per IA per a pel·lícules i sèries i també ha utilitzat eines generatives en determinats continguts.
L'estratègia no es limita al doblatge. Prime Video ha incorporat funcions basades en IA per facilitar el consum de les seves sèries i pel·lícules, encara que algunes d'aquestes eines també han rebut crítiques pels errors generats. La companyia, a més, ha explorat la producció de continguts realitzats parcialment mitjançant tecnologia generativa.
En el cas del doblatge, un dels principals debats gira entorn del paper dels professionals de la veu. Associacions i sindicats del sector han expressat la seva preocupació per l'ús de veus sintètiques i per les condicions relacionades amb la utilització de les gravacions dels actors per desenvolupar models d'intel·ligència artificial.
Una tecnologia que ja es fa servir en altres sectors
Tot i que Amazon està incorporant ara aquesta funció a les seves produccions, la modificació dels moviments facials per adaptar continguts a altres idiomes no és una tecnologia completament nova. Empreses especialitzades en producció audiovisual fa anys que desenvolupen eines d'aquest tipus i també s'han utilitzat sistemes similars en videojocs.
La tecnologia planteja, a més, un repte relacionat amb el realisme dels rostres generats o modificats digitalment. Les petites alteracions en l'expressió facial poden resultar perceptibles per a l'espectador, especialment quan afecten una zona tan important per a la comunicació com la boca.
Per ara, el projecte d'Amazon es troba en una fase inicial. La seva evolució dependrà tant de la qualitat dels resultats com de l'acceptació dels espectadors i de les condicions que la companyia estableixi amb els professionals del doblatge.
Una tecnologia que pot tenir conseqüències en la indústria del doblatge
L'arribada d'aquestes eines obre un nou debat en la indústria audiovisual. Si la intel·ligència artificial pot adaptar automàticament els moviments dels actors a diferents idiomes, el procés de localització podria guanyar rapidesa i reduir determinats costos de producció. Al mateix temps, planteja interrogants sobre el paper que tindran els professionals del doblatge en aquest nou escenari.
Un dels principals punts de discussió està relacionat amb els drets sobre la veu. Els sindicats i associacions professionals han reclamat garanties per evitar que les gravacions dels actors puguin utilitzar-se per entrenar sistemes d'intel·ligència artificial sense autorització específica o sense una compensació adequada.
El debat no es limita a la substitució de veus. També afecta la possibilitat que una interpretació pugui ser reproduïda o modificada digitalment després de la gravació. Per als professionals del sector, establir límits clars sobre l'ús de les seves veus, la seva imatge i les seves interpretacions s'ha convertit en una de les qüestions centrals davant l'expansió d'aquestes tecnologies.
Amazon no és l'única companyia que està explorant aquestes possibilitats, per la qual cosa el desenvolupament d'aquests sistemes podria acabar influint en la forma en la qual pel·lícules i sèries es doblen i distribueixen internacionalment. L'evolució de la tecnologia anirà acompanyada, previsiblement, d'un debat sobre regulació, propietat intel·lectual i condicions laborals en el sector audiovisual.
Afegeix ElConstitucional.es com a font preferida de Google de forma gratuïta.
Mantén-te informat de totes les notícies d'última hora i amb la millor informació. Contra la desinformació, per la democràcia i els drets socials.