Indiens dyraste film Ramayana synkar skådespelarnas läppar med AI i 40 språkversioner
Producenten Namit Malhotra byggde verktyget Brahma AI på mänskliga röster som grund, den engelska trailern gjordes helt utan AI av skådespelarna själva
Bilder
Ramayana, den dyraste indiska filmproduktionen hittills, får premiär på Academy Museum of Motion Pictures den 27 oktober innan den går upp på bio och i IMAX den 5 november. I en intervju med ET Now redogjorde producenten Namit Malhotra för hur filmens engelska version togs fram — och arbetsgången visar sig vara mänskligare än branschens högtravande debatt antyder.
Filmen spelades in på hindi med sin rollbesättning, med Ranbir Kapoor som Rama, Yash som Ravana, Sai Pallavi som Sita och Sunny Deol som Hanuman. För den engelska versionen spelade röstskådespelare — ibland skådespelarna själva — in replikerna först, med känsla och tajming satta av mänskligt spel. Ett verktyg som produktionen byggt, kallat Brahma AI, fogar sedan samman det inspelade talet med skådespelarens ansikte och synkar läpprörelserna mot den inspelade rösten. Läpp-sync-arbetet övervakas av människor som Malhotra kaller "mänskliga förare", eftersom den bästa röstskådespelaren, som han uttrycker det, inte nödvändigtvis har rätt ansikte för skådespelaren på duken. Den engelska filmtrailern använde för övrigt ingen artificiell intelligens alls — huvudrollsinnehavarna dubbade den själva.
Filmen förbereds enligt uppgift för utgivning på 40 språk, och där blir ekonomin synlig. En produktionskedja som börjar med mänskliga inspelningar och avslutas med maskinstött läppsync är inte ett principiellt ställningstagande; det är en budgetberäkning av den person som bär budgeten. Malhotras framställning — att mänskliga prestationer är filmens "ryggrad" och att tekniken finns för att göra resultatet sömlöst snarare än att ersätta någon — kommer från en producent vars egna pengar finns på duken. Misslyckas dubbningen, misslyckas hans film.
Kontrasten mot omgivande bransch är slående. Ett quebecskt förlag sparkade i månaden en författare som lät maskinskriven text passera för sin egen. Spotifys VD avfärdar hotet från maskinell musik samtidigt som floden av maskingenererade spår fyller katalogen. Myndigheter skriver regler; fackförbund avger uttalanden. Under tiden beskriver årets största indiska produktion bara vad den gör: människor först, maskiner sedan, och en människa som kontrollerar läpprörelserna till sist.
Den andra delen av Ramayana-sagan, ursprungligen planerad till biopremiär vid Diwali 2027, har enligt uppgift försenats.