Misschien, als je ooit een film gaat kijken, zal het algoritme van de videostreamingdienst een blockbuster aanbevelen die is gescript door kunstmatige intelligentie (AI), robots zijn acteurs, en animatie en rendering worden gedaan door deep learning. Het is zelfs mogelijk dat het script voor deze film door een AI is gelezen en de studio heeft geadviseerd om het aan te schaffen.
Je kunt je gemakkelijk voorstellen hoe algoritmen en robots de filmindustrie naar dezelfde plek zullen sturen als industriële en servicemedewerkers, en dat het maken van artistieke films in een uitstervende fase is. Dit geldt echter niet voor de filmindustrie, integendeel - AI vergroot de creatieve mogelijkheden van Hollywood in plaats van ze te onderdrukken.
Het is waar dat sommige beroepen en beroepen verouderd raken naarmate computers er beter in worden. Een VFX-specialist hoeft niet langer een baret te dragen en een achtergrond te kunnen schilderen - studio's hebben ingenieurs nodig die bedreven zijn in het trainen van deep learning-algoritmen om routinewerk uit te voeren, zoals het verfijnen van een video-effect of het echt maken van een digitaal personage. Dat gezegd hebbende, brengen artiesten minder tijd op de computer door met grondige beeld-voor-beeldbewerkingen en kunnen ze interessantere dingen doen, legt Darren Hendler, Digital Domain Leader, uit.
Net zoals computers de noodzaak voor animators hebben geëlimineerd om elk frame handmatig te tekenen, kunnen geavanceerde algoritmen automatisch complexe video-effecten toepassen. In beide gevallen blijven animators niet zonder werk.
"We ontdekten dat AI zoveel routinetaken ter beschikking heeft die ze veel sneller kunnen voltooien, waardoor mensen tijd vrijmaken om creatieve taken uit te voeren", zegt Hendler. - Ik denk dat er veel technologie zal zijn om het voor acteurs gemakkelijker te maken fantastische personages te presenteren. In toenemende mate zullen de acteurs die in groepsscènes spelen, in die scènes worden vervangen door computer gegenereerde avatars."
Onlangs gebruikte het team van Handler AI en andere geavanceerde software om Josh Brolin in Thanos te transformeren in Avengers: Infinity War. Meer specifiek gebruikten ze een AI-algoritme, getraind op scans met hoge resolutie van Brolin's gezicht, om zijn gezichtsuitdrukkingen tot rimpels te volgen, en vervolgens gebruikten ze een ander algoritme om het weergegeven gezicht op Thanos 'lichaam te leggen.
Met deze benadering kun je het beste combineren: de hoge resolutie die wordt verkregen met een filmcamera, en het subtielere acteerwerk als resultaat van het werk van de acteur, omringd door andere acteurs, en niet alleen voor een groen scherm. En hoewel het blenden van gezichten meestal weken duurt, verwerkt het algoritme voor machine learning van Digital Domain dit bijna in realtime en creëert het een digitale spiegel voor Brolin.
"Op de allereerste filmdag kon Brolin zien hoe zijn personage eruit zou zien en hoe hij zich zou gedragen", zegt Hendler.
Promotie video:
Ja, deze algoritmen zijn in staat om snel taken uit te voeren waarvoor teams van specialisten nodig waren. Wanneer ze effectief worden gebruikt, kunnen ze de beste prestaties, nauwkeurige bewerking en de meest geavanceerde video-effecten bieden die momenteel beschikbaar zijn. En hoewel de meest geavanceerde (dat wil zeggen dure) algoritmen tot nu toe beperkt zijn gebleven tot gebruik in kaskrakers van Disney-studio's, gelooft Handler dat ze in de loop van de tijd de norm zullen worden.
“Ik denk dat het op grote schaal zal worden gebruikt. Het belangrijkste obstakel is dat het een heel andere aanpak en handelwijze vereist, en mensen zijn nog steeds aan het uitzoeken hoe het werkt. Maar naarmate mensen ervaring opdoen met het trainen van machines om animatietaken uit te voeren, is het logisch om steeds meer gebieden in het maken van films te verwachten waar AI zal worden toegepast.
"Machine learning moet nog op grote schaal worden toegepast, omdat producenten nog geen goed begrip hebben van de technologie", zegt Hendler. “Maar we zien nu al dat deep en machine learning op zeer specifieke gebieden doordringen. Dit is heel nieuw en anders dan alles wat we eerder hebben gedaan."
Veel van dergelijke toepassingen zijn al verschenen. In januari regisseerde Kristen Stewart (ja, Twilight's Bella Swan) een korte film in samenwerking met Adobe om een neuraal netwerk te creëren waardoor beeldmateriaal eruitziet als Stewarts impressionistische schilderijen.
Door de parameter u fijn af te stemmen, verandert de mate waarin de film op een impressionistisch schilderij lijkt.
Ondertussen heeft de Disney-studio acrobatische robots gemaakt die hoog in de lucht kunnen worden gegooid en vervolgens (mogelijk met behulp van AI) kunnen worden bewerkt om ze op acteurs te laten lijken. Nu kunnen de acteurs ontspannen en zich concentreren op minder gevaarlijke afleveringen.
Maar binnenkort zal AI bij het maken van films verder kunnen gaan dan het domein van acteren en monteren - het zal kunnen deelnemen aan de beslissing over de productie van de film. Het Belgische bedrijf Scriptbook heeft een algoritme ontwikkeld waarvan het beweert dat het door analyse van een script kan voorspellen of een film commercieel succesvol zal zijn.
Meestal wordt het werk met het script uitgevoerd door de filmstudio-assistenten en stagiaires, en de laatste hoeft volgens de Californische wet niet eens te worden betaald. Om 5.000 dollar te besteden aan het vaak onbetaalde werk van mensen, beweert het bedrijf dat zijn algoritme drie keer beter is in het voorspellen van kassuccessen dan mensen die een script lezen. Het bedrijf zegt ook dat het Sony Pictures niet zou aanraden om 22 van hun meest opvallende box office flops in de afgelopen drie jaar te schieten, wat het bedrijf miljoenen dollars zou hebben bespaard.
Het Scriptbook beantwoordt nog geen vragen over hun technologie en de beperkingen van het algoritme, maar van AI is bekend dat het de MPAA-rating (leeftijdsgrens) kan voorspellen, kan bepalen wie de personages zijn en welke emoties ze uiten, en de doelgroep van het script kan schetsen. Hij kan ook bepalen of het script de Beckdel-test doorstaat, de minimumvereiste voor de vertegenwoordiging van vrouwen in de werken. Het algoritme kan ook bepalen of de cast van personages in de film voldoende divers is, al moet worden opgemerkt dat veel scripts de race van het personage niet vermelden.
Dit alles kan natuurlijk worden gedaan door mensen die het script lezen. En een door mensen geschreven rapport over het script bevat een gedetailleerde samenvatting en aanbevelingen of een bepaalde studio, afhankelijk van de specifieke kenmerken en het publiek, dit script aan het werk moet zetten. Gezien de emotionele complexiteit van een AI, is het onwaarschijnlijk dat een scriptboek hetzelfde niveau van diepgaande analyse biedt als een mens. Toch stelde het bedrijf zelf voor om het systeem te gebruiken om recensenten van scripts te helpen, en niet als vervanging.
Het algoritme helpt mensen hun scenarioanalyse te baseren op emotieloze, betrouwbare gegevens. Hoewel het lijkt alsof hier veel menselijke creativiteit nodig is, kunnen tools zoals het Scriptbook studio's helpen betere financiële beslissingen te nemen.
De geautomatiseerde toekomst van Hollywood betekent niet dat een persoon uit het proces wordt verwijderd (tenzij een dergelijke beslissing wordt genomen door de machthebbers). Hendler kijkt eerder uit naar een toekomst waarin kunstenaars blijven creëren, in samenwerking met tijdbesparende machines die routine maken en het werk vereenvoudigen.
"We werken nog steeds aan manieren om machine learning op een groot aantal problemen toe te passen", zegt Hendler. "In de komende twee tot drie jaar verwachten we een sterke toename van de snelheid van operaties op het gebied van video-effecten, evenals een verbetering van de kwaliteit."
Vadim Tarabarko
