De kwestie van veroudering en veroudering op het scherm is altijd een uitdaging geweest voor regisseurs. Film maken gaat tenslotte over het op het scherm brengen van verhalen, en wanneer je verhaal zich over een lange periode afspeelt, zoals van kindertijd tot ouderdom, is een van de grootste uitdagingen hoe je de acteur die ouder wordt op een realistische manier laat zien.
Veel regisseurs hebben in de loop der jaren verschillende methoden geprobeerd om dit probleem op te lossen, en in dit bericht zullen we er enkele bespreken. Vanaf de begindagen van de cinema toen ze make-up gebruikten tot toen ze net van acteur veranderden in motion capture en, meest recentelijk, de technologie voor het vastleggen van licht die Martin Scorsese gebruikte in zijn misdaadepos The Irishman uit 2019, we zullen praten over de geschiedenis van veroudering en veroudering op het grote scherm.
Aan het einde zullen we het hebben over hoe je je eigen verouderingseffect kunt creëren met FaceApp, EBsynth en After Effects, zoals we deden in onze nieuwste commercial.
Dit is een van de plekken:
Laten we nu teruggaan in de tijd.
De Karl Struss-techniek
De sleutelfiguur op dit gebied tijdens de begindagen van de cinema was de Amerikaanse fotograaf die cameraman werd, Karl Struss. Bij het opnemen van het stille avonturenepos Ben Hur:A Tale of the Christ uit 1925 ontwikkelde Struss een techniek om gezichtstransformatie op film te tonen. Hij paste rode make-up toe om zweren op de personages te creëren en gebruikte een rood filter op de camera om ze te laten verdwijnen.
Door zijn techniek naar een hoger niveau te tillen in Dr. Jekyll en Mr. Hyde uit 1931, bracht Struss rode en groene make-up aan op het gezicht van de dokter en gebruikte hij rode en groene filters om het transformatie-effect te laten zien. Het probleem met deze techniek is dat het alleen toepasbaar is in zwart-witfilms, waar je de kleur van de make-up kunt verbergen.
Je kunt nog een uitstekend voorbeeld van de Karl Struss-techniek zien in het komedie-mysterie Sh! De octopus.
CGI de-aging
Snel vooruit naar X-Men:The Last Stand uit 2006, waar het eerste CGI-de-aging-effect werd gebruikt. De openingsscène van de film toont de 20 jaar jongere Professor X en Magneto die Jean Gray als kind bezoeken. Om Patrick Stewart en Ian McKellen oud te maken, gebruikten experts op het gebied van visuele effecten het beroemde Lola VFX-computerprogramma om een 2D Photoshop-achtige procedure te maken op foto's van hun jongere zelf.
De technologie stond nog in de kinderschoenen en dat was te zien.
Benjamin Button en de beperkingen van motion capture
De volgende doorbraak in computervisualisatie vond plaats in David Fincher's Oscar-winnende The Curious Case of Benjamin Button uit 2008. Het verhaal volgt het titelpersonage, gespeeld door Brad Pitt, die lijdt aan een aandoening waarbij hij als een oude man wordt geboren en zijn lichaam veroudert naarmate hij ouder wordt.
In het eerste uur van de film is alleen een door de computer gegenereerde Brad Pitt te zien die vanaf de nek vastzit aan het lichaam van verschillende acteurs die blauwe kappen droegen (daarover later meer). Er is geen make-up of over elkaar heen geplaatste fotografie gebruikt.
Het VFX-team van Digital Domain stond hier voor drie grote uitdagingen:één was om Brad Pitt er ouder uit te laten zien; de tweede was om alle kleine subtiliteiten en speciale trekken van zijn gezicht te laten zien, en de derde was om vlekjes van zijn gezicht op te houden onder alle omstandigheden, opnametypes en uitdrukkingen, of hij nu op klaarlichte dag is, 's nachts verlicht bij kaarslicht, of hij spreekt, rent, huilt... alles.
Om het probleem van het digitaliseren van het gezicht van Brad Pitt op te lossen, baseerde Digital Domain hun proces op Dr. Paul Ekman's Face Action Coding System (FACS), een onderzoek uit de vroege jaren 70 waarin het menselijk gezicht werd opgedeeld in 70 basishoudingen of vormen, die kunnen worden gecombineerd om oneindige mogelijkheden te creëren van alles waartoe het menselijk gezicht in staat is.
Mova-contour
Het team gebruikte het baanbrekende Mova Contour-camerasysteem, dat is gebouwd als een met licht afgesloten ruimte met twee gesynchroniseerde reeksen camera's die tegelijkertijd het uiterlijk en de vorm van een gezicht vastleggen door fluorescerende make-up te gebruiken in plaats van markeringen voor het vastleggen van bewegingen.
Zittend in de Mova Contour. Brad Pitt ging door alle gezichtshoudingen van Ekman en gaf Digital Domain een 3D-database van alles wat zijn gezicht kon doen.
Om Brads gezicht in verschillende tijdperken te creëren, gebruikte het team maquettes van de hyperrealistische beeldhouwer Kazu Hiro, die ze scanden met een zeer hoge resolutie en een enorm veelhoekig aantal. Dit gaf hen drie leeftijdsniveaus van geautomatiseerde Benjamin, en ze "retargetten" de gegevens die ze hadden van alle poses die de 44-jarige Brad deed op Brads drie bustes.
Tijdens het eerste uur van de film schoten ze de scènes op met acteurs die blauwe kappen droegen en markeerstiften op hun hoofd droegen om de camerabeweging van de lensoptiek van de set na te bootsen.
Brad werd vervolgens naar een soundstage gebracht, hij bekeek de scènes keer op keer om op te gaan in de film en handelde naar de beelden die hij zag.
De volgende fase was een proces dat beeldanalyse wordt genoemd, waarbij de gegevens die ze hadden worden omgezet naar de 87-jarige Ben en deze vervolgens in live-action met Brads performancebeelden matcht.
Om de verlichtingsuitdaging het hoofd te bieden, bouwden ze een verlichtingssysteem waarbij de verlichting van Brads gezicht overeenkwam met de verlichting van elke locatie waar Benjamin verscheen.
Het detailniveau dat in de Benjamin Button-productie zat, was werkelijk verbazingwekkend en het team werd beloond met 3 Academy Awards voor Art Direction, Make-Up en voor visuele effecten.
Gemini-man
Het hoogtepunt van motion capture-technologie kwam waarschijnlijk in 2018 met Gemini Man van Ang Lee met Will Smith in de hoofdrol. In de film creëerden ze een 23 jaar jongere versie van Smith met behulp van een mix van beelden van hem uit zijn Fresh Prince en Men in Black days. Net als bij Benjamin Button heeft het VFX-team een database gemaakt van de gezichtsuitdrukkingen van Will Smith die ze opnamen in een met licht afgesloten kamer met twee reeksen camera's.
Ze lieten Smith ook zichzelf spelen op een echte set en zes maanden later lieten ze hem zijn jongere zelf spelen op een motion-capture-podium. De productie van deze film liet ook zien dat met al zijn verfijning, motion capture nog steeds beperkt was in zijn vermogen om de volledige diepte en rijkdom van menselijk gedrag vast te leggen. Daarom bestudeerden de animators de uitdrukkingen van Smith frame voor frame, beat voor beat en stuurden ze handmatig naar Will Junior.
Veroudering op basis van licht en textuur
De laatste doorbraak op het gebied van veroudering kwam uit onverwachte hoek. Als je mensen vraagt waar ze aan denken als ze de naam Martin Scorsese horen, zou niemand zeggen visuele effecten, en onder andere omstandigheden zou de directeur van Taxi Driver en Goodfellas waarschijnlijk niet de katalysator zijn geworden die tot deze technologische innovatie heeft geleid.
De legendarische regisseur wilde al lang The Irishman maken, een gangster-epos dat de verhalen vertelt van huurmoordenaar Frank Sheeran, teamstersleider Jimmy Hoffa en Philly-misdaadbaas Russell Bufalino gedurende 51 jaar, met in de hoofdrol Robert De Niro, Al Pacino en Joe Pesci, respectievelijk.
Toen het project eindelijk groen licht kreeg, was zijn drietal acteurs te oud om de jongere versies van hun personages te spelen. Met bestaande technologieën. Scorsese stond voor twee keuzes:ofwel verschillende acteurs gebruiken in de film of motion-capture-markeringen gebruiken op de gezichten van acteurs.
Scorsese maakte bezwaar tegen beide opties en wendde zich tot VFX-supervisor Pablo Helman, met wie hij destijds aan Silence werkte, die beloofde het verouderingseffect te bereiken zonder 'golfballen' op de gezichten van acteurs te gebruiken.
Flux
Om de meest nauwkeurige 3D-computermodellen van de acteurs te bouwen, bouwde het ILM VFX-team een speciale camera-installatie, bijgenaamd het Three-Headed Monster, met twee ARRI mini-getuigencamera's aan de zijkanten van de belangrijkste RED Helium-productiecamera. Deze twee zijcamera's waren uitgerust met infraroodfilters om gelijkmatig belichte gezichtsopnamen te maken.
Ze doorliepen de FACS-uitdrukkingen op een licht podium en gebruikten een systeem genaamd 'Medusa' om verschillende gezichtsmodellen te genereren die van de ene gezichtsuitdrukking naar de andere konden gaan.
De grote doorbraak was de Flux-software, die in plaats van animatie elke scène analyseert op basis van licht en textuur en een 3D-model van het gezicht van de acteur maakt.
Het Flux-systeem zou het jongere model dan opnieuw richten op het hoofd van de hedendaagse acteur met dezelfde licht- en textuurtechnologie.
Om de meest geloofwaardige gezichten te krijgen, werd een op AI gebaseerde Face Finder gebouwd, van duizenden screenshots van de acteurs uit hun films in alle stadia van hun illustere carrière. Deze database diende als visuele referentie om te zien hoe authentiek het door Flux gemaakte model was.
Het VFX-team van ILM is genomineerd voor een Academy Award
Het verouderingseffect met FaceApp
Nu zullen we zien hoe u het verouderings- en verouderingseffect kunt creëren zonder miljoenen dollars uit te geven en indrukwekkende resultaten te behalen.
Zoals vermeld, vertrouwden we in onze nieuwste commercial op de technologie van FaceApp, die, als je niet hebt opgelet, een app voor het bewerken van foto's (en binnenkort video) is waarmee je er ouder en jonger uit kunt zien, je geslacht kunt veranderen en meer plezier kunt doen spullen. Om de transformatie van onze acteurs te voltooien, hebben we een tool gebruikt die is ontworpen om schilderijen om te zetten in video-animaties, EBsynth genaamd, en deze hebben we afgesloten met After Effects.
Als je meer wilt weten over de productie van deze advertentie, bekijk dan onze video achter de schermen.
Tutorial voor het creëren van het verouderingseffect
Laten we nu naar het verouderingseffect gaan. De workflow omvatte het kiezen van een frame uit onze originele beelden en het gebruik van FaceApp om onze acteur ouder te maken. Daarna namen we dat ene frame in EBsynth en gebruikten het als referentieframe voor alle andere frames in onze video. EBsynth matcht en positioneert het effect automatisch in elk frame afzonderlijk en biedt een volledige reeks waarin het verouderingseffect wordt toegepast.
Laten we het proces nog meer opsplitsen. Je moet After Effects openen en je beeldmateriaal importeren. Vervolgens moet u een nieuwe compilatie van dat beeldmateriaal maken en het exporteren als een reeks JPEG's. Zorg ervoor dat alles is georganiseerd door verschillende mappen voor je beeldmateriaal te maken en druk op render.
Wat je nu hebt, is je beeldmateriaal dat is geëxporteerd als individuele JPEG-frames. Kies één frame – bij voorkeur degene met de meeste details van het gezicht van je onderwerp – en download het naar je telefoon. Open het met FaceApp en pas het verouderingsfilter toe (of een ander effect dat ze hebben). Hoewel het verouderingsfilter van FaceApp behoorlijk indrukwekkend is, werkt de technologie (nog steeds) alleen op foto's, dus je hebt maar één frame van je video waar je onderwerp ouder is.
Sla die foto op je telefoon op en breng hem terug naar je computer en als je wilt, kun je het verouderingseffect op Photoshop aanpassen of verbeteren.
EBSynth
Geef die afbeelding dezelfde naam als het originele frame en open EBsynth. Klik op selecteren en kies het eerste frame van uw JPEG-reeks.
EBsynth zal de projectdirectory automatisch herkennen. Nu moet je je keyframe importeren - dat is de foto van je oude onderwerp gemaakt met Faceapp - klik op selecteren en kies dat frame.
Nu moet je EBsynth vertellen waar het effect moet beginnen en eindigen volgens de framenummers van onze reeks. Voer links het nummer in van het eerste keyframe waar het effect optreedt en rechts het nummer van uw laatste frame. Voer in het midden het framenummer in dat je op FaceApp hebt gebruikt. Om een vloeiender effect te krijgen, klikt u op 'Geavanceerd' en voert u een waarde van ongeveer 1,5 in het gedeelte De-flikkering in.
Klik vervolgens op selecteren en kies de map waarnaar u het effect wilt exporteren. Klik op 'Alles uitvoeren' en laat de software zijn magie werken. Houd er rekening mee dat dit enige tijd kan duren.
Als het klaar is, importeer je je nieuwe sequentie in After Effects en lijn je je originele beeldmateriaal uit met je nieuwe beeldmateriaal. Animeer gewoon de dekking van je beeldmateriaal en je bent klaar.
Hier zijn enkele professionele tips waarmee u nog betere resultaten kunt behalen. Masker de ogen en mond, die gebieden zijn waar de software soms mee worstelt, en voeg scherpte en korrel toe om het effect nog meer te laten versmelten met het originele beeldmateriaal. En voor een soepelere overgang kun je een Luma Key-overgang maken met behulp van het niveau-effect in 'Animate It'.
U kunt ook de onlangs gelanceerde FaceApp-video-effectfunctie gebruiken.
Dat is een wrap
Zoals bij elke nieuwe baanbrekende technologie, biedt veroudering wel enkele filosofische en morele dilemma's, maar deze vallen buiten het bestek van dit bericht. Ik hoop dat je nuttige informatie en tips hebt gevonden voor je volgende videoproject. Tot de volgende keer, blijf creatief!