Filmmaker Danfung Dennis is geen onbekende op slagvelden. In 2009 bracht hij vier weken door met fotograferen met Amerikaanse mariniers in Afghanistan voor de voor een Oscar genomineerde documentaire uit 2009, Hel en weer terug. Nu gaat Dennis verder met een heel andere smaak van het slagveld Nulpunt, een film die zowel reflecteert op het traditionele filmmaken als deze dreigt te verstoren door exclusief voor de Oculus Rift uit te brengen. Het is een inventief concept, dat meteen doet denken aan de schoonheid van filmmaker Alexander Sokurov Russische Ark.
Gefotografeerd op één dag in december 2001, Russische Ark is een avant-gardestuk dat bestaat uit één enkele, doorlopende trackingshot. Het baant zich een pad door het Winterpaleis in Sint-Petersburg, Rusland, terwijl een verteller een los verhaal vertelt. Het zijn 96 ononderbroken minuten die neerkomen op een monumentale prestatie van zorgvuldig geënsceneerde choreografie, waarbij acteurs op specifieke aanwijzingen in en uit het beeld komen, op een gegeven moment met honderden.
“We hebben niet langer controle over welk frame het publiek te zien krijgt.”
Het uitgebreide gebruik van Steadicam in de film – een stabilisatiesysteem dat trillingen van een handcamera elimineert – is een belangrijke inspiratiebron voor Dennis. Door Nulpunt, hij is van plan het geëvolueerde entertainmentmedium te verkennen dat zich snel ontwikkelt rond virtual reality door gebruik te maken van een van de meest succesvolle iteraties tot nu toe, de nog niet uitgebrachte headset van Oculus VR.
“Russische Ark is het meesterwerk van Steadicam-werk. Ik denk dat dat heel goed zal werken in de Rift, waar het één ononderbroken, samenhangend verhaal en ervaring is die aan je voorbij gaat”, zegt de Nulpunt directeur vertelt Digital Trends.
Het is zo ontworpen dat de film zich ‘op rails’ ontvouwt, waardoor het publiek van de ene kamer naar de andere wordt getrokken, net zoals dat het geval is Russische Ark geleidelijke passage verschillende kamers en tijdsperioden. Het idee is om elke ruimte een meditatie te laten geven over opkomende VR-toepassingen, waarbij audio van verschillende interviews met experts wordt afgespeeld tijdens een meeslepende reeks presentaties. Deze Holodeck-achtige kamers maken deel uit van een ruimtestation waarop de hele reis zich afspeelt.
“Je koppelt ruimtelijke locaties aan het verhaal, en ik denk dat dat heel belangrijk is voor de manier waarop ons geheugen werkt”, legt Dennis uit. “Ons brein brengt voortdurend de omgeving om ons heen in kaart. We denken dat wat echt anders zal zijn dan traditioneel filmmaken het gevoel van ruimte en fysieke locatie is, en wat er op die fysieke locatie gebeurt.
Dit spreekt rechtstreeks tot de belangrijkste uitdaging van het maken van VR-films. Conventionele concepten als framing en editing zijn niet van toepassing als je je publiek in een gefabriceerde realiteit onderdompelt. De ‘camera’ is in alle opzichten de ogen van de kijker en biedt een onbeperkt zicht op de wereld die is gecreëerd. Je kunt je misschien niet door de ruimte bewegen alsof het een videogame is, maar je kunt je hoofd wel draaien om in elke richting te kijken. De vraag is: hoe bouw je een samenhangend plot op als de focus van de aandacht van de camera volledig onbeperkt en onmogelijk te voorspellen is?
“Dit is een nieuw medium, een nieuwe taal, en we moeten de grammatica en de syntaxis uitvinden van hoe je een effectief verhaal vertelt in dit medium”, zegt Dennis. “We hebben niet langer controle over welk frame het publiek te zien krijgt. We leveren al deze ruwe informatie... en laten hen vervolgens beslissen welk deel ervan ze willen bekijken.'
“Het is één ononderbroken, samenhangend verhaal en ervaring die als het ware aan je voorbij gaat”
“Een groot deel van [onze aanpak voor het maken van films] zal, denk ik, deze fusie zijn tussen gaming en film”, zegt hij. “We kunnen veel leren van de manier waarop first-person games de verhalen hebben verteld waarin je een personage bent. Het is een compleet nieuw terrein. We weten dat het een enorme uitdaging zal zijn om erachter te komen hoe we een verhaal vertellen of een ervaring overbrengen, dus onderzoeken en ontwikkelen we dat terwijl de technologie op komst is.”
Naast de meer esoterische vragen van Hoe je een grotendeels passieve VR-ervaring fotografeert, is het zeer praktische dilemma van het ontwikkelen van technologie om dit te doen. Conventionele filmtechnieken zijn onpraktisch voor dit soort projecten, omdat traditionele camerasystemen niet zijn gebouwd om een 3D-ruimte vast te leggen. De Steadicam-opstelling van Sokurov werkte Russische Ark, Maar Nulpunt zal kijkers onderdompelen in een ruimte die ze volledig met hun ogen kunnen verkennen.
"We hebben een camerasysteem gebouwd... gebaseerd op deze bestaande digitale camera's die hoge framesnelheden en hoge resolutie kunnen opnemen", vertelt Dennis. “We hebben een reeks van deze camera's met hoge resolutie en elke camera fotografeert een behoorlijk groothoek [en] we voegen deze samen om die 360 panoramische video te creëren, maar we fotograferen ook 3D. Je krijgt dus zowel diepte als de volledige 360.”
“360°-video maken, dat is al eerder gedaan. 3D-films maken, dat is natuurlijk gedaan. Maar als we dat samen doen, is er sprake van een geheel nieuw soort opnamesysteem dat we speciaal voor de Rift moesten bouwen. We zijn daar nog steeds een prototype van aan het maken, we voegen nog steeds meer camera's toe [en] er moeten nog veel technische problemen worden opgelost, maar het komt wel.”
De meest urgente uitdaging is om die afbeeldingen correct aan elkaar te laten naaien. Sokoerov creëerde een ongelooflijk overtuigende illusie Russische Ark, maar hij deed dit vanuit het perspectief van één camera. In NulpuntDennis zal een soortgelijke prestatie leveren, maar dan met een uitgebreide reeks camera's die ruimtes van 360 graden vastleggen. Dat is een uitdaging als de camera is niet in beweging; het wordt aanzienlijk moeilijker als je met iets meer werkt dan een statische opname.
"Het is een uitdaging om [de beelden van elke camera in onze reeks] correct te laten samenvoegen", zegt Dennis. “Zodra de hele camera begint te bewegen en alles door de naden gaat, wordt het echt moeilijk om deze naadloze ervaring te creëren. Beweging is erg moeilijk voor dit medium, en het is zo belangrijk om die echt stabiele, evenwichtige, vloeiende opname te behouden om bewegingsziekte te verminderen.
Dat is de reden waarom Steadicam, een van Hollywood’s meest favoriete standby-systemen voor het maken van films, ook een potentieel handig hulpmiddel is om te gebruiken in de opkomende praktijk van VR-filmmaken. “Er is dus iets dat steeds naar voren komt in deze gestabiliseerde opnamen bij continue scènes, denk ik Russische Ark, dat soort verhalen vertellen, [biedt een ideaal raamwerk] voor virtual reality.”
(Afbeeldingen en video © Danfung Dennis En Conditie Eén)
Aanbevelingen van de redactie
- De beste Oculus Rift-spellen
- Waarom het vertrouwen in VR toeneemt – en dat is te danken aan Oculus Quest
