VR-ballet naar een nieuw publiek brengen met een dubbele fisheye-lens

Ballet boeit het grote publiek al heel lang vanwege de betoverende combinatie van beweging, muziek en het verhaal dat wordt verteld. Traditionele theateromgevingen kunnen echter overweldigend of ontoegankelijk zijn voor veel mensen met neurodiversiteit. Maar stel dat je de manier waarop ballet wordt ervaren kunt herdefiniëren door gebruik te maken van de kracht van virtual reality?

Clive Booth, wiens werk zich toespitst op sfeervolle fashion-, beauty- en portretfotografie, werkt graag in de kunst en heeft een passie voor de nieuwste technologische ontwikkelingen. Hij was dan ook de ideale filmmaker voor een ambitieus virtual reality-project met de Canon RF 5.2mm F2.8L DUAL FISHEYE-lens. Zijn doel was om een meeslepende voorstelling van Het zwanenmeer op te nemen voor de Freefall Dance Company, het zustergezelschap van het Birmingham Royal Ballet voor dansers met neurodiversiteit, die ook zou worden getoond aan duizend leerlingen op zes verschillende scholen. "Het idee was om een neurodivergent publiek dichter bij de dansers te brengen," legt Clive uit. "Dat zijn jongeren en volwassenen die normaal gesproken niet naar live theater zouden kunnen gaan kijken."

Clive had al eerder samengewerkt met het Birmingham Royal Ballet, maar de introductie van de Canon RF 5.2mm F2.8L DUAL FISHEYE-lens bood nieuwe mogelijkheden voor VR en het vertellen van meeslepende verhalen. Dit was een kans voor Clive om zijn decennialange ervaring in te zetten voor een opwindende, nieuwe technologie en iets te creëren dat van essentieel belang is. "Ik dacht meteen: wow, wat kan ik met deze lens?"

Tom Rogers, de creatieve digitale producer van het Birmingham Royal Ballet, voegde een belangrijke dimensie toe aan hun creatieve samenwerking. Hij danst al 18 jaar bij het gezelschap en herkende meteen de creatieve mogelijkheden van het filmen van een live show in VR.

"Clive en ik hebben het idee van meeslepende verhalen omarmd," legt Tom uit. "Het is volstrekt logisch omdat je het publiek samen met ons in de ruimte plaatst. Er gebeurt altijd heel veel achter de schermen, dus als we iemand op het podium kunnen zetten, met onze dansers in de coulissen, krijgt de kijker een unieke ingang. Het is best een emotionele ervaring."

Zoals voor veel creators — en kijkers — is VR ook voor Clive nieuw. Voordat hij aan het project begon, werkte hij gedurende zes maanden samen met het productteam van Canon om te ontdekken wat er allemaal mogelijk was, hoe hij problemen kon oplossen, zoals opnamen zo kadreren dat de filmmaker niet in de scène zit, en hoe hij de uiteindelijke bestanden kon bewerken.

De EOS VR Utility-software van Canon speelde een belangrijke rol in dit proces. Het vereenvoudigt je workflow dankzij de automatische verwerking van compatibele RAW-videobestanden die zijn gemaakt met bijvoorbeeld een Canon EOS R5 C. Na de verwerking kun je eenvoudige aanpassingen doorvoeren, zoals witbalans, ISO en helderheid, voordat je de bestanden exporteert in verschillende resoluties, klaar voor verdere bewerking. EOS VR Utility is echt "de lijm die alles bij elkaar brengt", voegt Clive toe.

Om te leren filmen in VR moet je begrijpen hoe het menselijk oog en de hersenen beweging waarnemen. "Bij minder dan 60 frames per seconde (fps) kan het menselijk oog zien of de beweging niet vloeiend is," legt Clive uit. "Maar bij meer dan 60 fps kunnen we het menselijk brein laten denken dat dit de werkelijkheid is. Canon leverde me de geüpdatete EOS VR Utility, waardoor ik RAW-bestanden kon verwerken die met 60 fps waren opgenomen op mijn Canon EOS R5 C en waarmee ik prachtige, vloeiende bewegingen van de dansers kon maken."

De omgeving met weinig licht in het theater bracht zo zijn eigen uitdagingen mee. De EOS R5 C gaf Clive ISO's van 800 en 3200 als basis. Hij probeerde het zo veel mogelijk op ISO 800 te houden, maar er waren momenten dat hij backstage en in de coulissen filmde en dan moest hij tot ISO 3200 gaan. De uitstekende ruisreductie van de camera in combinatie met het gebruik van een plug-in in Adobe Premiere Pro verminderde de ruis echter drastisch in de nabewerking, wat resulteerde in heldere opnamen met veel scherptediepte.

Clive zegt dat de EOS R5 C zonder twijfel zijn favoriete camera is voor het maken van VR-content. "Ik haal werkelijk alles uit die camera wat erin zit," zegt hij. "Er zijn niet veel camera's die 50 minuten non-stop 12-bits 8K Cinema RAW Light met 60 fps kunnen opnemen. Die camera is feilloos.

Neem een kijkje achter de schermen bij het filmen van Het zwanenmeer in virtual reality:

Meeslepende audio was cruciaal voor het succes van het verhaal. Clive moest het geluid "vastzetten" aan de omgeving, dus gebruikte hij een ambisonic microfoon bestaande uit vier directionele microfoons om wat hij noemt een "geluidsbubbel" te creëren. "Als er hier bijvoorbeeld een vleugel staat, kan ik die in één oor horen," legt hij uit. "Als ik mijn hoofd beweeg, hoor ik hem in het andere oor."

De geluidsbubbel [spatial audio] nam op wat er overal om de camera heen te horen was, maar ook Regan werd geïnterviewd terwijl ze een microfoon droeg. Als je de film met een headset bekijkt, kun je Regan zien en de ambisonic audio horen, maar Clive kreeg ook een zuivere voice-over die hij in de scènes zonder Regan kon afspelen om het verhaal voort te zetten.

Ondanks de uitbreiding naar nieuwe technologisch geavanceerde platforms en het verplaatsen van terabytes aan gegevens in het proces, zegt Clive dat er een bevrijdende eenvoud schuilt in het filmen in VR. "Het gaat om één camera, één lens, een statief en een microfoon, en dat is het zo'n beetje," zegt hij. "Het is heel toegankelijk."

Maar voor Clive was het leukste aspect van dit project dat hij de middelen kreeg om de volgende generatie te inspireren. "Het werken aan betekenisvolle projecten is in deze fase van mijn carrière erg belangrijk voor me," legt hij uit. "Net als veel mensen wil ook ik een nalatenschap achterlaten, dus ik vind het geweldig om ballet naar jonge en neurodiverse mensen te kunnen brengen. Maar dat is nog niet alles. Het verhaal gaat over de uitdagingen die een ballerina tegenkomt en de manier waarop ze met die uitdagingen omgaat. Andere jongeren kunnen naar hun eigen leven kijken en naar de uitdagingen waar ze voor staan en hopelijk van Regan leren."