Facebooks Live-Action-kamerasystemer giver dig mulighed for at tage skridt på virtuelle steder

Virtual reality har et imageproblem.

Mens masser af kameraer derude fanger sfæriske optagelser af scener fra det virkelige liv, som du så kan se på i VR (se 10 Breakthrough Technologies 2017: The 360-Degree Selfie), fanger de fleste af dem ikke også dybdedata. Dette betyder, at hvis du bærer et avanceret virtual reality-headset som Oculus Rift og ser på en sfærisk video af f.eks. Eiffeltårnet (i stedet for en computer-renderet version af det), vil billedet bevæge sig med dig, når du sætter dig på hug, hopper eller træder fra side til side. Dette er i bedste fald irriterende og i værste fald kvalmefremkaldende.

Facebook, som har været en af ​​de største fortalere for virtual reality siden købet af headset-producenten Oculus i 2014, sigter på at rette op på dette med to nye sfæriske kamerasystemer, der blev afsløret onsdag. Begge optager live-action-optagelser, der lader dig bevæge dig rundt på omkring halvanden meter plads i virtual reality. Virksomheden planlægger at få dem i produktion senere på året.

Kaldet X24 og X6 (tallene refererer til antallet af individuelle kameraer i hver model), kan kamerasystemerne gøre virtuelle oplevelser som at se koncerter, besøge berømte vartegn eller udforske museer meget mere engagerende, uanset om du gør det på egen hånd eller med en anden person. Du skal dog stadig bruge et headset, der kan spore din position i rummet og dit hoveds rotation, for virkelig at drage fordel af optagelserne.

Det, vi forsøger at gøre med VR generelt, er at bringe folk op i fordybelseskurven, sagde Facebooks teknologichef. Mike Schroepfer . Slutvisionen er [at få dig] så tæt som du kan på at føle, at du faktisk er der.

En håndfuld virksomheder har allerede bygget avancerede kameraer til at fange live-action virtual reality, som f.eks Nokias Ozo kamera, Googles Jump og Lytro's Immerge (se Lytro bygger et kamera til at fange Live-Action Virtual Reality). Men kun et par (Lytro er en af ​​dem) foregiver at filme optagelser og optage dybdeinformation, som Facebook siger, at dens X24 og X6 gør, og ingen virksomhed har endnu populariseret sådan en enhed.

Mens X24 og X6 er beregnet til professionelle, sagde Schroepfer, at teknologien i sidste ende også vil føre til forbrugerprodukter.

De nye kamerasystemer, som blev introduceret på Facebooks årlige F8-udviklerkonference, kommer et år efter, at det sociale netværk udrullede sin UFO-lignende Surround 360 , som havde 17 kameraer og var beregnet til at fange skarpe, sfæriske 3-D-billeder. Facebook solgte ikke Surround 360, men det gjorde teknologien tilgængelig via GitHub for alle, der ønskede at lave en med hyldevare.

Surround 360 inkluderede dog ikke den slags 3D-information, som X24 og X6 vil optage. Med deres linsepositioner og tilhørende software kan de nye systemer rekonstruere, hvordan verden skal se ud, mens du bevæger dig rundt, sagde Schroepfer.

I demoer af rå optagelser optaget med X24'eren, som jeg så gennem et Oculus Rift-headset i sidste uge, så jeg en sfærisk scene af en frodig regnskovsudstilling fra udsigtspunktet på en catwalk nær toppen af ​​udstillingen, med sommerfugle, der flagrede forbi, som samt en tunnel inde i et akvarium med fisk, der svømmer rundt. Fordi optagelserne indeholdt dybdeinformation, og headsettet kan spore bevægelser med seks frihedsgrader, kunne jeg bevæge mig rundt i scenerne, tjekke træerne i regnskoven, turisterne på bænke i tunnelen og fisk, der vandrede over og omkring os.

Meget af optagelserne så sprøde ud, og det var meget fedt at kunne bevæge sig frit rundt i en naturtro scene. Alligevel har teknologien stadig brug for arbejde, eller i det mindste noget redigering for at rydde op i optagelserne: løvet i regnskoven så for eksempel stribet ud, og jeg bemærkede også noget, der glitrede andre steder.

Brian Cabral , Facebooks direktør for teknik og leder af teamet, der lavede enhederne, sagde, at kameraernes fysiske arrangement gør det muligt at fange hver pixel i en given scene fra mange forskellige vinkler, og så bruges matematik til at estimere dens dybde.

Når du først ved, hvor det er i scenen, kan du flytte rundt, sagde han og tilføjede, at der vil blive ryddet op i glitringen, efterhånden som systemerne går i produktion.

Cabral sagde, at Facebook vil licensere teknologien til flere endnu ikke navngivne partnere, så de kan lave kameraer.

Ideen er at have flere modeller til at dyrke økosystemet, sagde han.

skjule