Lytro Immerge: banbrytande kamera låter dig flytta runt i VR-Video

ända sedan Lytro brast på scenen med sin första ljusfältkamera för tre år sedan har det gjort saker väldigt annorlunda. Företagets bildteknik har alltid varit banbrytande: de gör stillbilder som gör att du kan ta ett skott, sedan bestämma var du ska fokusera och hur du justerar skärpedjupet efter det faktum. Helt plötsligt,” fixa det i post ” tillämpas på saker som aldrig tidigare var möjligt i stillbilder—med en enda kamera, åtminstone.

men Lytros första två kameror var inte smash hits, av goda skäl. Företagets första konsumentprodukt, en liten kalejdoskopskytt med grundläggande kontroller och en liten sökarskärm, var extremt begränsad för sitt pris på $400 till$500. Dess andra kamera, Lytro Illum, såg mer ut som en DSLR och erbjöd djupare kontroller. Det kostade också $1,600 och snubblat i viktiga områden av användbarhet. Varken kameran kunde fånga högupplösta bilder, och varken fångade stor bildkvalitet trots de innovativa fokusera tricks.

Visa mer

de sköt inte heller video, men Lytro retade alltid att liknande fokus-efter-skottet-funktioner var möjliga med rörliga bilder också—en Lytro-kamera som sköt video var oundviklig, verkligen. Nu är det här, och det är ett helt annat odjur än vad de flesta förväntade sig. Lytro har siktat på att fånga VR-video, och företaget tillkännager ett nytt end-to-end-system som radikalt kan förändra möjligheterna för både VR-tittare och filmskapare.

Lytro Immerge-systemet har utvecklats i ungefär ett och ett halvt år. Det är inte för genomsnittliga konsumenter; Det är den första Lytro-produkten avsedd för professionell videoproduktion. Och det är inte bara en VR-kamera rigg som består av video-shootin’ Lytros, antingen: Lytro VD Jason Rosenthal säger sensorerna och systemet utformades helt från början. Dess mittpunkt är Immerge-kameran, en fem-ringklot som fångar vad Lytro kallar en ”ljusfältvolym.”Till skillnad från befintliga VR-kamerariggar, som tar en statisk 360-graders bild, låter Immerge-kameran dig flytta lite inom scenen.

”Tänk dig att en kamera stannar stilla, men att kunna flytta huvudet och komma längre och närmare bort från ett objekt i en scen”, förklarar Rosenthal. ”Att ha reflektionen och ljusstrålarna justeras i enlighet därmed. Vad ljusfältvolymen representerar är att vi tätt fångar alla strålar i en given geometrisk volym, och sedan har vi byggt programvara som låter oss spela upp dessa strålar med mycket höga bildhastigheter och med hög upplösning. Det ger dig den perfekta rekreation av den verkliga världen du fånga.”

den förmågan ensam är ett överväldigande steg för VR-filmskapande, och Immerge-meddelandet är tidsbestämt för att förbereda nästa generation av VR-hårdvara. Positionsspårningsheadset som Oculus Rift, HTC Vive, Sony PlayStation VR är alla planerade för release nästa år. Rosenthal säger att Lytros video kommer att vara kompatibel med alla dessa plattformar.

fram till nu har de kommande positionsspårningsheadseten föreslagit ett stort, nytt steg framåt för uppslukande spel, men inte nödvändigtvis för video: Med en helt datorgenererad miljö kan spelare faktiskt röra sig inom den. Men när dess bilder ses med ett positionsspårningsheadset, lovar Immerge liknande rörelsefrihet för live-action-video—om än ett mycket begränsat rörelseområde i denna första generationens produkt.

”var och en av skikten representerar en mycket tätt packad våg av ljusfältsensorer”, förklarar Rosenthal och säger att i en enda rigg kommer det att finnas hundratals enskilda sensorer som fångar ljusfältvolymen. ”Det är en 360-graders ljusfältfångst. Och sedan genom att stapla fem ovanpå varandra, ger vi dig en fångst av hela ljusfältvolymen. Du får ungefär en kubikmeter område som du kommer att kunna fullt ut fånga strålarna inom det. Och sedan, från en konsumentupplevelse, kommer du att kunna flytta runt inom den volymen och få världen att reagera i enlighet därmed.

”vi kan och kommer att bygga större sfärer och andra konfigurationer för olika typer av fotograferingssituationer. Du kan gå utanför ringen, men vad du ser är typ av en gradvis försämring av upplevelsen. Du börjar märka luckor där vi kanske inte har bilddata för att helt återskapa scenen … det här är fortfarande saker som vi förfinar, men när du använder en iPhone och du kommer till slutet av rullningen får du den typen av gummibandupplevelse. Du kan föreställa dig något liknande i en VR-upplevelse, där du kommer till kanten av vad en kamera kan göra, din miljö sträcker sig lite.”

Lytro avser Immerge att vara ett heltäckande arbetsflödessystem. Glöm poppar en hög kapacitet SD-kort i denna sak: För att spara löjliga mängder höghastighetsdata med hög upplösning från de hundratals sensorerna när den fångas, kommer Immerge-systemet med sin egen stack av servrar. Rosenthal säger att var och en håller ungefär en timme med 360-graders ljusfältvideo.

eftersom det är för proffs är det utformat för att fungera med produktionsverktyg som Nuke, Final Cut Pro, Adobe Premiere och Avid Media Composer. Det kommer att finnas plug-ins för dessa program och annan branschstandardprogramvara som stöder import och arbete med Immerge video.

”just nu skapar innehållsskapare och filmskapare sina egna verktyg och teknik, eftersom inget av produktionsflödet från hårdvaran till programvaran faktiskt existerar”, säger Rosenthal. ”Och det suger bara upp en enorm tid och kostnad och energi som de hellre skulle investera i att berätta stora historier.”

det finns en annan stor skillnad i att styra VR-video. VR kamera riggar fånga video i alla riktningar, så besättningen kan inte stå på uppsättningen utan att vara en del av showen. På grund av detta är Immerge-systemet utformat för att fjärrstyras via en surfplatta eller telefon, så att kameramän kan göra justeringar utan att vara i scenen. Och kamerakontrollprogramvaran är utformad för att eliminera en enorm inlärningskurva, eftersom den är modellerad efter kontrollscheman för ARRI, RED och Sony-kameror på professionell nivå.

” det är väldigt mycket det här systemet som kommer att fånga, redigera och bearbeta en gång, men det kommer att göra och spela upp i vilken enhet som helst”, säger Rosenthal. ”Det här är något som vi har hört mycket spänning om från våra partners. Idag måste de gå igenom ett helt annat produktionsflöde beroende på vilken enhet de bygger för.”

dessa partners inkluderar några tunga hitters i VR-världen. Lytro säger att systemet utvecklades med input från erfarna VR-produktionsföretag Vrse, Wevr och Felix & Paul. Rosenthal säger att under de första månaderna av 2016 kommer du att kunna titta på innehåll som tagits av de produktionsföretag med Immerge-systemet.

håll inte andan när det gäller att kunna spela in ljusfält VR-video med din telefon eller en konsumentkamera. Immerge-systemet är kostnadseffektivt och skrymmande; Rosenthal säger att det är konstruerat för att monteras på ett stativ eller en dolly snarare än att användas som en handhållen enhet. Och det är för tungt för en drönare. Att köpa det kommer att kosta flera hundra tusen dollar när det är tillgängligt under första halvåret 2016. I filmvärlden hyrs mest professionell utrustning, och Rosenthal säger att hyresplaner för några tusen dollar om dagen är på gång.

allt detta är bara steg ett. Rosenthal säger att ännu fler fantastiska applikationer planeras för Immerges framtid: Förmågan att fokusera inom en scen baserad på ett headset eye-tracking, momentan 3D-modellering, och realistiskt blanda CG innehåll med live video.

”vi fångar allt djup och 3D-geometri i den verkliga världen, så att datorgenererade objekt sammansätts i det med rätt djup och rätt skuggning och skuggor och Belysning, att allt blir mycket lättare än det någonsin varit tidigare”, förklarar Rosenthal. ”Föreställ dig ett videospel där istället för att ha de konstiga rörelsefångade, CG-renderade människorna, kan du faktiskt ha fotorealistiska människor. Det börjar bli möjligt.”