Möt Googles Next Generation Virtual Reality Platform

Igår, på Googles IO-konferens, visade Google framtiden för den virtuella verkligheten - och det är inte alla bestående av kartong. Det här är överraskande, eftersom Googles tidigare satsningar i rymden har varit, ja, lite halvhjärtat.

Får mig inte fel: Google Card, ett minimalistiskt VR-skal för smartphones är otänkbart snyggt - men dess begränsningar är tydliga. Det är en av Googles kända 20% -projekt - en arbetskraft av kärlek av en handfull anställda, och det visar. Kartong har ett snävt synfält, rörelseoskärpa, ingen positionsspårning och sjukdomsfördröjning. Det är ett recept på dålig nedsänkning och VR-sjukdom.

Google Card har inte ett huvudband, och det är inte en överblick. Utan ett huvudband måste användarna hålla det upp till sina ansikten och tvinga dem att vända sig med sina torsos. Det saktar dem ner med en märkbar fördröjning. Och det är okej - vi pratar om ett headset av kartong. Det är fortfarande ett värdefullt verktyg för att få folk till VR, men det är inte en spelväxlare.

Allt som börjar förändras. Google sysselsätter en icke försumbar del av världens hjärnkraft, och vid årets IO-konferens började man böja lite av det som finns i VR-rymden. Meddelandena är trefaldiga.

• För det första finns det en betydande förfining av kartonghuvudet.
• För det andra finns det en VR-kamera som är utformad för att skapa en sömlös 3D-upplevelse.
• Slutligen finns det Tango VR, en ny VR / AR-plattform byggd kring Googles gåtfulla 3D-sensing-tablett.

Redo? Låt oss gräva in.

New Cardboard Headset

Den nya designen för Google Cardboard är en klar förbättring. Det lägger till stöd för större telefoner (upp till sex inches), inkluderar iOS-support och lägger till en liten fysisk hävarm på sidan av headsetet för inmatning. Det är också utformat för att vara lättare att bygga och styra.

Bortsett från det är det ganska mycket samma historia: små linser, ett kartongskal och mycket motionssjuka om du använder den för länge. Det här är en markant förbättring, men vi ligger ganska nära gränsen på kartongskal, och Google har ett innehavsmönster tills de kan börja bygga något mer användbart.

VR-kamera

Den nya kameran som utvecklats i samband med GoPro kallas Hoppa. Den består av 16 GoPro-kameror (total kostnad, cirka $ 10 000), ordnad på ett cirkulärt plastfäste. Hittills, så vardagliga: liknande fästen för att producera VR-video Samsung och Oculus tillkännager "Gear VR" Mobile VR-plattformen Samsung och Oculus tillkännager "Gear VR" Mobile VR-plattformen Samsung chefer och Oculus CTO John Carmack gick upp på scenen för att äntligen prata om en hemlighetsprojekt som de har jobbat bort på för det senaste året som heter "Gear VR." Read More finns redan på marknaden. Där det blir riktigt coolt är den så kallade “Hoppa Assembler,” en mjukvara som skapats av Google för att skära nedbrytande VR-artefakter.

För att förstå denna programvara måste du förstå det problem som det försöker lösa. Oculus 'John Carmack talar om problemen med 3D panoramabildning.

“Vad de slutar göra är att du har skivor tagna från flera kameror, så rakt framåt är det rätt stereo [...] och sedan här är det rätt för denna [vinkel]. Men det betyder att om du tittar på vad som var rätt för ögonen här, men du tittar ut ur hörnet av ditt öga här, [...] det är inte rätt skillnad för ögonen. Och då, ännu värre, om du [rullar huvudet], blir det alldeles dåligt, för det är upprättat bara för ögonen rakt framåt. “

Hoppa är ett sätt att åtgärda detta. Google använder maskinsynsteknologi för att jämföra bilderna tillsammans och räkna ut 3D-geometrin i scenen. Programvaran använder denna rekonstruktion för att skapa ett rent, stygnlöst perspektiv, med perfekt stereo från alla vinklar.

Google planerar att tillåta det här innehållet att ses på YouTube med hjälp av Google Cardboard - men det finns inget ord ännu på stöd för mer sofistikerade VR-headset som Oculus Rift.

Det är redan en stor vinst. Ändå kan tekniken användas för att göra mer - mycket mer. Under demonstrationen visar Google den virtuella kameran som rör sig inuti ringen och uppdaterar perspektivet smidigt. Just nu bakar Google 3D-data till stereo panorama. Illusionen kommer att fungera från vilken som helst rotation, men kommer att bryta ner om du rullar huvudet eller rör dig runt.

I framtiden kan Google dock visa dig den rekonstruerade 3D-geometrin direkt, vilket ger dig en fullständig VR-videoupplevelse. Kanske en som stöder varje rotationsaxel, liksom en signifikant grad av positionsspårning. Detta är ännu inte genomfört, men det är en tantalizing möjlighet för ett stort steg framåt i VR-video.

Tango VR

Google Kart har många problem, men även det bästa exemplet på mobilen VR, Samsungs Gear VR-headset Samsung och Oculus tillkännager "Gear VR" Mobile VR-plattformen Samsung och Oculus tillkännager "Gear VR" Mobile VR-plattformen Samsung-chefer och Oculus CTO John Carmack gick upp på scenen för att äntligen tala om ett hemlighetsprojekt som de har jobbat bort på för det senaste året som heter "Gear VR." Läs mer, har fortfarande en stor nackdel - ingen positionsspårning.

Rotationsspårning är ganska enkel. Du kan använda gyroskop för att upptäcka hur mycket ditt huvud vänder, och jordens magnetpoler ger en bekväm referens för att förhindra drift. Detta uppgår till ett par dollar för sensorer, som redan är förinstallerade i de flesta smartphones.

Positionsspårning är en helt annan platta av poutine. Olika företag har tacklat problemet på olika sätt. Oculus använder en extern kamera som är parad för att spåra prickar på headsetet, så att det kan spåras med maskinsyn.

HTC och Valve gör ett annat tillvägagångssätt för deras Vive-headset. Valve & HTC Meddela nytt VR-headset för leverans till jul 2015 Valve & HTC Meddela nytt VR-headset för leverans till jul 2015 Valves nya VR-headset är det bästa världen någonsin har sett. Oculus står en chans? Läs mer, med många “Fyr” basstationer med roterande trummor för att svepa hela rummet med laserljus. Spårarna på headsetet och styrenheterna är täckta i ljussensorer, som kan upptäcka (med extremt exakt timing) när de slås av den lasern. Genom att kontrollera den exakta tidpunkten och utföra några grundläggande geometriska beräkningar kan tre sensorer samarbeta för att bestämma enhetens exakta position i rymden relativt basstationerna.

Båda dessa tillvägagångssätt har fördelar, och vi kan debattera deras relativa meriter. Båda har dock en nackdel som blir avgörande i mobilvärlden: du behöver extern hårdvara för att spåra headsetet.

Det är naturligtvis ett problem för ett mobilt headset. Hela punkten med mobil VR är att befria dig från kablar och infrastruktur som behövs för avancerade skrivbordserfarenheter. Så vad kan vi göra åt det? Svaret, åtminstone enligt Google, är att använda en kallad teknik “Visual SLAM” (Simultaneous Location och Mapping) i kombination med en djupgivare, för att spåra poäng i världen. Med detta skapas ett 3D-nät av miljön för att bestämma var enheten ligger i rymden i förhållande till startpositionen.

Google har redan skickat några tidiga hårdvaror med den här funktionaliteten i form av Tango-tabellen Google vill lägga en 3D-kamera på din smartphone - Det här är varför Google vill lägga en 3D-kamera på din smartphone - Det här är varför Googles projekttango tar med sig 3d sensorer till mobila enheter. Här är vad vi vet hittills. Läs mer, som vi har behandlat här tidigare. Google tycker att sensorn kan revolutionera hur vi interagerar med enheter. Som utvecklare sätter Johnny Lee den i videon nedan,

“I stället för att tvinga hela våra liv i denna mycket lilla rektangel [av en smarttelefons skärm] utvecklar Project Tango tekniken för att hjälpa allt och alla att förstå exakt var de är. Var som helst. Inte bara där det finns bra GPS-täckning, bra WIFI-täckning [...] De enheter vi använder kommer att dela vår förståelse av rymden.”

Denna teknik har spännande applikationer i virtuell verklighet, och nyligen har Google börjat visa dem.

Det här är imponerande, men det är också tidiga dagar. Valve använder en hyllehölster för sin VR-upplevelse tillsammans med ärliga NERF-vapen. Tablet själv är inte konstruerat för VR - det är tungt, det är hög latens, och ergonomin är hemsk.

Med det sagt kan det vara den mest imponerande mobila VR-demo världen någonsin har sett - strikt på grund av den positionella spårningen det ger. Headsetet gör att du kan röra sig fritt genom ett inomhusutrymme (förutsatt att det finns tillräckligt med ljus för att kameran ska kunna se). Det öppnar några spännande möjligheter för blandverklighetstillämpningar.

Många av nackdelarna kommer att förbättras snart: Google har också meddelat att det samarbetar med processorns tillverkare Qualcomm, och har skapat en smartphone som innehåller hela projektet Tango processor-suite, plus hårdvaran som stöder den. Denna smartphone kommer att vara referensdesign för framtida Tango-kompatibel smartphone, vilket borde vara mycket bättre lämpad för VR-applikationer.

När det gäller positionsspårningen ser spårningen ut smidig. Men det som ser bra ut på en datorskärm kan känna sig annorlunda när du är inne i den. Microsofts HoloLens fem frågor om Microsofts "Project HoloLens" Fem frågor om Microsofts "Project HoloLens" Microsofts nya headset för Augmented Reality är mycket spännande - men kan de lösa de grundläggande problemen med AR? Read More använder en liknande teknik för att positionera sig själv och har märkbara glitches i sin stabilitet.

I hans presentation nämner Johnny Lee att spårningen, under goda förhållanden, är korrekt “några millimeter eller en centimeter”. Det är imponerande, men inte helt upp till sub-millimeterstandarden för virtuell verklighet. Det låter som om det kan ta en annan generation eller två innan spårningen är tillräckligt bra för att ge tethered stationär VR en körning för sina pengar.

Framtiden, Drivs av Google

Om du tar allt detta tillsammans kan du börja se formen av något intressant som kommer fram om två eller tre år. Tänk dig ett ögonblick, att några nya smartphones kommer med Tango-hårdvara, en VR-hölster och en version av Android optimerad för låg latens VR. I den framtiden skulle det inte vara ovanligt att se människor med självsäker strutning ner på gatan, telefonlimmad i ansiktet, nedsänkt i sin egen förstärkta verklighet.

I den framtiden är VR-kameror överallt, och du kan på ett ögonblick hoppa in i VR-video från allt på jorden. VR är billigt, VR är allestädes närvarande, och VR är en konsekvent bekväm, uppslukande upplevelse, tillgänglig för miljontals människor. Det är drömmen, och Google har väldigt nära till verkligheten.

Vad tror du? Är du intresserad av VR-video? Kan du se dig själv köpa ett mobilt VR-headset? Låt oss veta i kommentarerna!

Utforska mer om: Google, spela in video, virtuell verklighet, slitstark teknik.