Microsoft visar på nya HoloLens Demos på Build Conference

Microsofts kommande HoloLens-headset är den första high-end-utvidgade verkligheten som visats för allmänheten. Tyvärr har Microsoft varit så trångt att vi inte vet mycket om det.

Idag, på Microsofts Build Developer Conference i San Francisco, fick vi en annan spännande titt på tekniken. Demon själv är skinnande men inte mycket informativ. Vi kan dock välja några viktiga detaljer genom att läsa mellan linjerna. I det här fallet, vad Microsoft valde att inte visa är mer informativt än vad de gjorde.

Demo

Flera av HoloLens ingenjörer kom på scen för att visa upp några av de nya demoer som de har utvecklat för hårdvaran. En demonstration sker som en rekreation av en ingenjörs deprimerande gles lägenhet, och täcker väggarna och golvet med virtuella appar och leksaker. En annan leder till att vissa läkare visar en modell av en mänsklig kropp och tar sedan den ifrån varandra. Slutligen växer en kitrobot en uttrycksfull, virtuell överkropp och utvecklar en stor statuspanel, så att den kan tweaked i realtid.

Djävulen, detaljerna

Hittills, så imponerande - men många av mina första frågor om HoloLens fem frågor om Microsofts "Project HoloLens" Fem frågor om Microsofts "Project HoloLens" Microsofts nya Augmented Reality-headset är mycket spännande - men kan de lösa de grundläggande problemen med AR ? Läs mer förblir obesvarad. Så låt oss se lite närmare.

Ocklusion

Känner demoen lite till dig? Titta noggrant på kamerans rörelser. Det är inte bara den vanliga trade showen obekvämd. Titta på demo igen och leta efter stunder där en människa passerar framför ett virtuellt objekt.

Det här kallas ocklusion, och det är ett svårt problem i ökad verklighet. För att göra detta fenomen korrekt måste HoloLens kartlägga världen snabbt och noggrant för att skära personens siluett ut ur den virtuella bilden. Annars har du en djupkonflikt: din stereosynt kommer att berätta att det virtuella objektet ligger bakom personen, men det kommer att visas ovanpå dem. Som vi har lärt oss av den virtuella verkligheten, stör dessa slags konflikter och förstör illusionen att föremålen du samverkar med är materiella delar av världen.

Demon går till betydande längder för att förhindra detta. Du kan se kamerans operatör reagera när en av personerna på scenen flyttar mot ett virtuellt objekt, flyttar för att stoppa dem från överlappning. Hela demoen är noggrant koreograferad. Att komma ut ur stolen i den första demonstrationen gör att killen på scenen stiger framför en virtuell robot - och bekvämt är kameran spetsad någon annanstans vid exakt det ögonblicket.

De förstöra det bara några gånger. Under roboten demo, passerar roboten kort före några virtuella prickar på golvet, och en av presentatörerna kliver på dem. I båda fallen finns det en djupkonflikt: du fortsätter att se de virtuella prickarna genom de verkliga objekten, vilket innebär att Microsoft ännu inte har en lösning på detta problem.

Vi kan se mer bevis på detta i samma demo, när en visualisering visas på headsetets miljökarta. Om du ramar för bildrutan och tittar noga kan du se att kartan är felaktig på flera sätt: bordet är på en upphöjd plattform som blir en vag bulge i kartan. Roboten är likaledes synlig i kartan, men endast som en liten klump. Kanterna på skrivbordet saknas. Du kan noga klandra dessa problem på den begränsade upplösningen hos Kinect-djupgivaren i headsetet. Hur som helst, det finns bara inte tillräckligt med precision för att korrekt inkludera virtuella objekt.

Låt oss vara tydliga här: det här kan vara en showstopper. Syftet med HoloLens är att seamlessly kombinera verkliga och virtuella objekt på ett övertygande sätt. O Occlusion är en nödvändig del av illusionen. Occlusion är en sådan kraftfull djupgående cue att lägga till en enda vit linje i en video kan skapa en kraftfull 3D-effekt av sig själv.

Microsoft är tydligt medveten om detta. De visar ocklusion i deras reklammaterial. Men från deras demos ser det inte ut att de faktiskt kan göra det. Om Microsoft inte kan lösa detta problem har de ingen produkt. Användare lever inte i noggrant koreograferade demos i tomma hem. De tolererar inte konstanta, nedsänkande återgivningsfel. Jag är ärligt förvånad över att mer av tekniken inte pratar om detta problem. Jag är väldigt nyfiken om Microsoft har någon plan att lösa detta problem.

Användargränssnitt

Varje gång jag tittar på en video som visar upp HoloLens gränssnitt, är frasen som fortsätter att gå igenom mitt huvud “Ska vi verkligen göra det igen?”

Med varje ny datorplattform, både PC och smartphones, går vi igenom en cykel med dålig användargränssnitt innan vi räknar ut det. Problemet är att de dåliga användargränserna är dåliga på exakt samma sätt, och de är dåliga på det sättet att HoloLens gränssnitt är dåligt. Jag önskar, för en gång kunde vi känna igen mönstret och hoppa över den goda delen. Här är vad HoloLens (och varje ny plattform) gör fel:

• Först försöker de återskapa gamla paradigmer istället för att skapa nya. Tänk på de gamla Treo-smartphonesna som byggdes kring ett fysiskt tangentbord och en musemulerande stylus. HoloLens är exakt densamma, med ditt huvud att emulera en mus och ditt finger klickar. Heck, vid en tidpunkt ingenjören “drar” ett fönster genom att låsa det på huvudet, något som Oculus VR Best Practices-guiden uttryckligen varnar mot. HoloLens är inte en dator, och försöker använda en PC-gränssnittet kommer inte att fungera.
• För det andra får de inslagna i de glänsande delarna av gränssnittet och skapa utsmyckade, oanvända fluffar. Kommer du ihåg Clippy? Microsoft Bob? Faux läder på den gamla iOS noterar app? Det här är värdelös visuell röran. Den virtuella hunden och fiskskålen och roboten är exakt samma sak. Hur många gånger måste vi göra detta innan vi inser att minimalism är den enda bra ideen?

Medan vi är på det, “hologram” själva är en röra visuellt. De kan inte bestämma om de är rena rutor eller goofiga, tecknade klotter. UI-elementen är alltför stora, vilket kräver omfattande gester att använda, fram till och med fysiskt gångavstånd, vilket är dålig design av många anledningar.

Om det verkar som om jag är upprörd om det här beror det på att nedsänkta användargränssnitt kommer att bli riktigt, riktigt cool någonsin. HoloLens gränssnitt som hittills visats är en komplett röra, och det är synd. Ett bra användargränssnitt är skillnaden mellan Treo och iPhone - mellan en IBM mainframe och den ursprungliga mus-och-tangentbord-datorn. Det är skillnaden mellan en leksak för nördar och en världsförändrad innovation.

Formfaktor

Det finns en stor del goda nyheter. Microsoft tog med “hundratals” av HoloLens enheter till showen och visar dem till deltagare. Förra gången Microsoft gjorde demo, var folk fastade i skrymmande trådbundna headset. Headseten som användes på scenen var rekvisita som bara kunde visa en svartvitt bild med låg upplösning. Dock anger presentatören tydligt att headseten är “gillar bara de som du såg på scenen idag.” Med andra ord har Microsoft framgångsrikt miniatyriserat HoloLens hårdvara för att passa i en bärbar formfaktor, vilket är bra nyheter.

Här är en utvecklares erfarenhet av den nya hårdvaran:

“Jag gick "på byggarbetsplatsen" och de överlagde ritningarna på väggen. Då kunde jag se hur en dörr skulle se ut och märka att en stråle var i vägen. Vi flyttade dörren bort och tillsatte sedan ett lager med elektrisk och rörmokeri och såg att ett rör var nu i vägen. Jag tittade och klickade på luften på röret och lämnade en röstanteckning för rörmokaren för att flytta röret bort.

Sedan kom jag tillbaka till rörmokarens roll och hämtade min anteckning (den hängde där), tittade och klickade och hörde min egen inspelade röst.

Att ha på sig enheten behöver lite vänja sig. Det var inte mycket väljusterat och pressat lite på min näsa. Men jag tror att jag kan anpassa det bättre i tid.

Det holografiska området är mindre omfattande än jag trodde. Det är en rektangel framför dina ögon, men om du har en bra sidosyn (som jag har) är det lite oroande eftersom hologrammet kommer att beskäras när du flyttar huvudet.

Sammantaget är det extremt imponerande och jag kan inte vänta med att utveckla för det.”

Medan författaren noterar att enheten fortfarande har ett lågt synfält verkar han imponerad av hårdvaruövergripande, vilket är ett lovande tecken. Så småningom kommer AR att bli en kraftfullare och flexibel ersättning för VR - som redan är en fantastisk teknik Varför Virtual Reality Technology kommer att blåsa ditt sinne om 5 år Varför Virtual Reality Technology kommer att blåsa ditt sinne om 5 år Framtiden för virtuell verklighet inkluderar huvud-, ögon- och expressionsspårning, simulerad beröring och mycket mer. Dessa fantastiska tekniker kommer att vara tillgängliga för dig om 5 år eller mindre. Läs mer . Den stora frågan är hur långt vi är?

Utvecklarstöd

Även om det inte nämndes i meddelandevideoen meddelade Microsoft också att via sitt partnerskap med Unity kommer det också att finnas fullt stöd för HoloLens i Unity, ett av de vanligaste verktygen som används för indiespelutveckling. Stödet kommer att innefatta förmågan att göra genom HoloLens, och att få inmatning från enheten på olika sätt. Både Unity Free och Unity Pro kommer att ha gratis HoloLens support. Medan integrationen inte är färdig ännu, ger Microsoft redan korta kurser på Build-konferensen med hjälp av prototypen Unity-integreringar, för att ge utvecklare en första titt på vad som kodar för AR kommer att vara som.

Detta är ett välkommet men inte ett överraskande drag. Någon ny plattform bor eller dör på kvaliteten på lanseringsinnehållet, och HoloLens blir inget undantag. Dessutom har Microsoft alltid varit engagerad i utvecklarrelationer.

Prototyp feber

HoloLens tummer långsamt mot kommersiell verklighet. Jag håller djupa reservationer om några av begränsningarna i hårdvaran, men enheten är otänkbart cool 8 Real-World-användningar för Microsoft HoloLens 8 Real-World-användningar för Microsoft HoloLens Microsofts HoloLens är coolt men vad ska du faktiskt använda den till? Vi slår ner de mest spännande möjligheterna. Läs mer, och någonting som det kommer en dag att vara mycket användbart. Är du upphetsad för HoloLens? Fick du chansen att prova på konferensen? Vill bara ha en virtuell fiskskål? Låt oss veta i kommentarerna!

Utforska mer om: Microsoft, Virtual Reality, Windows 10.