Gå på mars med microsoft hololens

Sidste uge så det ud til, at jeg gik på Mars. Jeg brugte Microsofts nye HoloLens (på billedet), som den annoncerede som en del af Windows 10-introduktionen, og Mars-demoen var en af ​​få, at virksomheden lod pressen prøve at bruge en testversion af headsettet og de holografiske udvidelser til operativsystemet.

Jeg har brugt en række virtual reality og forstærket reality headset i de sidste par år og brugt meget tid med Google Glass. På nogle måder føles HoloLens som en udvidelse af, hvad nogle af disse produkter forsøger at gøre; i andre føles det meget anderledes.

"Velkommen til Windows Holographic, " sagde projektleder Alex Kipman (ovenfor), da produktet blev afsløret. Konceptet vil føre til mere fordybende måder at spille på, nye måder at lære, samarbejde og skabe, sagde han.

Microsoft gik meget for ikke at kalde projektet virtual reality eller augmented reality, og brugte i stedet konceptet om at dette var hologrammer konstant. Det er lidt anderledes end hologrammer, du måske kan se i filmene - i fiktion behøver du normalt ikke et specielt headset - men billederne, det viser, er tredimensionelle, så jeg gætter på, at navnet giver mening.

Kipman talte om de mange mulige anvendelser til hologrammer i den virkelige verden, såsom en ingeniør, der så instruktioner i et overlay oven på et objekt, han eller hun forsøgte at bygge eller reparere, en arkitekt, der gik gennem et design, en kirurg, der lærte en procedure, eller bare forvandle stuen til et surrealistisk spilmiljø.

Microsoft annoncerede faktisk to produkter - det ene er en række API'er, der fokuserer på menneskelig og holografisk forståelse kaldet Windows Holographic, der vil være en del af Windows 10, og det andet er et stykke hardware kaldet HoloLens. Microsoft ønsker klart, at udviklere og potentielt andre hardwareenhedsproducenter skal oprette applikationer og enheder, der gør dette til et reelt marked, og specifikt opfordret til udviklere, der arbejder på Facebooks Oculus Rift, Magic Leap og Google Glass for at "skabe hologrammer med os." Et spørgsmål er naturligvis, at der er masser af platforme, og formålet med meddelelsen er at prøve at starte processen med at få en kritisk masse udviklere bag Windows Holographic. I det mindste for VR ser det ud til, at Oculus har det mest brus lige nu.

HoloLens er et sæt gennemskinnelige holografiske linser med lyd og sensorer. Det har de normale CPU- og GPU-komponenter såvel som det, virksomheden har beskrevet som en tredje holografisk processorenhed (HPU), der forstår bevægelser og rumligt kortlægger verden omkring os. Enheden kører uden ledninger under behandling af terabyte med information, sagde Kipman, men virksomheden har endnu ikke givet ægte hardwareoplysninger.

Virksomheden lavede en række interessante demoer på scenen, men jeg var mere interesseret i at afprøve det selv, og Microsoft satte op fire demo-oplevelser til pressen i laboratoriet, hvor HoloLens blev oprettet, beliggende i kælderen i virksomhedens besøgende center.

En af disse var virkelig mere en demonstration fra Microsoft af HoloStudio, et miljø til at oprette hologrammer og eventuelt 3D-udskrivning af dem (hvilket normalt udføres via en 3D-tjeneste, da hologrammer typisk involverer flere farver og er mere detaljerede end de fleste personlige 3D-printere kan håndtere). Demonstrationen på scenen involverede oprettelse af en tilpasset quad-copter, og senere viste en mindre gruppe demo os, hvordan man laver en personlig USB-nøgle med billedet af en "space koala."

Miljøet lignede et interessant designstudie, hvor man kan komme i gang temmelig let, men som faktisk har en god dybde. Det vil sandsynligvis tage mig nogen tid at få fat på at bruge det, men jeg gætter på, at folk, der bruger produkter som Autodesk's 3D Studio Max eller lignende software, ville synes det var ret ligetil.

For de andre tre demoer har vi taget prototypeversioner af HoloLens-headset. I stedet for de relativt kompakte røde enheder, der blev vist på scenen, føltes disse virkelig som tekniske prototyper - hardware, der kørte headsettet, var i en separat kasse, du havde på, og begge var bundet til en computer. (Den færdige hardware ser ud til at være betydeligt større end Google Glass, men en smule mindre end Oculus Rift-headsettet, og det fungerer trådløst. Det er ikke så slankt, som du måske kan lide, men det ligner et forbrugerprodukt.) Headset ser ud til at have et antal kameraer og sensorer på forsiden og siderne. Du placerer det på toppen af ​​dit hoved (over dine briller, hvis du bærer dem), stram det på plads, og så ser det ud til, at enheden projicerer et billede foran linserne i enheden, mens du stadig lader dig se omverdenen.

Den første af disse var af HoloBuilder, et program, der lader dig oprette, flytte og ødelægge det, der ser ud til at være genstande i rummet omkring dig. Det føltes meget som Minecraft på den måde, du manipulerer små objekter, men med nogle centrale forskelle. Du kunne lægge virtuelle genstande på et bord i den fysiske verden eller hænge dem på en væg, og det så virkelig ud som om de holografiske billeder faktisk var virkelige genstande, der sad foran dig. I dele af demoen så det ud som om du kunne se ting oven på objekter i den virkelige verden; i andre tilfælde så det ud som om du skar gennem bordet og så tingene nedenunder. Det virkede ret cool. Jeg kan let forestille mig en fremtidig version, der appellerer til Minecraft fans.

En anden demo viste, hvordan du kan bruge den med en version af Skype til HoloLens. I denne demo var opgaven at installere en lysafbryder, mens man blev talt gennem processen af ​​nogen i den anden ende af samtalen, der brugte den normale version af Skype på en bærbar computer. Inden i HoloLens kunne jeg se den person, der talte i et vindue, som kunne flyde foran mig, mens jeg kiggede rundt eller blev fastgjort til et bestemt sted. Til gengæld kunne han se, hvad jeg så gennem HoloLens. Så han så værktøjerne, kontakten og åbningen til lysafbryderen. Visiret har mikrofoner og højttalere i sig, så samtalen virkede temmelig standard. Personen på den anden side af samtalen var i stand til at trække henvisninger til det værktøj, han ville have mig til at bruge, og diagrammer, der viste mig, hvordan man skulle orientere kontakten, og hvilke ledninger der gik hvor. Da jeg var færdig, tændte de for strømmen, og lysafbryderen virkede.

Nu er jeg ikke sikker på, at vi har brug for dette til så enkle operationer, men du kan nemt forestille dig, at det bruges i en række industrielle applikationer, fra samling til reparation, hvor du vil have håndfri instruktioner. Ideen er ikke ny: Jeg har set lignende ideer i et antal "smarte briller" designet til industrielle brugere, såsom Epsons Moverio-briller og Vuzix's M-100-briller. Men den øgede virkelighed i industrielle applikationer giver meget mening, og evnen til at få tegninger vises direkte over det, du ser, virker som et godt skridt fremad.

Men den mest interessante demo var af Marsoverfladen ved hjælp af en applikation udviklet med NASAs Jet Propulsion Laboratory (JPL) via data og billeder indsamlet af Curiosity Rover på planetens overflade. Målet er at bruge HoloLens til at hjælpe forskerne med at kontrollere rover og bedre forstå det Martiske landskab. (JPL viste tidligere at udforske verden i en demo ved hjælp af Oculus Rift, selvom jeg ikke har prøvet det.)

Som et første skridt, efter at jeg tog på brillerne, kunne jeg opleve at gå rundt i Dingo Gap-området i Mars, og hvad der imponerede mig var, at da jeg gik rundt i lokalet, så det virkelig ud til mig, som om jeg gik på planetens overflade. Det var her, at det tredimensionelle aspekt af hologrammer virkelig kom til live.

I det andet scenarie kunne du udforske området kendt som John Klein, hvor du kunne se dig omkring og endda under objekter for at få en fornemmelse af områdets dimensionalitet. På et tidspunkt kunne du se gennem visiret på en skærm, der viste de originale sort-hvide billeder, men de så meget statiske ud; at se, hvad der syntes at være det egentlige landskab i farve og i 3D, var en helt anden oplevelse. Det var som om den virkelige verden var bragt igennem til den kunstige, som jeg gik i.

Den sidste del af Mars-demoen involverede udforskning af et waypoint kendt som "The Kimberley" nær Mt. Sharp, hvor jeg var i stand til at samarbejde med nogen fra JPL, der også brugte HoloLens teknologi. Han optrådte på skærmen som en guld-egnet avatar, lignede en science-fiction fremmede fra 1950'erne og var i stand til at tale med mig om landskabet og hvad vi så. Jeg var i stand til at placere flag på et afsnit af landskabet for rover at bruge dets MastCam, som kan tage mere detaljerede billeder, og vælge nogle klipper til roverens ChemCam, der sender en laser til at brænde et afsnit af klipper for at bestemme dets kemiske sammensætning.

Dette var bare en demo, men du kan nemt forestille dig, hvordan et team af NASA-videnskabsfolk kunne bruge teknologien til bedre at forstå Marsoverfladen og til at kontrollere roveren for at udnytte den bedst muligt. Og selvfølgelig kan du forestille dig nogle meget fordybende oplevelser.

Alt i alt var HoloLens en af ​​de mest imponerende demonstrationer, jeg har set. Andre headset med augmented reality har været ret interessante, og jeg ser bestemt deres potentiale i industrielle applikationer, og jeg har set et par meget fordybende spil i Oculus Rift. Men den holografiske virkning - ideen om, at alt vises i 3D, og ​​at du faktisk kan bevæge dig rundt i verden - indlejret i HoloLens, føltes som noget meget nyt. Vi bliver nødt til at vente med at prøve det endelige visir og reelle applikationer for at se, om dette koncept virkelig er klar til et mainstream-marked, men det er bestemt imponerende.