Gå på mars med microsoft hololens

Forrige uke så det ut som om jeg gikk på Mars. Jeg brukte Microsofts nye HoloLens (bildet), som den kunngjorde som en del av Windows 10-introduksjonen, og Mars-demoen var en av få som selskapet tillot pressen å prøve å bruke en testversjon av headsettet og de holografiske utvidelsene til operativsystemet.

Jeg har brukt en rekke virtual reality og utvidet reality-headset de siste årene og brukt mye tid med Google Glass. På noen måter føles HoloLens som en forlengelse av hva noen av disse produktene prøver å gjøre; i andre føles det veldig annerledes.

"Velkommen til Windows Holographic, " sa prosjektleder Alex Kipman (over) da produktet ble avduket. Konseptet vil føre til mer oppslukende måter å spille på, nye måter å lære, samarbeide og skape, sa han.

Microsoft gikk veldig for ikke å kalle prosjektet virtuell virkelighet eller utvidet virkelighet, og i stedet brukte konseptet om dette å være hologrammer hele tiden. Det er litt forskjellig fra hologrammer du kanskje ser i filmene - i skjønnlitteratur trenger du vanligvis ikke et spesielt hodesett - men bildene det viser er tredimensjonale, så jeg antar at navnet gir mening.

Kipman snakket om de mange mulige bruksområdene for hologrammer i den virkelige verden, for eksempel at en ingeniør så instruksjoner i et overlegg på toppen av et objekt han eller hun prøvde å bygge eller reparere, en arkitekt som gikk gjennom et design, en kirurg som lærte en prosedyre, eller bare gjøre stuen om til et surrealistisk spillmiljø.

Microsoft kunngjorde faktisk to produkter - det ene er en serie APIer fokusert på menneskelig og holografisk forståelse kalt Windows Holographic som vil være en del av Windows 10, og det andre er en maskinvare som heter HoloLens. Microsoft ønsker helt klart at utviklere og potensielt andre maskinvareenhetsprodusenter skal lage applikasjonene og enhetene som vil gjøre dette til et virkelig marked, og spesifikt oppfordret til utviklere som jobber med Facebooks Oculus Rift, Magic Leap og Google Glass for å "lage hologrammer med oss." En sak er selvfølgelig at det er mange plattformer, og formålet med kunngjøringen er å prøve å starte prosessen med å få en kritisk masse utviklere bak Windows Holographic. For VR i det minste ser det ut til at Oculus har mest buzz akkurat nå.

HoloLens er et sett med gjennomsiktige holografiske linser med lyd og sensorer. Den har de normale CPU- og GPU-komponentene, så vel som det selskapet beskrev som en tredje holografisk prosesseringsenhet (HPU) som forstår bevegelser og romlig kartlegger verden rundt oss. Enheten kjører uten ledninger under behandling av terabyte med informasjon, sa Kipman, men selskapet har ennå ikke gitt ekte maskinvaredetaljer.

Selskapet gjennomførte en rekke interessante demoer på scenen, men jeg var mer interessert i å prøve det ut selv, og Microsoft satte opp fire demo-opplevelser for pressen i laboratoriet der HoloLens ble opprettet, som ligger i kjelleren i selskapets selskap besøkssenter.

En av disse var egentlig mer en demonstrasjon fra Microsoft av HoloStudio, et miljø for å lage hologrammer og eventuelt 3D-utskrift av dem (som vanligvis gjøres via en 3D-tjeneste, ettersom hologrammer vanligvis innebærer flere farger og er mer forseggjorte enn de fleste personlige 3D-skrivere kan tåle). Demoen på scenen innebar å lage en tilpasset quad-copter, og senere viste en mindre gruppe demo oss hvordan vi lager en personlig USB-nøkkel med bildet av en "space koala."

Miljøet så ut som et interessant designstudio, der du kan komme i gang ganske enkelt, men som faktisk har en god dybde. Det vil sannsynligvis ta meg litt tid å få tak i å bruke det, men jeg antar at folk som bruker produkter som Autodesk's 3D Studio Max eller lignende programvare vil synes det er ganske greit.

For de tre andre demonstrasjonene har vi på oss prototypeversjoner av HoloLens headset. I stedet for de relativt kompakte røde enhetene som ble vist på scenen, føltes disse virkelig som tekniske prototyper - maskinvaren som kjørte headsettet var i en egen eske du hadde på deg, og begge var bundet til en datamaskin. (Den ferdige maskinvaren ser ut til å være betydelig større enn Google Glass, men litt mindre enn Oculus Rift-headsettet, og det fungerer trådløst. Det er ikke så elegant som du kanskje vil, men det ser ut som et forbrukerprodukt.) Det ser ut til at headsettet har et antall kameraer og sensorer på forsiden og sidene. Du plasserer den på toppen av hodet (over brillene, hvis du bruker dem), stram det på plass, og da ser det ut til at enheten projiserer et bilde foran linsene i enheten, mens du fremdeles lar deg se omverdenen.

Den første av disse var av HoloBuilder, et program som lar deg lage, flytte og ødelegge det som ser ut til å være objekter i rommet rundt deg. Det føltes mye som Minecraft på måten du manipulerer små objekter, men med noen viktige forskjeller. Du kan legge virtuelle gjenstander på et bord i den fysiske verden, eller henge dem på en vegg, og det så virkelig ut som de holografiske bildene faktisk var ekte gjenstander som satt foran deg. I deler av demoen så det ut som om du kunne se ting på toppen av objekter i den virkelige verden; i andre tilfeller så det ut som om du skjærte gjennom bordet og så tingene under. Det virket ganske kult. Jeg kan lett forestille meg en fremtidig versjon som appellerer til Minecraft fans.

En annen demo viste hvordan du kan bruke den med en versjon av Skype for HoloLens. I denne demonstrasjonen var oppgaven å installere en lysbryter, mens du ble snakket gjennom prosessen av noen i den andre enden av samtalen som brukte den normale versjonen av Skype på en bærbar PC. Innenfor HoloLens kunne jeg se personen snakke i et vindu, som kunne flyte foran meg mens jeg så meg rundt eller ble festet til et bestemt sted. På sin side kunne han se hva jeg så gjennom HoloLens. Så han så verktøyene, bryteren og åpningen for lysbryteren. Visiret har mikrofoner og høyttalere i seg, så samtalen virket ganske standard. Personen på den andre siden av samtalen kunne trekke pekere til verktøyet han ønsket at jeg skulle bruke, og diagrammer som viser meg hvordan jeg skulle orientere bryteren og hvilke ledninger som gikk der. Da jeg var ferdig, slo de strømmen på igjen, og lysbryteren virket.

Nå, jeg er ikke sikker på at vi trenger dette til så enkle operasjoner, men du kan lett forestille deg at det blir brukt i en rekke industrielle applikasjoner, fra montering til reparasjon, der du vil ha håndfri instruksjoner. Ideen er ikke ny: Jeg har sett lignende ideer i en rekke "smarte briller" designet for industrielle brukere, for eksempel Epsons Moverio Glasses og Vuzix M-100-briller. Men utvidet virkelighet i industrielle applikasjoner gir mye mening, og muligheten til å få tegninger til å vises direkte over det du ser virker som et godt skritt fremover.

Men den mest interessante demoen var av Mars-overflaten, ved hjelp av en applikasjon utviklet med NASAs Jet Propulsion Laboratory (JPL) via data og bilder samlet av Curiosity Rover på planetens overflate. Målet er å bruke HoloLens for å hjelpe forskerne med å kontrollere roveren og bedre forstå det martiske landskapet. (JPL har tidligere vist å utforske verden i en demo ved hjelp av Oculus Rift, selv om jeg ikke har prøvd det.)

Som et første skritt etter at jeg hadde satt på meg brillene, kunne jeg oppleve å gå rundt i Dingo Gap-området i Mars, og det som imponerte meg var at når jeg gikk rundt i rommet, så det virkelig ut for meg som om jeg gikk på planetens overflate. Det var her det tredimensjonale aspektet ved hologrammer virkelig kom til live.

I det andre scenariet kan du utforske området kjent som John Klein, hvor du kan se deg rundt og til og med under objekter for å få en følelse av dimensjonaliteten i området. På et tidspunkt kunne du se gjennom visiret på en skjerm som viste de originale svart-hvite bildene, men de så veldig statiske ut. å se hva som så ut til å være det faktiske landskapet i farger og i 3D var en helt annen opplevelse. Det var som den virkelige verden hadde brutt gjennom til den kunstige den jeg gikk i.

Den siste delen av Mars-demoen innebar å utforske et veipunkt kjent som "The Kimberley" nær Mt. Sharp, der jeg kunne samarbeide med noen fra JPL, som også brukte HoloLens-teknologien. Han dukket opp på skjermen som en gulltilpasset avatar, lignet på en science-fiction fremmed fra 1950-tallet, og kunne snakke med meg om landskapet og hva vi så. Jeg var i stand til å plassere flagg på en del av landskapet for rover å bruke sin MastCam, som kan ta mer detaljerte bilder, og velge noen bergarter for roverens ChemCam, som sender en laser for å brenne en del av bergarter for å bestemme dens kjemiske sammensetning.

Dette var bare en demo, men du kan enkelt forestille deg hvordan et team av forskere fra NASA kunne bruke teknologien for å bedre forstå overflaten på Mars og for å kontrollere roveren for å utnytte den best mulig. Og selvfølgelig kan du forestille deg noen veldig oppslukende opplevelser.

Totalt sett var HoloLens en av de mest imponerende demonstrasjonene jeg har sett. Andre headset med augmented-reality har vært ganske interessante, og jeg ser absolutt potensialet deres i industrielle applikasjoner, og jeg har sett et par veldig oppslukende spill i Oculus Rift. Men den holografiske effekten - ideen om at alt vises i 3D og at du faktisk kan bevege deg rundt i verden - innebygd i HoloLens føltes som noe veldig nytt. Vi må vente med å prøve det endelige visiret og virkelige applikasjoner for å se om dette konseptet virkelig er klart for et mainstream-marked, men det er absolutt imponerende.