Hvorfor NASA vil have Microsofts HoloLens i rummet

Eksplosionen i juni af SpaceX-raketten, der var på vej til den internationale rumstation, føltes som et slag i maven for Jeff Norris, projektlederen for to HoloLens-projekter, som NASA arbejder på ved sit Jet Propulsion Laboratory (JPL) i Pasadena, Californien. Blandt genstandene ombord var to HoloLens-headsets - Microsofts kommende augmented-reality-gadgets.





Astronaut Luca Parmitano bruger HoloLens

Astronaut Luca Parmitano bruger HoloLens ved den undersøiske Aquarius Reef Base, som er placeret under Florida Keys.

Men inden for et par uger, siger Norris, havde hans team hos NASA og hans kolleger hos Microsoft ny HoloLens-hardware, som de certificerede til opsendelse i rummet. Det er nu planlagt til at ske den 3. december som en del af en kommerciel lastopsendelse af flyselskabet Orbital Sciences for at forsyne rumstationen.

Her på jorden kan augmented-reality-enheder i sidste ende blive brugt til en række ting som at spille spil, der blander digitale 3-D-væsner med virkeligheden eller at tale med eksterne venner, som om de er i din stue. Men NASA ser en række praktiske – og muligvis tidsbesparende – anvendelser af teknologien i rummet.



NASA håber at bruge HoloLens ombord på rumstationen for at give astronauter mulighed for at arbejde sammen med en fjernekspert, der kan se, hvad astronauten ser og hjælpe med ukendte opgaver. Enheden kan også fungere som en augmented-reality instruktionsmanual, der f.eks. bruger 3D-billeder til at vise en astronaut, hvor han skal placere noget udstyr, eller hvilket håndtag man skal dreje. (Microsoft CEO Satya Nadella sagde for nylig i en interview at HoloLens vil være tilgængelig for udviklere inden for det næste år; tidspunktet for en forbrugerudgivelse er stadig ukendt.)

I slutningen af ​​juli og begyndelsen af ​​august forsøgte NASA-astronauter at bruge HoloLens til at hjælpe med flere opgaver på Aquarius Reef Base.

Norris, som også er leder af Ops Lab hos JPL, siger, at NASA også arbejder på andre applikationer til HoloLens, som at bruge augmented reality til lagerstyring. Det er tilsyneladende en stor udfordring at holde styr på, hvor tingene er, og hvordan man finder dem på rumstationen, selvom objekter har stregkoder på sig og er organiseret med en database. NASA har lavet en prototype på en app, der kan bruges til at genkende et objekt og vise HoloLens-brugeren en sti at følge, der fører til, hvor objektet skal opbevares, siger Norris.



I mellemtiden, for at få en fornemmelse af, hvordan det vil være at bruge HoloLens på rumstationen, eksperimenterede NASA med HoloLens på Aquarius undervandsforskningsstation ud for kysten af ​​Key Largo, Florida, i slutningen af ​​juli og begyndelsen af ​​august. Astronauter brugte enheden til opgaver som at tjekke nødåndingsudstyr ved at gennemgå en række trin lige fra at dreje ventiler til at finde og tilslutte udstyr og opsætte udstyr til at understøtte en undersøisk robot.

I begge tilfælde hjalp en ekspert, der sad i et fjernbetjeningscenter på tørt land, ved at bruge et Skype-program Microsoft bygget til HoloLens (se Reality Check: Comparing HoloLens og Magic Leap ), hvor et fremadvendt kamera på HoloLens lod eksperten se hvad astronauten så. Hvis det var nødvendigt, kunne fjerneksperten tegne i luften for at påpege ting, som astronauterne ville se med HoloLens-headsettet (hele tiden kunne astronauterne også se en flydende video af eksperten foran deres ansigter). Norris mener, at opgaven ville have taget mange gange så lang tid, hvis den blot var blevet præciseret som en procedure, der skulle følges.

Selvom han tror, ​​det kan være nyttigt, siger Norris også, at der er enorme udfordringer forbundet med at bygge augmented-reality-applikationer, såsom at finde ud af, hvordan en applikationsmenu skal se ud, og hvordan brugeren skal interagere med den, når den ikke vises på en bærbar eller smartphone. skærmen.



Reglerne er anderledes, når man nu gengiver information rundt om en person, siger han.

skjule