Microsofts plan for at skabe æraen med gestuskontrol

Mens de fleste af overskrifterne om Microsoft dette efterår vil omhandle dets nye styresystem, Windows 8, og dens nye Surface-tablet, arbejder virksomheden også hårdt på en langsigtet indsats for at genopfinde den måde, vi interagerer med eksisterende computere på. Virksomheden ønsker at gøre det lige så almindeligt at vifte med armene eller tale til en computer, som det er at række ud efter en mus eller en berøringsskærm i dag.

Det er målet med et program kaldet Kinect til Windows , som har til formål at placere det vildt succesrige spiltilbehør Kinect, hvor som helst Microsofts allestedsnærværende styresystem findes. Det er også designet til at tillade computere at blive brugt på nye måder - for eksempel af kirurger, der ikke ønsker at røre ved et tastatur med steriliserede hænder midtvejs i operationen.

Vi forsøger at opmuntre [software]-udviklere til at skabe en helt ny klasse app styret af gestus og stemme, siger Peter Zatloukal, chef for ingeniørarbejdet for Kinect til Windows-programmet.

Det var ikke længe efter, at Kinect først blev lanceret, at softwareingeniører begyndte at genbruge det til forskellige formål, såsom robotnavigation eller styring af en webbrowser (se Hackere Tag Kinect til nye niveauer). Kinect til Windows er beregnet til at udnytte den entusiasme og gøre teknologien udbredt.

Zatloukal siger, at resultatet vil være på niveau med andre store skift i, hvordan vi styrer computere. Vi brugte oprindeligt tastaturer, så var musen og GUI'erne en stor innovation, nu er berøring en stor del af folks liv, siger han. Progressionen vil nu være til stemme og gestus. Sundhedspleje, produktion og uddannelse er alle områder, hvor Zatloukal forventer at se Kinect til Windows få succes. Et konventionelt tastatur, en mus eller en berøringsskærm kan være vanskelig at bruge i klasseværelser og hospitalsafdelinger eller på fabriksgulve.

En Kinect-enhed bruger infrarøde og konventionelle kameraer til at spore bevægelser og en mikrofon til at modtage stemmeinput (se Hack: Microsoft Kinect ). Kinect til Windows-udstyr kom til salg i februar for $249 og er nu tilgængeligt i 32 lande. Tidligere på måneden stillede Microsoft hardwaren til rådighed for første gang i Kina, et land med både mange potentielle kunder og et betragteligt antal computerproducenter.

For at platformen kan nå ud til millioner af mennesker, har Microsoft brug for softwareudviklere til at skabe dræbende applikationer. Sammen med hardwaren leverer virksomheden et softwareudviklersæt eller SDK, der tilbyder en række færdiglavede værktøjer, herunder stemmegenkendelse og kropsdelsporing. Tidligere på måneden blev dette udvidet til at tillade applikationer, der registrerer objekter og mennesker mere end fire meter væk og gør det muligt at styre software med en virtuel markør.

Vi åbnede op for meget mere af dataene fra sensoren, siger Zatloukal. For eksempel, ved at bruge infrarød, kan dine apps se i mørke nu. Det kunne gøre det muligt for et Kinect-baseret system at forstå bevægelser, mens en person ser tv i et mørkt rum.

Zatloukal vil ikke tale om, hvordan Microsoft præcist vil tage Kinect til Windows på markedet. Hardwaren er i øjeblikket kun tilgængelig hos softwareudviklere, men hvis mange programmer bliver tilgængelige, kan Microsoft tilbyde det direkte til forbrugerne eller opfordre computerproducenter til at samle det med stationære computere, bærbare computere eller skærme i stedet for et almindeligt webcam.

Nogle store virksomheder, herunder Bloomingdale's og Nissan, samarbejder med Microsoft for at teste mulige applikationer. Nissan har introduceret et gestuskontrolleret system til forhandlere, der lader potentielle købere se ind i en virtuel version af en ny bil. I mellemtiden dukker der startups op, der sælger systemer baseret på Kinect til Windows (se Mød fremtidens nimble-fingered grænseflade).

En sådan opstart er GestSure , baseret i Seattle, som sælger et produkt baseret på Kinect til Windows, der lader kirurger bruge fagter til at styre en computer, der viser medicinske billeder. Selvom det er afgørende at henvise til scanninger og andre billeder på operationsstuen, kan kirurger ikke bruge en computer uden at røre ved en usteriliseret controller og skulle skrubbe op igen eller bede en sygeplejerske om at betjene computeren for dem. Begge disse muligheder spilder værdifuld tid, siger Jamie Tremaine, medstifter og administrerende direktør for opstarten.

GestSure sælger en boks, der, når den er tilsluttet en operationsstuecomputer, venter på, at en kirurg giver et bestemt håndsignal og derefter sporer lægens arme for at tillade kontrol over markøren. Når der ikke er nogen hindring for at henvise til billeder, tjekker kirurger [dem] meget mere, siger Tremaine.

Tremaine siger, at Kinect-hardwarens evne til at opfatte dybde gør det nemmere at genkende og spore objekter, noget meget udfordrende ved at bruge et almindeligt kamera. Det overtrumfer endda stemmegenkendelse, siger han. Stemmegenkendelse er 95 til 98 procent nøjagtig, så én gang ud af 50 virker det ikke, siger han. Dette fungerer som et værktøj - det vil fungere for dig hver gang.

Andre startups, der bygger produkter omkring Kinect til Windows, inkluderer Ingen adgang , som bruger det til at hjælpe mennesker med fysisk genoptræning efter et slagtilfælde. Brugere kan arbejde gennem øvelser derhjemme, mens deres computer følger nøje med og giver feedback. Et andet firma, Freak'n Genius , tilbyder gestus-baseret animationssoftware.

Mark Bolas , en lektor og direktør for Mixed Reality Lab ved University of Southern California, siger, at teknologien i Kinect til Windows kan hjælpe med at gøre det mere naturligt at bruge computere. Når vi bruger en computer i dag, tænker vi på vores krop som en fingerspids eller højst to fingerspidser, siger han. Men mennesker udviklede sig til at kommunikere med hele deres kroppe.

Bolas' forskergruppe eksperimenterer med at bruge Kinect til at spore meget subtil adfærd - overvågning af stigningen og faldet af en persons bryst for for eksempel at måle vejrtrækningshastigheden. Det er et godt signal til stress og nyttigt til telekonferencer, siger han.

Visning af en indikation af en persons vejrtrækning under et videoopkald giver andre mulighed for at forstå en person bedre, siger han, og kan vise, hvornår man skal begynde at tale uden at afbryde. Gruppen har også eksperimenteret med at opdage urolig eller defensivt kropssprog såsom foldede arme. Håbet er at adressere de sociale signaler, der går tabt, når videoopkald erstatter ansigt-til-ansigt kommunikation, siger Bolas. Kød betyder noget, siger han, og Kinect bringer det til computeren.

skjule