Styr din smartphone med dine øjne

I et forsøg på at gøre eyetracking billig, kompakt og nøjagtig nok til at blive inkluderet i smartphones, crowdsourcer en gruppe forskere indsamlingen af ​​blikinformation og bruger den til at lære mobilsoftware at finde ud af, hvor du leder i realtid .





Forskere ved MIT, University of Georgia og Tysklands Max Planck Institut for Informatik arbejder på projektet, og de siger, at de hidtil har været i stand til at træne software til at identificere, hvor en person kigger med en nøjagtighed på omkring en centimeter på en mobiltelefon og 1,7 centimeter på en tablet.

Dette er ikke så nøjagtigt, især hvis du overvejer den samlede størrelse på din smartphone-skærm. Det er stadig ikke nøjagtigt nok til at bruge til forbrugerapplikationer, siger Aditya Khosla, en kandidatstuderende ved MIT og medforfatter til en papir på det arbejde, der blev præsenteret ved en computervision konference denne uge.

For at hjælpe dem med at lave eye-tracking-software, der kører på din smartphone, oprettede forskere først en app, der indsamler brugernes blikdata.



Men han mener, at systemets nøjagtighed vil forbedres med flere data. Hvis det gør det, kan det gøre eye tracking meget mere udbredt og nyttigt; typisk har det været dyrt og har krævet hardware, der har gjort det vanskeligt at tilføje kapaciteten til gadgets som telefoner og tablets. Og teknologien kan være nyttig som en måde at lade dig spille spil eller navigere på din smartphone uden at skulle trykke eller stryge.

Forskerne startede med at bygge en iPhone-app kaldet GazeCapture der indsamlede data om, hvordan folk ser på deres telefoner i forskellige miljøer uden for et laboratoriums rammer. Brugernes blik blev optaget med telefonens frontkamera, da de blev vist pulserende prikker på en smartphone-skærm. For at sikre sig, at de var opmærksomme, blev de så vist en prik med et L eller R indeni, og de skulle trykke på venstre eller køre på siden af ​​skærmen som svar.

GazeCapture-oplysninger blev derefter brugt til at træne software kaldet iTracker, som også kan køre på en iPhone. Håndsættets kamera fanger dit ansigt, og softwaren tager hensyn til faktorer som dit hoveds og dine øjnes position og retning for at finde ud af, hvor dit blik er fokuseret på skærmen.



Omkring 1.500 mennesker har hidtil brugt GazeCapture-appen, siger Khosla, og han mener, at hvis forskerne kan få data fra 10.000 mennesker, vil de være i stand til at reducere iTrackers fejlrate til en halv centimeter, hvilket burde være godt nok til en rækkevidde af eye-tracking-applikationer.

Khosla håber, at det især kan bruges til medicinske diagnoser; nogle undersøgelser har overvejet, hvordan øjenbevægelser kan bruges til at diagnosticere tilstande, herunder hjernerystelse.

Andrew Duchowski , en professor ved Clemson University, der studerer øjensporing, mener, at iTracker kunne være enormt nyttigt, hvis forskerne kan få det til at fungere godt på mobile enheder, selvom han advarer om, at det også skal arbejde hurtigt og ikke forbruge for meget batterilevetid.



Han tror ikke, det er muligt at få nøjagtighed på pixelniveau fra det, men han siger, at det stadig kan være ret godt.

skjule