At se sindet fra en robot i augmented reality

Justin Saglio

Da flyttemændene kom til Stefanie Tellex' robotlaboratorium ved Brown University i sidste uge, så hendes elever interesseret med. Se, hvordan de behændigt gik sammen om at samle en sofa op ved hjælp af kropssprog, øjenkontakt og blot nogle få kommandoer, som f.eks. 1-2-3 … løft.

Kan robotter og mennesker arbejde lige så glat sammen? Det er målet for forskningen i Tlex-laboratoriet, som forsøger at give både robotter og mennesker værktøjer til at forstå hinanden lidt bedre og arbejde mere flydende sammen i virkelige miljøer.

Nogle robotter, som Roomba-støvsugeren, har i virkeligheden kun brug for én kommando - rens eller stop. Det er den rigtige grænseflade til en Roomba, men vi ser robotter bevæge sig ud over en enkelt funktion. Vi vil gerne være i stand til at fortælle dem alt, hvad der er inden for robottens fysiske muligheder, siger Tellex. Jeg arbejder på et system, hvor man taler til robotten som en person. Du siger 'Sæt kassen der', og robotten finder ud af det.'

Det er et svært problem, ikke mindst fordi der er mange måder at beskrive, hvad du vil have gjort. (Jeg skal kun tænke på, hvad der sker, når min kone og jeg – ingen ekspert flyttemænd – prøver at flytte vores egen sofa.)

I det arbejde, der blev præsenteret sidste år, brugte Tellexs team en stemmegrænseflade til at se, om en person og en griberobot kunne arbejde sammen om at vælge fra en gruppe af lignende genstande på et bord - inklusive skåle, tuscher og skeer. En kommando som Kan jeg få den skål? kunne lade robotten være i tvivl. Så de programmerede robotten til at stille nogle opklarende spørgsmål, som denne?

Brown-gruppen inviterede 16 frivillige ind i laboratoriet og fandt ud af, at med sådan en mini-dialog fik robotterne arbejdet omkring 25 procent hurtigere og med bedre nøjagtighed. Folk troede også, at robotten var meget smartere, end den faktisk er. Det var så godt, at folk troede, at systemet kunne forstå sætninger som 'til venstre for', selv når det ikke gjorde det. Men den ville stille et spørgsmål, så det virkede som om, den forstod, siger Tellex.

Næste trin i projektet, ledet af ph.d.-studerende David Whitney, er at kombinere verbale kommandoer med augmented-reality-headsettet HoloLens.

I løbet af MIT Technology Review 's EmTech Next-konference Jeg prøvede opsætningen, som viser brugeren spøgelsesagtig lilla-farvede versioner af robotten, der viser, hvilke handlinger den planlægger at lave - så du kan rette eller finjustere dem, hvis det er nødvendigt.

Her er målet at komme ind i robottens sind, siger Whitney. Gode ​​flyttemænd bruger meget kropssprog, men robotter ligner ikke os, siger han. Så dette er en måde at visualisere information om robotten på – hvad tænker den på?'

skjule