211service.com
App spotter objekter for synshandicappede
Da jeg gik rundt på mit kontor en for nylig formiddag, fortalte en kvindestemme på min iPhone de genstande, jeg passerede. Mursten, mur, telefon, sagde hun sagligt. Stemmen standsede, da jeg stødte på en cykel, der var hængt på et vægmonteret stativ og derefter tonede, cykel.
Stemmen er en del af en gratis billedgenkendelsesapp kaldet Aipoly der forsøger at gøre det lettere for dem med synsnedsættelse at genkende deres omgivelser. For at bruge det, peger du telefonens bagerste kamera mod det, du vil have det til at identificere, og Aipoly vil tale, hvad det ser (eller i det mindste, hvad det tror, det ser) og vise objektets navn på telefonens display. Aipoly kører direkte på din telefon, så den behøver ikke internetadgang for at virke, og den kan identificere det ene objekt efter det andet, mens du flytter telefonen rundt, uden at du behøver at tage et billede af hver ting.
Skaberne af Aipoly håber, at appen kan være nyttig for mennesker med alvorlige synsnedsættelser - og måske for dem, der forsøger at lære et nyt sprog. De håber også, at det vil være hurtigere end andre billedgenkendelsesrelaterede apps, der er afhængige af hjælp fra andre mennesker, som f.eks. Vær mine øjne , eller som kræver internet, som f.eks Tryk påTapSee .
Appen blev rullet ud til iPhone i begyndelsen af dette år af en Melbourne-baseret startup af samme navn. Aipolys medstifter Simon Edwardsson siger, at den genkender billeder ved at bruge deep learning, som er en maskinlæringsteknik inspireret af undersøgelser af hjernen. Det er den samme teknologi, som Facebook bruger til at genkende ansigter og Google til at søge efter billeder.
Appen finder ud af, hvad noget er ved at opdele et billede i forskellige karakteristika, såsom kurver, linjer og mønstre (såsom striber), og bruger derefter disse funktioner til at bestemme sandsynligheden for, at billedet er et specifikt objekt.
Aipoly var i stand til at fortælle mig, hvor mange ting jeg kan finde rundt om på mit kontor, selvom det stadig kræver en masse arbejde. Den kan indtil videre kun genkende omkring 1.000 genstande; Edwardsson siger, at virksomheden forsøger at øge det op til 5.000, selvom det stadig ikke ville være så mange, hvis du tænker på, hvor mange forskellige ting du støder på hver dag.
Og selvom appen ofte var korrekt, når den opdagede et objekt, selv når det var delvist okkluderet (såsom hovedtelefoner slynget rundt om min kollegas hals), var der også masser af fejltændinger.
For eksempel sagde dens kvindestemme Chevrolet, derefter hjul og til sidst mus, mens telefonen var fokuseret på min computermus. Og appen blev ved med at fejlidentificere en mikrobølgeovn som AC.
Aipolys iPhone-app bruger kunstig intelligens til at identificere objekter, mens du flytter din telefon rundt.
Brugere kan træne Aipoly ved at skrive et korrekt ord eller en sætning for at identificere et objekt, som det bliver forkert; disse data vil derefter blive uploadet til Aipolys servere, og opstarten vil tilføje beskrivelser til Aipoly med nogle få ugers mellemrum, efterhånden som den frigiver nye versioner af appen, siger Edwardsson.
Jeff Bigham , en lektor i menneskelig computerinteraktion ved Carnegie Mellon University, som studerer hjælpeteknologier, siger, at Aipoly ser ud til at fungere ret godt, og det kunne bruges til at få en fornemmelse af dine omgivelser ved at flytte telefonen omkring dig. Men han stiller spørgsmålstegn ved, hvor nyttige nogle af dets objektidentificeringsevner er, da folk har en tendens til at være gode til at bestemme, hvad noget er ved at røre ved det.
Hvad der er meget mere nyttigt, er at skille ting fra hinanden, som ellers ikke kan skelnes, siger han, som dåser eller kasser med mad, der føles omtrent det samme.