AI-fremskridt gør det muligt at søge, shoppe med billeder

Internettet har ændret sig meget i de sidste 20 år, men tekstsøgefelter er en konstant. Indtastning af tekst i pixelerede aflanger forbliver en fast bestanddel af, hvordan vi interagerer med websteder og mobilapps såsom onlinebutikker.

Pinterest-brugere kan søge efter elementer på tjenesten ved at vælge dele af et billede.

Nylige fremskridt inden for billedgenkendelsessoftware bliver brugt til at udfordre det. Det sociale netværk Pinterest og online-fodtøjsforhandleren Shoes.com afprøver nye måder at søge eller browse ved at bruge billeder i stedet for tekst.

Begge virksomheder har vendt sig til en teknik kendt som deep learning, som for nylig har gjort det muligt for software matche mennesker på nogle benchmarks til billedgenkendelse. Teknikken driver Googles billedsøgning og fotoorganisationstjenesten, som den lancerede i sommer (se Google ruller nye automatiserede hjælpere ud).

Pinterests nye visuelle søgeværktøj lader dig tegne en boks omkring noget set i et billede på tjenesten for at finde visuelt lignende genstande fra et indeks på over en milliard. For eksempel, i en hurtig test af funktionen, viste det sig at tegne rundt om en kaffemaskine set på et billede af et køkken, der kunne lide det, inklusive nærbilleder af nøjagtig samme model.

Nogle elementer, der er tilkaldt af en visuel søgning, kommer med købsknapper vedhæftet - en funktion Pinterest introducerede denne sommer. Billedsøgningsfunktionen rulles ud til alle brugere af virksomhedens hjemmeside og mobilapps i denne uge. Pinterests system lærte at forstå billeder ved at tegne på den tekst, folk vedhæftede billeder, der blev delt på tjenesten.

Virksomheder har tidligere forsøgt at bruge billedsøgningsteknologi til at gøre shopping eller opdage produkter nemmere. For eksempel bundtede Amazon en app til at slå produkter op på et billede med sin floppede Fire-smartphone sidste år. I 2010 købte Google Like.com, som havde lanceret et websted til sammenligning af shopping, der kunne finde produkter, der visuelt lignede det, du valgte, og endda lade dig fremhæve vigtige detaljer på et billede for at vejlede dets valg. Google viser visuelt lignende produkter på sin shoppingside i dag, men lader dig ikke fremhæve detaljer.

Kevin Jing, leder af visuel søgning hos Pinterest, siger, at visuel søgning nu har en bedre chance for at blive uundværlig. Billedrepræsentation, der kommer fra dyb læring, er meget, meget mere præcis, siger han. Selv i år er der sket så meget forbedring. De nye visuelle søgeværktøjer er dog ikke perfekte. Først når en masse mennesker har fået en chance for at prøve dem, vil det blive klart, om den underliggende teknologi er blevet forbedret nok til markant at ændre, hvordan folk interagerer med onlinetjenester.

Fodtøjsforhandleren Shoes.com tester en anden tilgang til visuel søgning, også drevet af dyb læring. Virksomheden er den første til at gøre brug af billedbehandlingsteknologi rettet mod detailhandlere udviklet af kunstig intelligens-startup Sentient, som har rejst over 143 millioner dollars fra investorer (se AI Supercomputer Built by Tapping Data Warehouses for Idle Computing Power).

Shoes.com tester i første omgang Sentients teknologi i damestøvler sektion af sin canadiske butik. Klik på den visuelle filterknap, og du bliver præsenteret for et gitter med 12 billeder, som Sentients software mener repræsenterer de mest adskilte klynger af stilarter fra kataloget med omkring 7.000 støvler. Vælg den, der er tættest på det, du leder efter, og softwaren vil bruge de visuelle egenskaber fra dit valg til at opdatere gitteret for at vise 11 mere, der ligner det. At gentage denne proces et par gange gør det muligt at finde et udvalg af støvler med helt særlige egenskaber.

Nigel Duffy, Sentients teknologichef, siger, at den nye funktion demonstrerer, hvordan software, der kan forstå billeder, gør online shopping mere effektivt. Det er en kategori, hvor det er meget svært at beskrive med ord for en søgemaskine, hvad man leder efter, siger han. Vi kan få virkelig granulære præferencer meget hurtigt.

Roger Hardy, CEO for Shoes.com, siger, at der er tegn på, at den visuelle filterfunktion øger salget, og at han overvejer at rulle den ud til andre kategorier af fodtøj. Sentients Duffy siger, at han forventer at se den underliggende teknologi anvendt på andre produkter såsom smykker, tasker og andet tilbehør.

skjule