AI-agenter lærer at arbejde sammen ved at skændes med Virtual Swine

At skændes med en gris - selv en virtuel - er meget nemmere, hvis du får en ven til at hjælpe. Det er tydeligt, at en konkurrence arrangeret af Microsoft-forskere for at teste, hvordan kunstigt intelligente agenter kunne samarbejde om at løse vanskelige problemer. Hvordan du bedst samarbejder med din grisestridende ven er et andet spørgsmål.





Konkurrencen henvender sig til et område med kunstig intelligens, som hidtil har haft relativt lidt opmærksomhed. AI-forskere udvikler ofte software, der er i stand til at udføre en specifik menneskelig opgave, såsom at spille skak eller Go, og måler det derefter efter dets evne til at besejre en menneskelig spiller. Men en stor del af menneskelig intelligens involverer kommunikation, social intelligens og sindets teori eller evnen til at forudse og fortolke en anden intelligent agents intentioner.

Projektet antyder også, hvordan mennesker og AI-systemer i sidste ende kan arbejde sammen for at opnå mere end summen af ​​deres dele. Dette er en del af en bredere tendens til at gentænke AI som udvidet intelligens i stedet for kunstig intelligens, siger Oren Etzioni , administrerende direktør for Allen Institute for Artificial Intelligence.

Til Microsoft-konkurrencen arbejdede AI-agenter sammen i Project Malmo, en speciel version af det åbne computerspil Minecraft. Microsofts forsker designede dette miljø for at gøre det nemt at importere og teste forskellige AI-teknikker. Der vil være behov for meget yderligere fremskridt, før AI-agenter kan slå sig sammen på nyttige måder eller hjælpe mennesker, men konkurrencen tilbyder en måde at teste nogle tidlige ideer på.



Til konkurrencen kunne agenter forsøge at kontrollere og fange en uregerlig virtuel gris enten på egen hånd eller ved at slå sig sammen med en anden AI-agent og tjene point hver gang.

De bedste hold i Malmo Collaborative AI Challenge brugte banebrydende maskinlæringstilgange såsom deep learning for at træne deres agenter til at arbejde sammen. Dette indebar at fodre dem med store mængder data. Men nogle deltagere gjorde også brug af ældre, mindre fashionable tilgange, der involverer at give en virtuel agent hårdkodet viden og forståelse.

Vinderne af konkurrencen, et hold fra University of Oxford i Storbritannien, brugte forstærkningslæring, en slags maskinlæring inspireret af den måde, dyr lærer gennem eksperimentering (se 10 Breakthrough Technologies: Reinforcement Learning). Deres agenter oplevede positiv forstærkning, når de med succes arbejdede sammen om at få fat i grisen.



Katja Hofmann , den ledende forsker på Microsofts Malmø-projekt, bemærker, at mange teams kombinerede forskellige tilgange. Der var ingen enkelt type tilgang, der viste sig som en klar vinder, tilføjer hun og siger, at det er sandsynligt, at hybride tilgange vil vise sig at være særligt lovende retninger for fremtidig forskning.

Grise-wrestling-udfordringen henter inspiration fra et tankeeksperiment kendt som Hjortejagten , som udforsker begreber inden for spilteori, en gren af ​​matematik, der beskæftiger sig med samarbejde og forhandlingsstrategier. Ideen er, at to jægere skal beslutte, om de vil jage en hare på egen hånd eller slå sig sammen for at vinde den største pris af en kronhjort.

De bedste hold, der er involveret i konkurrencen, bedømt efter den score, de opnåede, samt nyheden i deres arbejde, vil modtage et forskningslegat på $20.000 og en plads på Microsofts Research AI Summer School.



Peter søndage , en professor ved University of Washington, der studerer maskinlæring og datamining, siger, at træning af AI-software i simulerede miljøer har sine ulemper. Software kan blive overoptimeret til netop det miljø og derfor mindre nyttig i den virkelige verden, siger han, selvom mere sofistikerede simulerede verdener begynder at ændre dette.

Domingos tilføjer, at samarbejde mellem mennesker er så komplekst og subtilt, at det er svært at forestille sig, at Microsoft-projektet producerer virkelig brugbare tilgange. På trods af en vis skepsis er han dog opmuntret af projektet.

Det er stadig tidligt på dette område, og Minecraft er et miljø med mange muligheder, siger Domingos. [Det er] rigere end ting, der er blevet brugt før, så det virker bestemt værd at prøve.

skjule