Hvordan en algoritme lærte at identificere deprimerede personer ved at studere deres Instagram-billeder

En af de mærkelige ting ved farve er, at vi forbinder den med følelser. Intuitivt har vi en tendens til at forbinde mørkere, gråere farver med negative stemninger og lysere, lysere farver med positive. Forskere har faktisk fundet ud af, at mennesker, der lider af depression, foretrækker mørkere farver.

Det rejser den fascinerende mulighed for, at det kan være muligt at diagnosticere depression i massevis ved at analysere de billeder, folk poster på sociale medier såsom Instagram. Men hvor pålidelig kunne en sådan tilgang nogensinde være?

I dag får vi et svar takket være arbejdet fra Andrew Reece ved Harvard University i Cambridge, Massachusetts, og Chris Danforth ved University of Vermont i Burlington, som har fundet signifikante sammenhænge mellem farverne på billeder, der er lagt på Instagram og en persons mentale sundhed . Sammenhængen er så stærk, at parret foreslår, at det kunne bruges til tidlig opdagelse af psykisk sygdom.

Forskerne begyndte med at hente omkring 500 arbejdere fra Amazons Mechanical Turk-tjeneste, som også havde Instagram-konti. De bad disse tyrkere om at udfylde en række spørgeskemaer, herunder en standardundersøgelse af klinisk depression. De inviterede derefter tyrkerne til at dele deres Instagram-opslag til undersøgelsen.

Omkring 170 tyrkere var enige, hvoraf omkring 70 var klinisk deprimerede. Undersøgelsen stillede forskellige yderligere spørgsmål om deres tilstand, såsom den oprindelige dato for deres diagnose.

Instagram-downloads resulterede i en database med over 40.000 fotografier, som holdet derefter analyserede, igen ved hjælp af crowdsourcing med et andet sæt tyrkere. For hver rask bruger valgte forskerne de 100 seneste billeder, der skulle bedømmes. For deprimerede personer valgte forskerne de 100 fotografier, der blev lagt ud før deres diagnose.

Disse bedømmere blev bedt om at vurdere, hvor interessant, sympatisk, glad og trist hvert billede virkede på en skala fra 0 til 5.

Forskerne vurderede også fotografierne ved hjælp af objektive mål som den gennemsnitlige nuance, farvemætning, kontrast og så videre. Dette viser, hvor levende et billede for eksempel er, og om det fremstår gråt eller falmet.

De talte også antallet af ansigter på hvert billede ved hjælp af ansigtsgenkendelsessoftware, ud fra den antagelse, at ansigter er en proxy for et individs niveau af sociale aktivitet. Og de vurderede Instagram-fællesskabets reaktion på hvert billede ved at tælle antallet af likes og kommentarer.

Bevæbnet med disse data brugte forskerne en maskinlæringsalgoritme til at se sammenhænge mellem depression og billedegenskaber.

Forskerne fandt ud af, at deprimerede personer har en tendens til at poste billeder, der er blåere, gråere og mørkere og får færre likes end dem, der er postet af sunde personer.

Instagram tilbyder en bred vifte af filtre, der giver billeder en bestemt karakter og atmosfære. Deprimerede personer havde en klar favorit blandt disse. Når deprimerede deltagere brugte filtre, foretrak de mest uforholdsmæssigt 'Inkwell'-filteret, som konverterer farvefotografier til sort-hvide billeder, siger Reece og Danforth. Derimod foretrak raske individer et filter kaldet Valencia, som gør fotografier lysere.

Dataanalysen afstedkom også nogle nysgerrige observationer. Fotografier, som mennesker vurderede som glade eller triste, var kun svagt korreleret med depression. Deprimerede personer var også mere tilbøjelige til at poste billeder med ansigter, men disse billeder havde en tendens til at have færre ansigter pr. billede.

Hvorfor det sker, er ikke klart, men Reece og Danforth har en idé. De påpeger, at deprimerede mennesker har en tendens til at bruge mere selvfokuseret sprog, og at dette også kan strække sig til billeder. Hvis det er tilfældet, kan det være, at overfloden af ​​fotos med lavt antal ansigter, der er postet af deprimerede brugere, i virkeligheden er selvportrætter, siger forskerne, selvom de tilføjer, at denne triste selfie-hypotese forbliver utestet.

Et interessant spørgsmål er, hvor godt algoritmen kan identificere deprimerede personer ved hjælp af de billeder, de poster på Instagram. Så forskerne satte det løs på billederne, som 100 personer havde lagt ud, og fandt ud af, at algoritmen korrekt identificerede 70 procent af dem, der var deprimerede. Det er væsentligt bedre, end de praktiserende læger formår, når de bliver bedt om at identificere deprimerede personer.

Disse resultater understøtter forestillingen om, at store ændringer i individuel psykologi overføres ved brug af sociale medier og kan identificeres via beregningsmetoder, siger Reece og Danforth.

Og det vil give håb om, at psykisk sygdom kan opdages præcist tidligere, hvilket giver mulighed for mere effektiv intervention.

Ref: arxiv.org/abs/1608.03282 : Instagram-billeder afslører forudsigelige markører for depression

skjule