Datamining afslører, hvordan smilet udviklede sig i løbet af et århundredes årbogsbilleder

Data mining har ændret den måde, vi tænker information på. Maskinlæringsalgoritmer går nu rutinemæssigt igennem datasæt af Twitter-samtaler, rejsemønstre, telefonopkald og sundhedsjournaler, for blot at nævne nogle få. Og den indsigt, dette bringer, forbedrer dramatisk vores forståelse af kommunikation, rejser, sundhed og så videre.

Men der er et andet historisk datasæt, som stort set er blevet ignoreret af dataminesamfundet - fotografier. Dette giver en mere kompleks udfordring.

Til at begynde med er datasættet enormt og strækker sig over 150 år siden fotografiets begyndelse. Hvad mere er, kan den information, den indeholder, være svær at destillere, ofte fordi den er for kompleks eller for hverdagsagtig til at beskrive med ord.

I dag ændrer det sig takket være Shiry Ginosars arbejde ved University of California, Berkeley og et par venner, som har været banebrydende for en maskinsynstilgang til at udvinde data i almindelige fotografier.

Disse fyre starter med en relativt simpel database - amerikanske high-school-årsbogsfotografier, der går tilbage til 1905. Disse årbogsbilleder er blevet digitaliseret i stor skala af lokale biblioteker over hele USA og viser hele frontale fotos af individer i en standardstilling.

Ginosar og co downloadede over 150.000 af disse portrætter. Efter at have fjernet dem, der ikke var hele frontale portrætter, stod de tilbage med omkring 37.000 billeder fra mere end 800 årbøger fra 26 amerikanske stater.

De grupperede derefter portrætterne efter årti og overlejrede billederne for at producere et gennemsnitligt ansigt for hver periode. Denne proces afslørede andre gennemsnitlige træk for hver periode, såsom frisure, tøj, brillestil og endda gennemsnitlige ansigtsudtryk. Billedet ovenfor viser disse gennemsnit for hvert årti for mænd og kvinder.

Resultaterne giver interessant læsning. Et særligt slående træk er udviklingen af ​​smil i årbogsfotografier. Ginosar og co siger, at i årene efter fotografiets opfindelse antog de fleste mennesker den samme positur, som de ville have brugt til et malet portræt – et neutralt udtryk, som ville være let at holde i en lang periode.

Etikette og skønhedsstandarder dikterede, at munden blev holdt lille - hvilket resulterede i en instruktion om at sige svesker (i stedet for ost), når et billede blev taget, siger Ginosar og co.

Men det ændrede sig i løbet af det 20. århundrede, da fotografering blev mere populært. Især fotografifirmaet Kodak brugte reklamer til at popularisere ideen om at smile på billeder, så billederne registrerede glade minder.

Uanset årsagen er smilet blevet meget mere fremtrædende. I disse dage tager vi for givet, at vi skal smile, når vores billede bliver taget, siger Ginosar og kammerater.

Og dataene understøtter det. Holdet udviklede en algoritme til at bestemme graden af ​​læbekrumning i fotografierne, og denne viste en klar tendens i stigende smilintensitet over tid.

Dataene afslører også en anden tendens. Kvinder smiler markant og konsekvent mere end mænd, siger de. Dette er ikke en ny opdagelse - den er faktisk blevet diskuteret i årtier.

Men tidligere kunne dataene kun samles ved omhyggelig manuel analyse af tusindvis af fotos. En sammenligning med Ginosar og cos teknik viser dens kraft. Ved at bruge en stor historisk dataindsamling og en simpel smiledetektor nåede vi frem til den samme konklusion med en minimal mængde anmærkninger og stort set ingen manuel indsats, siger de.

Dataene afslører også andre tendenser. Ginosar og co peger på udviklingen af ​​frisurer og siger, at deres datasæt udvælger: 30'ernes fingerbølger. Pincurlerne fra 40'erne og 50'erne. Bob, winged flip, bubble cut fra 60'erne. 70'ernes lange hår, Afros og bouffants. Perms og pandehår fra 80'erne og 90'erne, og det glatte lange hår på mode i 2000'erne.

Andre ting har dog ikke ændret sig. For eksempel har standarddressen for mænd forblevet jakkesættet gennem det 20. århundrede.

Selvfølgelig er der nogle begrænsninger for dette datasæt. For eksempel dimitterede mindre end 10 procent af amerikanske 18-årige fra gymnasiet i 1900-tallet, men det steg til mere end 50 procent i slutningen af ​​1960'erne. Hvad mere er, var den afroamerikanske befolkning ikke repræsenteret i skoler før midten af ​​det 20. århundrede, hvilket skabte en betydelig skævhed i datasættet.

Ikke desto mindre giver værkerne et fascinerende indblik i, hvordan fotografiske datasæt kan blive udnyttet i fremtiden. Og udviklingen af ​​smil og frisurer er kun begyndelsen.

Det er ikke svært at tænke på andre funktioner, der kunne udvindes fra tilsyneladende verdslige billeder. For eksempel indeholder historien om familiesnapshots sandsynligvis en stor database med information om udviklingen af ​​tapetmønstre, tøj, børns legetøj og så videre.

I øjeblikket er denne database stort set uudnyttet. Men det ser ud til at ændre sig i en ikke alt for fjern fremtid.

Ref: arxiv.org/abs/1511.02575 : Et århundrede af portrætter: En visuel historisk optegnelse over amerikanske gymnasieårbøger

skjule