Software registrerer bevægelse, som det menneskelige øje ikke kan se

Et nyt sæt softwarealgoritmer kan forstærke aspekter af en video og afsløre, hvad der normalt er uopdageligt for menneskets syn, hvilket gør det muligt for eksempel at måle en persons puls ved at optage en video af ham og fange den måde, blodet flyder over hans ansigt.





Ser dybere: Fredo Durand, lektor i datalogi ved MIT, udviklede en algoritme, der kan fremhæve overraskende ting i næsten enhver video.

Softwareprocessen, kaldet Eulerisk videoforstørrelse af MIT-datalogerne, der udviklede programmet, bryder de visuelle elementer i hver frame af en video fra hinanden og rekonstruerer dem med algoritmen, som kan forstærke aspekter af videoen, som ikke kan spores med det blotte øje. Disse aspekter kan omfatte variationer i rødme i en mands ansigt forårsaget af hans puls. Ligesom optik har gjort det muligt for [nogen] at se ting, der normalt er for små, kan beregninger gøre det muligt for folk at se ting, der ikke er synlige for det blotte øje, siger MIT-computerforsker Fredo durand , en af ​​medforfatterne til et papir om forskningen.

UC Berkeley professor Maneesh Agrawala , der har brugt sin karriere inden for visualisering og computergrafik, siger, at han er imponeret over arbejdet. De mange eksempler i video, de leverer er rigtig fine eksempler på at visualisere ting, der ellers er svære at lave, siger han.



Durand og hans kolleger planlægger at gøre deres softwarekode tilgængelig for andre denne sommer. Han forudser, at den primære anvendelse vil være til medicinsk fjerndiagnostik, men den kan bruges til at detektere enhver lille bevægelse, så den kan lade for eksempel bygningsingeniører måle, hvordan vinden får en bygning til at svaje eller deformere en smule.

Han tilføjer, at alle video-optagelser kan bruges, selvom støj og artefakter såsom kornethed også vil blive forstærket afhængigt af kvaliteten af ​​det kamera, der fangede optagelserne. Så jo højere kvalitet optagelserne er, jo bedre bliver resultatet ved at bruge programmet. Det, der virkelig er rart ved denne teknik, er, at den bare kan tage standardvideo, fra stort set enhver enhed, og derefter behandle den på en måde, der finder denne skjulte information i signalet, siger Agrawala.

skjule