Hjerneimplantater, kunstig intelligens og en talesynthesizer har forvandlet hjerneaktivitet til robotord

Kategori: Mennesker og teknologi Udsendt 29 jan

Neurale netværk er blevet brugt til at omdanne ord, som et menneske har hørt, til forståelig, genkendelig tale. Det kunne være et skridt mod teknologi, der en dag kan afkode folks tanker.

En udfordring: Takket være fMRI-scanning har vi kendt i årtier at når folk taler, eller hører andre, aktiverer det bestemte dele af deres hjerne. Det har dog vist sig at være enormt udfordrende at omsætte tanker til ord. Et team fra Columbia University har udviklet et system, der kombinerer dyb læring med en talesynthesizer for at gøre netop det.

Studiet: Holdet placerede midlertidigt elektroder i hjernen på fem personer, der skulle have en hjerneoperation for epilepsi. (Folk, der har denne procedure, får ofte monteret implantater for at lære mere om deres anfald.) De frivillige blev bedt om at lytte til optagelser af sætninger, og deres hjerneaktivitet blev brugt til at træne deep-learning-baseret talegenkendelsessoftware. Så lyttede de til 40 tal, der blev talt. AI forsøgte at afkode, hvad de havde hørt på basis af deres hjerneaktivitet - og talte derefter resultaterne højt med en robotstemme. Hvad stemmesynthesizeren producerede, var forståeligt som det rigtige ord 75 % af tiden, ifølge frivillige, der lyttede til det. Resultaterne blev offentliggjort i Videnskabelige rapporter i dag (og du kan lytte til optagelserne her .)

Målet? I øjeblikket kan teknologien kun gengive ord, som disse fem patienter har hørt - og den ville ikke virke på nogen andre. Men der er håb om, at teknologi som denne en dag kan lade folk, der er blevet lammet, kommunikere med deres familie og venner, på trods af at de mister evnen til at tale.

(For flere historier som denne, hvorfor ikke tilmelde dig vores daglige nyhedsbrev, The Download.)