AI je naučen odrediti što osoba vidi na temelju "čitanja misli"

Neuroznanstvenici još uvijek ne razumiju u potpunosti cijeli proces kako mozak pretvara vizualne informacije u

misli.Ali to ne sprječava AI da oponaša ovaj proces. Japanski znanstvenici spojili su algoritme koji tekst pretvaraju u slike i sustav za analizu aktivnosti mozga. AI tvrtke Stable Diffusion skenira mozak osobe i rekreira relativno realistične verzije slika koje je osoba vidjela.

Izvorne slike (gore) i slike prepoznavanja moždane aktivnosti Stable Diffusion. Slika: Yu Takagi, Shinji Nishimoto, bioRxiv

Ovo nije prvo istraživanje u kojem znanstvenicikoristio AI za čitanje skenova mozga i ponovno stvaranje slika. No, u novom radu dodali su dodatni korak: prilikom treniranja AI koriste se tekstualni opisi fotografija. Kao rezultat toga, algoritam analizira ne samo aktivnost mozga povezanu s gledanjem slika, već i opis teksta. Ovo podsjeća na popularne algoritme kao što su DALL-E 2 i Midjourney.

Za stabilnu difuziju prepoznavanja uzorakakoristi podatke skeniranja mozga funkcionalnom magnetskom rezonancijom (fMRI) prikupljene gledanjem različitih slika. Kada ljudi gledaju fotografiju, temporalni režnjevi analiziraju informacije o sadržaju slike (ljudi, predmeti ili krajolik), dok okcipitalni režnjevi analiziraju lokaciju i perspektivu, kao što su mjerilo i položaj sadržaja.

Kako bi trenirali AI, istraživači su koristili setslike i obrasci moždane aktivnosti prikupljeni dok ih gledate. Uz jednostavnu obuku, algoritam je učinkovito rekreirao lokaciju objekata i perspektivu fotografija koje se gledaju, ali umjesto stvarnih objekata u središtu kompozicije, crtao je apstraktne oblike. No, nakon što su znanstvenici dodali tekstualne opise fotografijama korištenim u obuci, kvaliteta generiranih slika značajno je porasla.

Izvorna slika (lijevo) i slike,dobivene pomoću algoritama treniranih na vizualnim (z), tekstualnim (c) i kombiniranim podacima (desno). Slika: Yu Takagi, Shinji Nishimoto, bioRxiv

Istraživači napominju da kombinacija tekstai vizualni podaci tijekom obuke omogućuju značajno smanjenje količine podataka koji se moraju koristiti za obuku modela. Istodobno, napominju da je do sada AI uvježban i testiran samo na fMRI podacima za četiri osobe. Vjerojatno će za izradu univerzalnog algoritma biti potreban uzorak velikog broja ljudi.

Čitaj više:

Nazvan vitaminom koji štiti mozak od demencije

Nazvana vrsta nesanice koja smanjuje rizik od demencije. Ali zašto je nepoznato.

Pokazalo se koji su muškarci najplodniji: njihova sperma je 50% bolja od ostalih