AI model MinD-Vis lahko bere misli ljudi na podlagi možganske aktivnosti
Na kratko
Model AI lahko razlaga, kaj oseba vidi na podlagi možgansko aktivnost – tukaj je kako
Nov model umetne inteligence, imenovan MinD-Vis, lahko interpretira, kaj oseba vidi na podlagi možganske aktivnosti. Model deluje tako, da interpretira 'mnemonične invariante', ki so prisotne v možganih, ko oseba vidi predmet. Te mnemonične invariante so vzorci, ki se ohranijo v različnih spominih istega predmeta.
Da bi dobili globalne vgradnje možganske aktivnosti, so avtorji najprej usposobili samonadzorovani model (enako za različne ljudi). Nato so uvedli navzkrižno pozornost na te mentalne predstavitve z uporabo vnaprej usposobljenih Latentna difuzija. Model je lahko popolnoma dešifriral, kaj oseba vidi pred sabo po hitrem natančnem prilagajanju slike 1.5k-fMRI pari!
Da bi bolje razumeli človeški vizualni sistem in zagotovili osnovo za premostitev človeškega in računalniškega vida prek možgansko-računalniškega vmesnika, dekodiranje vizualnih dražljajev iz možganskih posnetkov poskuša razširiti naše razumevanje vizualnega sistema. Kompleksnost osnovnih predstavitev možganskih signalov in pomanjkanje opomb podatkov otežujeta poustvarjanje natančnih slik visoke kakovosti iz posnetkov možganov.
Prvič, z modeliranjem maske v precejšnjem latentnem prostoru, ki ga je navdihnilo redko kodiranje informacij v primarni vizualni skorji, ustvarimo učinkovito samonadzorovano predstavitev podatkov fMRI. Nato pokažemo, da lahko MinD-Vis obnovi zelo verodostojne slike s semantično usklajenimi podrobnostmi iz posnetkov možganov z uporabo minimalnega števila seznanjenih opomb z dodajanjem dvojnega pogojevanja modelu latentne difuzije.
Raziskovalci so trdili
Glede na eksperimentalne rezultate je strategija presegla najsodobnejšo semantično preslikavo (100-way semantic classification) in kakovost generiranja (FID) za 66 % oziroma 41 %. Model je bil kvalitativno in kvantitativno primerjan. Da bi ocenili okvir, je bila izvedena tudi temeljita študija o ablaciji.
Podatki o usposabljanju, koda in uteži modela so na voljo javnosti na zahteva.
Raziskovalci verjamejo, da bi lahko model uporabili za razvoj protetike za ljudi, ki so slepi ali slabovidni. Lahko bi ga uporabili tudi za pomoč ljudem z motnjami spomina, kot je Alzheimerjeva bolezen.
Preberite več:
Zavrnitev odgovornosti
V skladu z Smernice projekta Trust, upoštevajte, da informacije na tej strani niso namenjene in se jih ne sme razlagati kot pravni, davčni, naložbeni, finančni ali kakršen koli drug nasvet. Pomembno je, da vlagate samo tisto, kar si lahko privoščite izgubiti, in da poiščete neodvisen finančni nasvet, če imate kakršne koli dvome. Za dodatne informacije predlagamo, da si ogledate določila in pogoje ter strani s pomočjo in podporo, ki jih nudi izdajatelj ali oglaševalec. MetaversePost se zavzema za natančno in nepristransko poročanje, vendar se tržni pogoji lahko spremenijo brez predhodnega obvestila.
O avtorju
Damir je vodja ekipe, produktni vodja in urednik pri Metaverse Post, ki pokriva teme, kot so AI/ML, AGI, LLMs, Metaverse in Web3- sorodna področja. Njegovi članki vsak mesec pritegnejo množično občinstvo več kot milijon uporabnikov. Zdi se, da je strokovnjak z 10-letnimi izkušnjami na področju SEO in digitalnega trženja. Damir je bil omenjen v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto in druge publikacije. Kot digitalni nomad potuje med ZAE, Turčijo, Rusijo in SND. Damir je diplomiral iz fizike, kar mu je po njegovem mnenju dalo sposobnosti kritičnega razmišljanja, potrebne za uspeh v nenehno spreminjajočem se okolju interneta.
več člankov
Damir je vodja ekipe, produktni vodja in urednik pri Metaverse Post, ki pokriva teme, kot so AI/ML, AGI, LLMs, Metaverse in Web3- sorodna področja. Njegovi članki vsak mesec pritegnejo množično občinstvo več kot milijon uporabnikov. Zdi se, da je strokovnjak z 10-letnimi izkušnjami na področju SEO in digitalnega trženja. Damir je bil omenjen v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto in druge publikacije. Kot digitalni nomad potuje med ZAE, Turčijo, Rusijo in SND. Damir je diplomiral iz fizike, kar mu je po njegovem mnenju dalo sposobnosti kritičnega razmišljanja, potrebne za uspeh v nenehno spreminjajočem se okolju interneta.
