El model d'IA MinD-Vis pot llegir la ment de les persones en funció de l'activitat cerebral
En breu
El model d'IA pot interpretar en funció del que veu una persona activitat cerebral - aquí és com
Un nou model d'IA anomenat MinD-Vis pot interpretar el que una persona està veient en funció de l'activitat cerebral. El model funciona interpretant els "invariants mnemotècnics" que estan presents al cervell quan una persona veu un objecte. Aquests invariants mnemotècnics són patrons que es conserven en diferents memòries del mateix objecte.
Per tal d'obtenir incrustacions globals de l'activitat cerebral, els autors van entrenar primer un model autosupervisat (el mateix per a diferents persones). A continuació, van introduir l'atenció creuada a aquestes representacions mentals utilitzant el pre-entrenat Difusió latent. El model va ser capaç de desxifrar completament el que una persona veu davant seu després d'una mica d'ajustament ràpid de la imatge de 1.5 k.fMRI parells!
Per tal de comprendre millor el sistema visual humà i proporcionar les bases per connectar la visió humana i la visió per ordinador mitjançant la interfície cervell-ordinador, descodificar estímuls visuals dels enregistraments cerebrals intenta ampliar la nostra comprensió del sistema visual. La complexitat de les representacions subjacents dels senyals cerebrals i la manca d'anotacions de dades fan que sigui difícil recrear imatges precises amb alta qualitat a partir d'enregistraments cerebrals.
En primer lloc, utilitzant el modelatge de màscares en un espai latent important inspirat en la codificació escassa d'informació a l'escorça visual primària, creem una representació eficaç autosupervisada de les dades fMRI. Aleshores, demostrem que MinD-Vis pot reconstruir imatges altament creïbles amb detalls coincidents semànticament d'enregistraments cerebrals mitjançant un nombre mínim d'anotacions aparellades afegint doble condicionament a un model de difusió latent.
van afirmar els investigadors
Segons els resultats experimentals, l'estratègia va superar l'estat de l'art en mapes semàntics (classificació semàntica de 100 vies) i qualitat de generació (FID) en un 66% i un 41%, respectivament. El model s'ha comparat tant qualitativament com quantitativament. Per tal d'avaluar el marc, també es va realitzar un estudi exhaustiu sobre l'ablació.
Les dades d'entrenament, el codi i els pesos del model estan disponibles per al públic sol · licitar.
Els investigadors creuen que el model es podria utilitzar per desenvolupar pròtesis per a persones cegues o amb baixa visió. També es podria utilitzar per ajudar les persones amb trastorns de la memòria, com la malaltia d'Alzheimer.
Llegir més:
renúncia
En línia amb la Directrius del projecte Trust, si us plau, tingueu en compte que la informació proporcionada en aquesta pàgina no pretén ni s'ha d'interpretar com a assessorament legal, fiscal, d'inversió, financer o de cap altra forma. És important invertir només el que et pots permetre perdre i buscar assessorament financer independent si tens dubtes. Per obtenir més informació, us suggerim que feu referència als termes i condicions, així com a les pàgines d'ajuda i assistència proporcionades per l'emissor o l'anunciant. MetaversePost es compromet a fer informes precisos i imparcials, però les condicions del mercat estan subjectes a canvis sense previ avís.
About The Autor
Damir és el líder d'equip, cap de producte i editor de Metaverse Post, que cobreix temes com AI/ML, AGI, LLMs, Metaverse i Web3-camps relacionats. Els seus articles atrauen una audiència massiva de més d'un milió d'usuaris cada mes. Sembla ser un expert amb 10 anys d'experiència en SEO i màrqueting digital. Damir ha estat esmentat a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i altres publicacions. Viatja entre els Emirats Àrabs Units, Turquia, Rússia i la CEI com a nòmada digital. Damir va obtenir una llicenciatura en física, que creu que li ha donat les habilitats de pensament crític necessàries per tenir èxit en el paisatge en constant canvi d'Internet.
més articles
Damir és el líder d'equip, cap de producte i editor de Metaverse Post, que cobreix temes com AI/ML, AGI, LLMs, Metaverse i Web3-camps relacionats. Els seus articles atrauen una audiència massiva de més d'un milió d'usuaris cada mes. Sembla ser un expert amb 10 anys d'experiència en SEO i màrqueting digital. Damir ha estat esmentat a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i altres publicacions. Viatja entre els Emirats Àrabs Units, Turquia, Rússia i la CEI com a nòmada digital. Damir va obtenir una llicenciatura en física, que creu que li ha donat les habilitats de pensament crític necessàries per tenir èxit en el paisatge en constant canvi d'Internet.
