Modelul AI MinD-Vis poate citi mințile oamenilor pe baza activității creierului
Pe scurt
Modelul AI poate interpreta ceea ce vede o persoană pe baza activitatea creierului - Iată cum
Un nou model AI numit MinD-Vis poate interpreta ceea ce vede o persoană pe baza activității creierului. Modelul funcționează prin interpretarea „invarianților mnemonici” care sunt prezenți în creier atunci când o persoană vede un obiect. Acești invarianți mnemonici sunt modele care sunt conservate în diferite amintiri ale aceluiași obiect.
Pentru a obține înglobarea globală a activității creierului, autorii au antrenat mai întâi un model auto-supravegheat (același pentru diferiți oameni). Apoi au introdus atenția încrucișată la aceste reprezentări mentale folosind pre-antrenați Difuzia latentă. Modelul a reușit să descifreze complet ceea ce o persoană vede în fața lui după o reglare rapidă a imaginii de 1.5k.fMRI perechi!
Pentru a înțelege mai bine sistemul vizual uman și pentru a oferi bazele pentru conectarea între viziunea umană și computerizată prin interfața creier-computer, decodificarea stimulilor vizuali din înregistrările creierului încearcă să ne extindă înțelegerea sistemului vizual. Complexitatea reprezentărilor subiacente ale semnalelor cerebrale și lipsa de adnotări de date fac dificilă recrearea imaginilor precise cu o calitate înaltă din înregistrările creierului.
În primul rând, folosind modelarea măștii într-un spațiu latent considerabil, inspirat de codificarea rară a informațiilor din cortexul vizual primar, creăm o reprezentare eficientă auto-supravegheată a datelor fMRI. Apoi, demonstrăm că MinD-Vis poate reconstrui imagini extrem de credibile cu detalii potrivite semantic din înregistrările creierului folosind un număr minim de adnotări pereche prin adăugarea de dublă condiționare la un model de difuzie latentă.
Cercetătorii au susținut
Conform rezultatelor experimentale, strategia a depășit cu 100% și, respectiv, 66%, cu 41% și, respectiv, cu XNUMX% față de stadiul tehnicii în maparea semantică (clasificare semantică cu XNUMX de căi) și calitatea generației (FID). Modelul a fost evaluat atât calitativ, cât și cantitativ. Pentru evaluarea cadrului, a fost realizat și un studiu amănunțit asupra ablației.
Datele de antrenament, codul și greutățile modelului sunt toate disponibile publicului pe solicita.
Cercetătorii cred că modelul ar putea fi folosit pentru a dezvolta proteze pentru persoanele care sunt orbi sau au vedere scăzută. De asemenea, ar putea fi folosit pentru a ajuta persoanele cu tulburări de memorie, cum ar fi boala Alzheimer.
Citeşte mai mult:
Declinare a responsabilităţii
În conformitate cu Ghidurile proiectului Trust, vă rugăm să rețineți că informațiile furnizate pe această pagină nu sunt destinate și nu trebuie interpretate ca fiind consiliere juridică, fiscală, investițională, financiară sau orice altă formă de consiliere. Este important să investești doar ceea ce îți poți permite să pierzi și să cauți sfaturi financiare independente dacă ai îndoieli. Pentru informații suplimentare, vă sugerăm să consultați termenii și condițiile, precum și paginile de ajutor și asistență furnizate de emitent sau agent de publicitate. MetaversePost se angajează să raporteze corecte, imparțial, dar condițiile de piață pot fi modificate fără notificare.
Despre autor
Damir este liderul echipei, manager de produs și editor la Metaverse Post, care acoperă subiecte precum AI/ML, AGI, LLM-uri, Metaverse și Web3-domenii conexe. Articolele sale atrag o audiență masivă de peste un milion de utilizatori în fiecare lună. El pare a fi un expert cu 10 ani de experiență în SEO și marketing digital. Damir a fost menționat în Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto și alte publicații. Călătorește între Emiratele Arabe Unite, Turcia, Rusia și CSI ca nomad digital. Damir a obținut o diplomă de licență în fizică, despre care crede că i-a oferit abilitățile de gândire critică necesare pentru a avea succes în peisajul în continuă schimbare al internetului.
Mai multe articole
Damir este liderul echipei, manager de produs și editor la Metaverse Post, care acoperă subiecte precum AI/ML, AGI, LLM-uri, Metaverse și Web3-domenii conexe. Articolele sale atrag o audiență masivă de peste un milion de utilizatori în fiecare lună. El pare a fi un expert cu 10 ani de experiență în SEO și marketing digital. Damir a fost menționat în Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto și alte publicații. Călătorește între Emiratele Arabe Unite, Turcia, Rusia și CSI ca nomad digital. Damir a obținut o diplomă de licență în fizică, despre care crede că i-a oferit abilitățile de gândire critică necesare pentru a avea succes în peisajul în continuă schimbare al internetului.
