Model AI MinD-Vis dokáže čítať myšlienky ľudí na základe mozgovej aktivity
Stručne
Model AI dokáže interpretovať to, na základe čoho človek vidí činnosť mozgu – tu je návod
Nový model AI s názvom MinD-Vis dokáže interpretovať to, čo človek vidí, na základe mozgovej aktivity. Model funguje na základe interpretácie „mnemotechnických invariantov“, ktoré sú prítomné v mozgu, keď človek vidí nejaký predmet. Tieto mnemotechnické invarianty sú vzory, ktoré sú zachované v rôznych spomienkach na ten istý objekt.
Aby autori získali globálne zakotvenie mozgovej aktivity, najprv vytrénovali model s vlastným dohľadom (rovnaký pre rôznych ľudí). Potom zaviedli krížovú pozornosť na tieto mentálne reprezentácie pomocou vopred vyškolených Latentná difúzia. Model dokázal po rýchlom doladení na 1.5k obraze úplne rozlúštiť, čo človek vidí pred sebou-fMRI párov!
Aby sme lepšie porozumeli ľudskému zrakovému systému a poskytli základy pre premostenie ľudského a počítačového videnia prostredníctvom rozhrania Brain-Computer Interface, dekódovanie vizuálnych stimulov zo záznamov mozgu sa pokúša rozšíriť naše chápanie vizuálneho systému. Zložitosť základných reprezentácií mozgových signálov a nedostatok anotácií údajov sťažujú opätovné vytvorenie presných obrázkov vo vysokej kvalite zo záznamov mozgu.
Po prvé, pomocou modelovania masky vo veľkom latentnom priestore inšpirovanom riedkym kódovaním informácií v primárnej vizuálnej kôre vytvárame efektívnu reprezentáciu údajov fMRI s vlastným dohľadom. Potom demonštrujeme, že MinD-Vis dokáže prebudovať vysoko dôveryhodné obrázky so sémanticky zhodnými detailmi zo záznamov mozgu pomocou minimálneho počtu spárovaných anotácií pridaním dvojitého kondicionovania k modelu latentnej difúzie.
Tvrdili výskumníci
Podľa experimentálnych výsledkov stratégia prekonala súčasnú úroveň v sémantickom mapovaní (100-pásmová sémantická klasifikácia) a kvalite generácie (FID) o 66 % a 41 %. Model bol porovnaný kvalitatívne aj kvantitatívne. S cieľom vyhodnotiť rámec bola vykonaná aj dôkladná štúdia o ablácii.
Tréningové dáta, kód a modelové váhy sú dostupné verejnosti na požiadať.
Vedci sa domnievajú, že model by mohol byť použitý na vývoj protetiky pre ľudí, ktorí sú nevidomí alebo slabozrací. Dalo by sa použiť aj na pomoc ľuďom s poruchami pamäti, ako je Alzheimerova choroba.
Prečítajte si viac:
Vylúčenie zodpovednosti
V súlade s Pokyny k projektu Trust, uvedomte si, že informácie uvedené na tejto stránke nie sú zamýšľané a nemali by byť interpretované ako právne, daňové, investičné, finančné alebo iné formy poradenstva. Je dôležité investovať len toľko, koľko si môžete dovoliť stratiť a v prípade akýchkoľvek pochybností vyhľadať nezávislé finančné poradenstvo. Ak chcete získať ďalšie informácie, odporúčame vám pozrieť si zmluvné podmienky, ako aj stránky pomoci a podpory poskytnuté vydavateľom alebo inzerentom. MetaversePost sa zaviazala poskytovať presné a nezaujaté správy, ale podmienky na trhu sa môžu zmeniť bez upozornenia.
O autorovi
Damir je vedúci tímu, produktový manažér a redaktor v Metaverse Post, pokrývajúce témy ako AI/ML, AGI, LLM, Metaverse a Web3- súvisiace oblasti. Jeho články priťahujú každý mesiac obrovské publikum s viac ako miliónom používateľov. Zdá sa, že je odborníkom s 10-ročnými skúsenosťami v oblasti SEO a digitálneho marketingu. Damir bol spomenutý v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto a ďalšie publikácie. Ako digitálny nomád cestuje medzi SAE, Tureckom, Ruskom a SNŠ. Damir získal bakalársky titul z fyziky, o ktorom sa domnieva, že mu dal schopnosti kritického myslenia potrebné na to, aby bol úspešný v neustále sa meniacom prostredí internetu.
Ďalšie články
Damir je vedúci tímu, produktový manažér a redaktor v Metaverse Post, pokrývajúce témy ako AI/ML, AGI, LLM, Metaverse a Web3- súvisiace oblasti. Jeho články priťahujú každý mesiac obrovské publikum s viac ako miliónom používateľov. Zdá sa, že je odborníkom s 10-ročnými skúsenosťami v oblasti SEO a digitálneho marketingu. Damir bol spomenutý v Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto a ďalšie publikácie. Ako digitálny nomád cestuje medzi SAE, Tureckom, Ruskom a SNŠ. Damir získal bakalársky titul z fyziky, o ktorom sa domnieva, že mu dal schopnosti kritického myslenia potrebné na to, aby bol úspešný v neustále sa meniacom prostredí internetu.
