Model AI MinD-Vis potrafi czytać w myślach ludzi na podstawie aktywności mózgu
W skrócie
Model AI może interpretować to, co dana osoba widzi na podstawie aktywność mózgu - Oto jak
Nowy model sztucznej inteligencji o nazwie MinD-Vis może interpretować to, co widzi dana osoba, na podstawie aktywności mózgu. Model działa na zasadzie interpretacji „niezmienników mnemonicznych”, które są obecne w mózgu, gdy osoba widzi przedmiot. Te niezmienniki mnemoniczne to wzorce, które są zachowane w różnych wspomnieniach tego samego obiektu.
Aby uzyskać globalne osadzenie aktywności mózgu, autorzy najpierw wyszkolili samonadzorowany model (taki sam dla różnych osób). Następnie wprowadzili wzajemną uwagę na te reprezentacje mentalne, korzystając z wcześniej przeszkolonych Utajona dyfuzja. Model był w stanie całkowicie rozszyfrować to, co dana osoba widzi przed sobą po szybkim dostrojeniu obrazu 1.5 tys.fMRI pary!
Aby lepiej zrozumieć ludzki układ wzrokowy i zapewnić podstawy do łączenia widzenia człowieka i komputera za pośrednictwem interfejsu mózg-komputer, dekodowanie bodźców wzrokowych z nagrań mózgowych ma na celu poszerzenie naszej wiedzy na temat układu wzrokowego. Złożoność podstawowych reprezentacji sygnałów mózgowych i brak adnotacji danych utrudniają odtworzenie dokładnych obrazów o wysokiej jakości z nagrań mózgowych.
Po pierwsze, używając modelowania masek w sporej ukrytej przestrzeni, inspirowanego rzadkim kodowaniem informacji w pierwotnej korze wzrokowej, tworzymy wydajną samonadzorowaną reprezentację danych fMRI. Następnie pokazujemy, że MinD-Vis może odbudować wysoce wiarygodne obrazy z semantycznie dopasowanymi szczegółami z nagrań mózgowych przy użyciu minimalnej liczby sparowanych adnotacji poprzez dodanie podwójnego warunkowania do modelu dyfuzji utajonej.
Naukowcy twierdzili
Zgodnie z wynikami eksperymentów strategia przewyższyła najnowocześniejsze mapy semantyczne (100-stopniowa klasyfikacja semantyczna) i jakość generowania (FID) odpowiednio o 66% i 41%. Model został przetestowany zarówno jakościowo, jak i ilościowo. W celu oceny ram przeprowadzono również dokładne badanie dotyczące ablacji.
Dane treningowe, kod i wagi modeli są dostępne publicznie w serwisie zażądać.
Naukowcy są przekonani, że model ten można wykorzystać do opracowania protez dla osób niewidomych lub niedowidzących. Można go również wykorzystać do pomocy osobom z zaburzeniami pamięci, takimi jak choroba Alzheimera.
Czytaj więcej:
Odpowiedzialność
Zgodnie z Zaufaj wytycznym projektu, należy pamiętać, że informacje zawarte na tej stronie nie mają na celu i nie powinny być interpretowane jako porady prawne, podatkowe, inwestycyjne, finansowe lub jakiekolwiek inne formy porad. Ważne jest, aby inwestować tylko tyle, na utratę czego możesz sobie pozwolić, a w przypadku jakichkolwiek wątpliwości zasięgnąć niezależnej porady finansowej. Aby uzyskać więcej informacji, sugerujemy zapoznać się z warunkami oraz stronami pomocy i wsparcia udostępnianymi przez wydawcę lub reklamodawcę. MetaversePost zobowiązuje się do sporządzania dokładnych i bezstronnych raportów, jednakże warunki rynkowe mogą ulec zmianie bez powiadomienia.
O autorze
Damir jest liderem zespołu, menedżerem produktu i redaktorem w Metaverse Post, obejmujący takie tematy, jak AI/ML, AGI, LLM, Metaverse i Web3-pokrewne pola. Jego artykuły przyciągają każdego miesiąca ogromną publiczność, liczącą ponad milion użytkowników. Wydaje się być ekspertem z 10-letnim doświadczeniem w SEO i marketingu cyfrowym. Damir został wspomniany w Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i inne publikacje. Jako cyfrowy koczownik podróżuje między ZEA, Turcją, Rosją i WNP. Damir uzyskał tytuł licencjata z fizyki, co jego zdaniem dało mu umiejętności krytycznego myślenia potrzebne do odniesienia sukcesu w ciągle zmieniającym się środowisku internetowym.
Więcej artykułów
Damir jest liderem zespołu, menedżerem produktu i redaktorem w Metaverse Post, obejmujący takie tematy, jak AI/ML, AGI, LLM, Metaverse i Web3-pokrewne pola. Jego artykuły przyciągają każdego miesiąca ogromną publiczność, liczącą ponad milion użytkowników. Wydaje się być ekspertem z 10-letnim doświadczeniem w SEO i marketingu cyfrowym. Damir został wspomniany w Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i inne publikacje. Jako cyfrowy koczownik podróżuje między ZEA, Turcją, Rosją i WNP. Damir uzyskał tytuł licencjata z fizyki, co jego zdaniem dało mu umiejętności krytycznego myślenia potrzebne do odniesienia sukcesu w ciągle zmieniającym się środowisku internetowym.
