ШІ-модель MinD-Vis може читати думки людей на основі активності мозку
Коротко
Модель штучного інтелекту може інтерпретувати те, що бачить людина активність мозку – ось як
Нова модель штучного інтелекту під назвою MinD-Vis може інтерпретувати те, що бачить людина, на основі активності мозку. Модель працює шляхом інтерпретації «мнемічних інваріантів», які присутні в мозку, коли людина бачить об’єкт. Ці мнемонічні інваріанти є шаблонами, які зберігаються в різних спогадах про той самий об’єкт.
Для того, щоб отримати глобальні вбудовування активності мозку, автори спочатку навчили самоконтрольовану модель (однакова для різних людей). Потім вони ввели перехресну увагу до цих ментальних уявлень за допомогою попередньо навчених Прихована дифузія. Модель змогла повністю розшифрувати те, що людина бачить перед собою після короткого налаштування зображення 1.5k.МРТ пари!
Щоб краще зрозуміти людську зорову систему та створити основу для поєднання людського та комп’ютерного зору через інтерфейс мозок-комп’ютер, декодування візуальних стимулів із записів мозку намагається розширити наше розуміння зорової системи. Складність основного представлення сигналів мозку та брак анотацій даних ускладнюють відтворення точних високоякісних зображень із записів мозку.
По-перше, використовуючи моделювання маски у значному латентному просторі, натхненному розрідженим кодуванням інформації в первинній зоровій корі, ми створюємо ефективне самоконтрольоване представлення даних фМРТ. Потім ми демонструємо, що MinD-Vis може відновлювати дуже достовірні зображення із семантично узгодженими деталями із записів мозку, використовуючи мінімальну кількість парних анотацій, додаючи подвійне кондиціонування до моделі латентної дифузії.
Дослідники стверджували
Відповідно до експериментальних результатів, стратегія перевершила сучасні технології семантичного відображення (100-стороння семантична класифікація) і якості генерації (FID) на 66% і 41% відповідно. Модель була перевірена як якісно, так і кількісно. Щоб оцінити каркас, також було проведено ретельне дослідження абляції.
Навчальні дані, код і ваги моделі доступні для громадськості на запросити.
Дослідники вважають, що модель може бути використана для розробки протезів для сліпих або людей зі слабким зором. Його також можна використовувати для допомоги людям із розладами пам’яті, такими як хвороба Альцгеймера.
Детальніше:
відмова
Відповідно до Правила проекту Trust, будь ласка, зверніть увагу, що інформація, надана на цій сторінці, не призначена і не повинна тлумачитися як юридична, податкова, інвестиційна, фінансова або будь-яка інша форма консультації. Важливо інвестувати лише те, що ви можете дозволити собі втратити, і звернутися за незалежною фінансовою порадою, якщо у вас виникнуть сумніви. Щоб отримати додаткову інформацію, ми пропонуємо звернутися до положень та умов, а також до сторінок довідки та підтримки, наданих емітентом або рекламодавцем. MetaversePost прагне до точного, неупередженого звітування, але ринкові умови можуть змінюватися без попередження.
про автора
Дамір є керівником групи, менеджером із продуктів і редактором Metaverse Post, що охоплює такі теми, як AI/ML, AGI, LLMs, Metaverse тощо Web3- суміжні поля. Його статті щомісяця приваблюють величезну аудиторію понад мільйон користувачів. Здається, він є експертом із 10-річним досвідом роботи в SEO та цифровому маркетингу. Даміра згадували в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto та інші видання. Він подорожує між ОАЕ, Туреччиною, Росією та СНД як цифровий кочівник. Дамір отримав ступінь бакалавра з фізики, що, на його думку, дало йому навички критичного мислення, необхідні для досягнення успіху в Інтернеті, який постійно змінюється.
інші статті
Дамір є керівником групи, менеджером із продуктів і редактором Metaverse Post, що охоплює такі теми, як AI/ML, AGI, LLMs, Metaverse тощо Web3- суміжні поля. Його статті щомісяця приваблюють величезну аудиторію понад мільйон користувачів. Здається, він є експертом із 10-річним досвідом роботи в SEO та цифровому маркетингу. Даміра згадували в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto та інші видання. Він подорожує між ОАЕ, Туреччиною, Росією та СНД як цифровий кочівник. Дамір отримав ступінь бакалавра з фізики, що, на його думку, дало йому навички критичного мислення, необхідні для досягнення успіху в Інтернеті, який постійно змінюється.
