Модель ИИ MinD-Vis может читать мысли людей на основе активности мозга
Коротко
Модель ИИ может интерпретировать то, что видит человек, на основе мозговой деятельности - вот как
Новая модель ИИ под названием MinD-Vis может интерпретировать то, что видит человек, на основе активности мозга. Модель работает, интерпретируя «мнемонические инварианты», которые присутствуют в мозгу, когда человек видит объект. Эти мнемонические инварианты представляют собой паттерны, которые сохраняются в разных воспоминаниях об одном и том же объекте.
Чтобы получить глобальные эмбеддинги активности мозга, авторы сначала обучили модель с самоконтролем (одинаковую для разных людей). Затем они привлекали перекрестное внимание к этим мысленным представлениям, используя предварительно обученный метод. Скрытая диффузия. Модель смогла полностью расшифровать то, что человек видит перед собой, после небольшой доводки на 1.5к картинке.МРТ пары!
Чтобы лучше понять зрительную систему человека и заложить основу для объединения человеческого и компьютерного зрения через интерфейс мозг-компьютер, декодирование визуальных стимулов из записей мозга пытается расширить наше понимание зрительной системы. Сложность лежащих в основе представлений сигналов мозга и нехватка аннотаций данных затрудняют воссоздание точных изображений с высоким качеством из записей мозга.
Во-первых, используя моделирование маски в значительном скрытом пространстве, вдохновленное разреженным кодированием информации в первичной зрительной коре, мы создаем эффективное самоконтролируемое представление данных фМРТ. Затем мы демонстрируем, что MinD-Vis может восстанавливать очень достоверные изображения с семантически соответствующими деталями из записей мозга, используя минимальное количество парных аннотаций, добавляя двойное обусловливание к модели скрытой диффузии.
Исследователи утверждали
Согласно экспериментальным результатам, стратегия превзошла современное состояние в семантическом отображении (100-сторонняя семантическая классификация) и качестве генерации (FID) на 66% и 41% соответственно. Модель была проверена как качественно, так и количественно. Для оценки каркаса также было проведено тщательное исследование абляции.
Данные обучения, код и веса модели доступны для общественности на запросить.
Исследователи считают, что модель можно использовать для разработки протезов для слепых или слабовидящих людей. Его также можно использовать для помощи людям с нарушениями памяти, такими как болезнь Альцгеймера.
Прочитайте больше:
Отказ от ответственности
В соответствии с Руководство трастового проектаОбратите внимание, что информация, представленная на этой странице, не предназначена и не должна интерпретироваться как юридическая, налоговая, инвестиционная, финансовая или любая другая форма консультации. Важно инвестировать только то, что вы можете позволить себе потерять, и обращаться за независимой финансовой консультацией, если у вас есть какие-либо сомнения. Для получения дополнительной информации мы предлагаем обратиться к положениям и условиям, а также к страницам справки и поддержки, предоставленным эмитентом или рекламодателем. MetaversePost стремится предоставлять точную и объективную отчетность, однако рыночные условия могут быть изменены без предварительного уведомления.
Об авторе
Дамир — руководитель группы, менеджер по продукту и редактор в Metaverse Post, охватывающие такие темы, как AI/ML, AGI, LLM, Metaverse и Web3-связанные поля. Его статьи ежемесячно привлекают огромную аудиторию, насчитывающую более миллиона пользователей. Похоже, он эксперт с 10-летним опытом работы в области SEO и цифрового маркетинга. Дамир упоминается в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto и другие издания. Он путешествует между ОАЭ, Турцией, Россией и СНГ в качестве цифрового кочевника. Дамир получил степень бакалавра в области физики, что, по его мнению, дало ему навыки критического мышления, необходимые для достижения успеха в постоянно меняющемся мире Интернета.
Другие статьи
Дамир — руководитель группы, менеджер по продукту и редактор в Metaverse Post, охватывающие такие темы, как AI/ML, AGI, LLM, Metaverse и Web3-связанные поля. Его статьи ежемесячно привлекают огромную аудиторию, насчитывающую более миллиона пользователей. Похоже, он эксперт с 10-летним опытом работы в области SEO и цифрового маркетинга. Дамир упоминается в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto и другие издания. Он путешествует между ОАЭ, Турцией, Россией и СНГ в качестве цифрового кочевника. Дамир получил степень бакалавра в области физики, что, по его мнению, дало ему навыки критического мышления, необходимые для достижения успеха в постоянно меняющемся мире Интернета.
