O modelo de IA MinD-Vis pode ler a mente das pessoas com base na atividade cerebral
Em Breve
O modelo de IA pode interpretar o que uma pessoa vê com base em atividade cerebral - aqui está como
Um novo modelo de IA chamado MinD-Vis pode interpretar o que uma pessoa está vendo com base na atividade cerebral. O modelo funciona interpretando as 'invariantes mnemônicas' que estão presentes no cérebro quando uma pessoa vê um objeto. Esses invariantes mnemônicos são padrões que são conservados em diferentes memórias do mesmo objeto.
Para obter embeddings globais da atividade cerebral, os autores primeiro treinaram um modelo auto-supervisionado (o mesmo para pessoas diferentes). Eles então introduziram atenção cruzada para essas representações mentais usando o pré-treinado Difusão latente. O modelo foi capaz de decifrar completamente o que uma pessoa vê à sua frente após alguns ajustes rápidos em imagens de 1.5k.fMRI pares!
A fim de compreender melhor o sistema visual humano e fornecer as bases para unir a visão humana e a visão computacional por meio da Interface Cérebro-Computador, a decodificação de estímulos visuais de gravações cerebrais tenta expandir nossa compreensão do sistema visual. A complexidade das representações subjacentes dos sinais cerebrais e a escassez de anotações de dados dificultam a recriação de imagens precisas com alta qualidade a partir de registros cerebrais.
Primeiro, usando a modelagem de máscara em um espaço latente considerável inspirado na codificação esparsa de informações no córtex visual primário, criamos uma representação auto-supervisionada eficiente dos dados de fMRI. Em seguida, demonstramos que o MinD-Vis pode reconstruir imagens altamente confiáveis com detalhes semanticamente combinados de gravações cerebrais usando um número mínimo de anotações emparelhadas adicionando condicionamento duplo a um modelo de difusão latente.
Pesquisadores afirmaram
De acordo com os resultados experimentais, a estratégia superou o estado da arte em mapeamento semântico (classificação semântica de 100 vias) e qualidade de geração (FID) em 66% e 41%, respectivamente. O modelo foi comparado qualitativamente e quantitativamente. Para avaliar o quadro, também foi realizado um estudo minucioso sobre a ablação.
Os dados de treinamento, o código e os pesos do modelo estão disponíveis ao público em solicitar.
Os pesquisadores acreditam que o modelo pode ser usado para desenvolver próteses para pessoas cegas ou com baixa visão. Também pode ser usado para ajudar pessoas com distúrbios de memória, como a doença de Alzheimer.
Leia mais:
Aviso Legal
Em linha com a Diretrizes do Projeto Trust, observe que as informações fornecidas nesta página não se destinam e não devem ser interpretadas como aconselhamento jurídico, tributário, de investimento, financeiro ou qualquer outra forma. É importante investir apenas o que você pode perder e procurar aconselhamento financeiro independente se tiver alguma dúvida. Para mais informações, sugerimos consultar os termos e condições, bem como as páginas de ajuda e suporte fornecidas pelo emissor ou anunciante. MetaversePost está comprometida com relatórios precisos e imparciais, mas as condições de mercado estão sujeitas a alterações sem aviso prévio.
Sobre o autor
Damir é o líder de equipe, gerente de produto e editor da Metaverse Post, abordando tópicos como AI/ML, AGI, LLMs, Metaverse e Web3-Campos relacionados. Seus artigos atraem um grande público de mais de um milhão de usuários todos os meses. Ele parece ser um especialista com 10 anos de experiência em SEO e marketing digital. Damir foi mencionado em Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto e outras publicações. Ele viaja entre os Emirados Árabes Unidos, Turquia, Rússia e CEI como um nômade digital. Damir formou-se em física, o que ele acredita ter lhe dado as habilidades de pensamento crítico necessárias para ter sucesso no cenário em constante mudança da internet.
Mais artigos
Damir é o líder de equipe, gerente de produto e editor da Metaverse Post, abordando tópicos como AI/ML, AGI, LLMs, Metaverse e Web3-Campos relacionados. Seus artigos atraem um grande público de mais de um milhão de usuários todos os meses. Ele parece ser um especialista com 10 anos de experiência em SEO e marketing digital. Damir foi mencionado em Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto e outras publicações. Ele viaja entre os Emirados Árabes Unidos, Turquia, Rússia e CEI como um nômade digital. Damir formou-se em física, o que ele acredita ter lhe dado as habilidades de pensamento crítico necessárias para ter sucesso no cenário em constante mudança da internet.
