Model AI MinD-Vis dapat membaca pikiran orang berdasarkan aktivitas otak
Singkatnya
Model AI dapat menafsirkan berdasarkan apa yang dilihat seseorang aktivitas otak – begini caranya
Model AI baru yang disebut MinD-Vis dapat menginterpretasikan apa yang dilihat seseorang berdasarkan aktivitas otak. Model ini bekerja dengan menafsirkan 'invarian mnemonik' yang ada di otak saat seseorang melihat suatu objek. Invarian mnemonik ini adalah pola yang dilestarikan di berbagai memori dari objek yang sama.
Untuk mendapatkan penanaman global aktivitas otak, penulis pertama-tama melatih model yang diawasi sendiri (sama untuk orang yang berbeda). Mereka kemudian memperkenalkan perhatian silang pada representasi mental ini menggunakan pra-pelatihan Difusi Laten. Model ini mampu sepenuhnya menguraikan apa yang dilihat seseorang di depannya setelah beberapa penyesuaian cepat pada gambar 1.5k-fMRI pasangan!
Untuk lebih memahami sistem visual manusia dan memberikan dasar untuk menjembatani visi manusia dan komputer melalui Brain-Computer Interface, decoding rangsangan visual dari rekaman otak mencoba memperluas pemahaman kita tentang sistem visual. Kompleksitas representasi yang mendasari sinyal otak dan kelangkaan anotasi data membuat sulit untuk membuat ulang gambar yang akurat dengan kualitas tinggi dari rekaman otak.
Pertama, menggunakan pemodelan topeng dalam ruang laten yang cukup besar yang terinspirasi oleh pengkodean informasi yang jarang di korteks visual primer, kami membuat representasi data fMRI yang diawasi sendiri secara efisien. Kemudian, kami mendemonstrasikan bahwa MinD-Vis dapat membangun kembali gambar yang sangat kredibel dengan detail semantik yang cocok dari rekaman otak menggunakan anotasi berpasangan dalam jumlah minimal dengan menambahkan pengkondisian ganda ke model difusi laten.
Peneliti mengklaim
Menurut hasil eksperimen, strategi mengungguli state-of-the-art dalam pemetaan semantik (klasifikasi semantik 100 arah) dan kualitas pembangkitan (FID) masing-masing sebesar 66% dan 41%. Model ini telah dijadikan tolok ukur baik secara kualitatif maupun kuantitatif. Untuk mengevaluasi kerangka kerja, studi menyeluruh tentang ablasi juga dilakukan.
Data pelatihan, kode, dan bobot model semuanya tersedia untuk umum permintaan.
Para peneliti percaya bahwa model tersebut dapat digunakan untuk mengembangkan prostetik bagi orang yang buta atau memiliki daya penglihatan rendah. Itu juga bisa digunakan untuk membantu orang dengan gangguan ingatan, seperti penyakit Alzheimer.
Baca lebih lanjut:
Penolakan tanggung jawab
Sejalan dengan Percayai pedoman Proyek, harap dicatat bahwa informasi yang diberikan pada halaman ini tidak dimaksudkan untuk dan tidak boleh ditafsirkan sebagai nasihat hukum, pajak, investasi, keuangan, atau bentuk nasihat lainnya. Penting untuk hanya menginvestasikan jumlah yang mampu Anda tanggung kerugiannya dan mencari nasihat keuangan independen jika Anda ragu. Untuk informasi lebih lanjut, kami menyarankan untuk merujuk pada syarat dan ketentuan serta halaman bantuan dan dukungan yang disediakan oleh penerbit atau pengiklan. MetaversePost berkomitmen terhadap pelaporan yang akurat dan tidak memihak, namun kondisi pasar dapat berubah tanpa pemberitahuan.
Tentang Penulis
Damir adalah pemimpin tim, manajer produk, dan editor di Metaverse Post, mencakup topik seperti AI/ML, AGI, LLM, Metaverse, dan Web3-bidang terkait. Artikelnya menarik lebih dari satu juta pengguna setiap bulan. Dia tampaknya ahli dengan pengalaman 10 tahun dalam SEO dan pemasaran digital. Damir telah disebutkan dalam Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, dan publikasi lainnya. Dia melakukan perjalanan antara UEA, Turki, Rusia, dan CIS sebagai pengembara digital. Damir memperoleh gelar sarjana dalam bidang fisika, yang menurutnya telah memberinya keterampilan berpikir kritis yang diperlukan untuk berhasil dalam lanskap internet yang selalu berubah.
lebih artikel
Damir adalah pemimpin tim, manajer produk, dan editor di Metaverse Post, mencakup topik seperti AI/ML, AGI, LLM, Metaverse, dan Web3-bidang terkait. Artikelnya menarik lebih dari satu juta pengguna setiap bulan. Dia tampaknya ahli dengan pengalaman 10 tahun dalam SEO dan pemasaran digital. Damir telah disebutkan dalam Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto, dan publikasi lainnya. Dia melakukan perjalanan antara UEA, Turki, Rusia, dan CIS sebagai pengembara digital. Damir memperoleh gelar sarjana dalam bidang fisika, yang menurutnya telah memberinya keterampilan berpikir kritis yang diperlukan untuk berhasil dalam lanskap internet yang selalu berubah.
