OpenFlamingo: Meta AI va LAION-dan yangi ochiq manbali tasvirdan matnga ramka.
Qisqacha
OpenFlamingo bu DeepMind Flamingo modelining ochiq manbali versiyasi boʻlib, uning ustiga qurilgan. LLaMA katta til modeli.
Ishlab chiquvchilar ko'rish tilidagi muammolarni hal qila oladigan va teng bo'lgan multimodal tizim yaratishga umid qilmoqdalar GPT-4vizual va matn kiritish bilan ishlashda uning kuchi va moslashuvchanligi.
DeepMind Flamingo modelining ochiq manbali versiyasi, OpenFlamingo, endigina chiqarilgan. OpenFlamingo - bu katta multimodal modellarni (LMM) o'qitish va baholash imkonini beruvchi asosdir. OpenFlamingo tepasida qurilgan LLaMA Meta AI tomonidan ishlab chiqilgan katta til modeli.
| Ko'proq o'qing: Qanday ishlatish Midjourney Forever Forever: 5 oddiy qadam |
Ishlab chiquvchilarning ushbu birinchi nashrga qo'shgan hissasi quyidagicha:
- Matn va vizual ketma-ketlikni birlashtirgan juda katta multimodal ma'lumotlar to'plami.
- Ko'rish va tilni o'z ichiga olgan faoliyat uchun kontekstda o'rganishni baholash uchun benchmark.
- Bizning dastlabki versiyasi LLaMAOpenFlamingo-9B modeliga asoslangan.
OpenFlamingo orqali ishlab chiquvchilar ko'rish tilidagi turli muammolarni hal qila oladigan multimodal tizim yaratishga umid qilmoqdalar. Yakuniy maqsad - tenglik GPT-4vizual va matn kiritish bilan ishlashda uning kuchi va moslashuvchanligi. Ishlab chiquvchilar DeepMind’ning Flamingo modelining ochiq manbali versiyasini, bu maqsadga erishish uchun tasvirlar, videolar va matnlarni qayta ishlash va mulohaza yuritishga qodir LMMni ishlab chiqmoqda. Ishlab chiquvchilar butunlay ochiq kodli modellarni ishlab chiqishga bag'ishlangan, chunki ular shaffoflik hamkorlikni rag'batlantirish, rivojlanishni tezlashtirish va zamonaviy LMMlarga kirishni demokratlashtirish uchun juda muhim deb o'ylashadi.
Ular bizning OpenFlamingo-9B modelimizning dastlabki nazorat punktini taqdim qilmoqdalar. Model hali to'liq optimallashtirilmagan bo'lsa-da, u loyihaning va'dasini ko'rsatadi. Ishlab chiquvchilar hamkorlik qilish va hamjamiyatning fikr-mulohazalarini olish orqali yaxshiroq LMMlarni tayyorlashlari mumkin. Ular ishlab chiqish jarayonida ishtirok etish uchun jamoatchilikni fikr bildirishga va omborga qo'shishga taklif qiladilar.
Amalga oshirish Flamingo-nikiga juda o'xshaydi. Flamingo modellari interleaved matnli keng ko'lamli veb-ma'lumotlar to'plamlarida o'qitilishi kerak va grafik ularni kontekstda bir necha marta o'rganish ko'nikmalari bilan jihozlash. Dastlabki Flamingo tadqiqotida taklif qilingan arxitektura (Perceiver resamplers, o'zaro e'tibor qatlamlari) OpenFlamingoda amalga oshirilgan. Biroq, Flamingo-ning o'quv ma'lumotlari keng omma uchun ochiq bo'lmaganligi sababli, ishlab chiquvchilar modellarni o'qitish uchun ochiq manba ma'lumotlar to'plamidan foydalanadilar. Yangi nashr etilgan OpenFlamingo-9B nazorat punkti LAION-10B dan 2 million namunalar va yangi Multimodal C5 ma'lumotlar to'plamidan 4 million namunalar bo'yicha maxsus o'qitildi.
Ishlab chiquvchilar, shuningdek, bizning tugallanmagan LMM OpenFlamingo-9B-dan nazorat punktini ham o'z ichiga oladi. LLaMA 7B va CLIP ViT/L-14, relizning bir qismi sifatida. Garchi ushbu kontseptsiya hali ham ishlab chiqilayotgan bo'lsa ham, jamiyat allaqachon undan katta foyda olishi mumkin.
Boshlash uchun ga qarang GitHub manba va demo.
AI haqida ko'proq o'qing:
Masʼuliyatdan voz kechish
Bunga javoban Ishonch loyihasi bo'yicha ko'rsatmalar, iltimos, ushbu sahifada taqdim etilgan ma'lumotlar yuridik, soliq, investitsiya, moliyaviy yoki boshqa har qanday maslahat shakli sifatida talqin qilinmasligi va talqin qilinmasligini unutmang. Faqat yo'qotishingiz mumkin bo'lgan narsaga investitsiya qilish va agar shubhangiz bo'lsa, mustaqil moliyaviy maslahat olish muhimdir. Qo'shimcha ma'lumot olish uchun biz shartlar va emitent yoki reklama beruvchi tomonidan taqdim etilgan yordam va qo'llab-quvvatlash sahifalariga murojaat qilishni tavsiya qilamiz. MetaversePost to'g'ri, xolis hisobot berish majburiyatini oladi, lekin bozor sharoitlari ogohlantirilmasdan o'zgarishi mumkin.
Muallif haqida
Damir - guruh rahbari, mahsulot menejeri va muharrir Metaverse Post, AI/ML, AGI, LLMs, Metaverse va kabi mavzularni qamrab oladi Web3- tegishli sohalar. Uning maqolalari har oy milliondan ortiq foydalanuvchilarning katta auditoriyasini jalb qiladi. U SEO va raqamli marketing bo'yicha 10 yillik tajribaga ega mutaxassis bo'lib ko'rinadi. Damir haqida Mashable, Wired nashrlarida tilga olingan. Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto va boshqa nashrlar. U BAA, Turkiya, Rossiya va MDH davlatlari oʻrtasida raqamli koʻchmanchi sifatida sayohat qiladi. Damir fizika bo'yicha bakalavr darajasini oldi, uning fikricha, bu unga internetning doimiy o'zgaruvchan manzarasida muvaffaqiyatga erishish uchun zarur bo'lgan tanqidiy fikrlash qobiliyatlarini berdi.
Boshqa maqolalar
Damir - guruh rahbari, mahsulot menejeri va muharrir Metaverse Post, AI/ML, AGI, LLMs, Metaverse va kabi mavzularni qamrab oladi Web3- tegishli sohalar. Uning maqolalari har oy milliondan ortiq foydalanuvchilarning katta auditoriyasini jalb qiladi. U SEO va raqamli marketing bo'yicha 10 yillik tajribaga ega mutaxassis bo'lib ko'rinadi. Damir haqida Mashable, Wired nashrlarida tilga olingan. Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto va boshqa nashrlar. U BAA, Turkiya, Rossiya va MDH davlatlari oʻrtasida raqamli koʻchmanchi sifatida sayohat qiladi. Damir fizika bo'yicha bakalavr darajasini oldi, uning fikricha, bu unga internetning doimiy o'zgaruvchan manzarasida muvaffaqiyatga erishish uchun zarur bo'lgan tanqidiy fikrlash qobiliyatlarini berdi.
