ERNIE-ViLG 2.0: Baidu-ning yangi matndan tasvirga modeli Dalle-2 va undan ustun turadi. Stable Diffusion
Qisqacha
Ikkala Dalle-2 va Stable Diffusion ERNIE-ViLG 2.0 tomonidan sezilarli darajada oshib ketdi
ERNIE-ViLG 2.0 Dalle-2 va ga qaraganda yaxshiroq ishlashni taklif qiluvchi matndan tasvirga model Stable Diffusion, hozirda mavjud bo'lgan ikkita eng mashhur matndan tasvirga modellar. Yangi model Baidu tadqiqotchilari guruhi tomonidan ishlab chiqilgan va o'qitilgan va natijalar hayratlanarli.
Natijalar shuni ko'rsatdiki, ERNIE-ViLG 2.0 Dalle-2 va undan sezilarli darajada ustun keldi. Stable Diffusion. Bu muhim yutuq va ERNIE ramkasining kuchini namoyish etadi. The Metaverse Post jamoasi ERNIE-ViLG 2.0 ni solishtirdi Stable Diffusion quyida:
Ushbu natijalar ERNIE-ViLG 2.0 yanada samaraliroq degan gipotezani kuchli qo'llab-quvvatlaydi. Dalle-2 va ikkalasiga qaraganda matndan tasvirga tizim Stable Diffusion.
Unet arxitekturasidan Stable Diffusion asos qilib olinadi, lekin o'zgartirishlar bilan:
- Denoising mutaxassislarining aralashmasi: Bitta o'rniga 10 ta neyron tarmoqlar mavjud bo'lib, ularning har biri faqat ma'lum diffuziya bosqichlari uchun javobgardir.
- Matnni bilish: Kalit so'zlar ko'proq og'irlikda bo'lishi uchun so'rovdagi so'zlarni avtomatik ravishda o'lchaydi.
- Vizual bilim: Trening davomida oraliq avlod natijalari bo'yicha ob'ektlar aniqlandi va ob'ektlar bo'lgan hududlarda yo'qotish funktsiyasining og'irligi oshirildi.
Natijada, dunyodagi eng katta matndan tasvirga model modelni o'rgatish uchun 24 milliard parametr (SD dan 10 baravar katta) bilan chiqdi.
Oldingi modellar bilan solishtirganda, ERNIE-ViLG 2.0 bir vaqtning o'zida ViLG-300 ikki tilda sinovdan o'tkazilganda tasvir sifati va tasvirning matnga mosligi jihatidan ulardan ancha ustundir. so'rovi shaxs tomonidan o'rnatiladi.
Ko'rsatmalar avtomatik ravishda xitoy tilidan ingliz tiliga tarjima qilinadi HuggingFace AIga yuborishdan oldin ommaviy demo. Ko'pgina xususiyatlar shundan kelib chiqadi.
- ERNIE xalqaro jamoat arboblarini bilmaydi. Masalan, ERNIE Arnold Shvartseneggerni tanimaydi. Bu, albatta, Xitoyda mahalliy sevimlilarga ega.
- Natijada, mashhur ismlardan foydalanish usuli sifatni keskin oshirishga yordam beradi yuzlari bajarilmaydi.
- Xitoy tilidan tarjima tufayli biroz buzilish kutishingiz mumkin, shuning uchun xitoy tilini bilmasangiz, sizni kutilmagan hodisalar kutib turishi mumkin.
- Hatto Greg Rutkovski haqida hech narsa bilmaydi.
Tegishli maqolalarni o'qing:
Masʼuliyatdan voz kechish
Bunga javoban Ishonch loyihasi bo'yicha ko'rsatmalar, iltimos, ushbu sahifada taqdim etilgan ma'lumotlar yuridik, soliq, investitsiya, moliyaviy yoki boshqa har qanday maslahat shakli sifatida talqin qilinmasligi va talqin qilinmasligini unutmang. Faqat yo'qotishingiz mumkin bo'lgan narsaga investitsiya qilish va agar shubhangiz bo'lsa, mustaqil moliyaviy maslahat olish muhimdir. Qo'shimcha ma'lumot olish uchun biz shartlar va emitent yoki reklama beruvchi tomonidan taqdim etilgan yordam va qo'llab-quvvatlash sahifalariga murojaat qilishni tavsiya qilamiz. MetaversePost to'g'ri, xolis hisobot berish majburiyatini oladi, lekin bozor sharoitlari ogohlantirilmasdan o'zgarishi mumkin.
Muallif haqida
Damir - guruh rahbari, mahsulot menejeri va muharrir Metaverse Post, AI/ML, AGI, LLMs, Metaverse va kabi mavzularni qamrab oladi Web3- tegishli sohalar. Uning maqolalari har oy milliondan ortiq foydalanuvchilarning katta auditoriyasini jalb qiladi. U SEO va raqamli marketing bo'yicha 10 yillik tajribaga ega mutaxassis bo'lib ko'rinadi. Damir haqida Mashable, Wired nashrlarida tilga olingan. Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto va boshqa nashrlar. U BAA, Turkiya, Rossiya va MDH davlatlari oʻrtasida raqamli koʻchmanchi sifatida sayohat qiladi. Damir fizika bo'yicha bakalavr darajasini oldi, uning fikricha, bu unga internetning doimiy o'zgaruvchan manzarasida muvaffaqiyatga erishish uchun zarur bo'lgan tanqidiy fikrlash qobiliyatlarini berdi.
Boshqa maqolalar
Damir - guruh rahbari, mahsulot menejeri va muharrir Metaverse Post, AI/ML, AGI, LLMs, Metaverse va kabi mavzularni qamrab oladi Web3- tegishli sohalar. Uning maqolalari har oy milliondan ortiq foydalanuvchilarning katta auditoriyasini jalb qiladi. U SEO va raqamli marketing bo'yicha 10 yillik tajribaga ega mutaxassis bo'lib ko'rinadi. Damir haqida Mashable, Wired nashrlarida tilga olingan. Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto va boshqa nashrlar. U BAA, Turkiya, Rossiya va MDH davlatlari oʻrtasida raqamli koʻchmanchi sifatida sayohat qiladi. Damir fizika bo'yicha bakalavr darajasini oldi, uning fikricha, bu unga internetning doimiy o'zgaruvchan manzarasida muvaffaqiyatga erishish uchun zarur bo'lgan tanqidiy fikrlash qobiliyatlarini berdi.
