Nvidia eDiff-I ni e'lon qildi: uslublarni bir zumda uzatish bilan matn va tasvir sintezi uchun yangi generativ AI
Qisqacha
Nvidia korxonalarga yuqori sifatli va qiziqarli tasvirlarni yaratishda yordam berish uchun eDiff-I-ni ishga tushirdi
eDiff-I texnikasi muntazam ravishda DALL-E2 va ga qaraganda ko'proq sintez sifatini ishlab chiqaradi Stable diffusion
eDiff-I - bu yangi AI kontent yaratish vositasi beradi Yaqinda e'lon qilganidek, sotuvchilar va bizneslar uchun misli ko'rilmagan matndan tasvirga sintez qilish imkoniyatlari Nvidia. eDiff-I yordamida korxonalar qimmat uskunalar yoki professional yordamga muhtoj bo'lmasdan tez va oson yuqori sifatli, qiziqarli vizual tasvirlarni yaratishi mumkin. eDiff-I foydalanuvchi kiritgan ma'lumotlarni sharhlash va tegishli tasvirlarni yaratish uchun tabiiy tilni qayta ishlash (NLP) dan foydalanadi. Keyin AI tasvirlarni tahlil qiladi va kontekstdan kelib chiqib, eng mosini tanlaydi. Natijada turli maqsadlarda, masalan, marketing materiallari, ijtimoiy tarmoqlardagi postlar, elektron pochta kampaniyalari va boshqalar uchun ishlatilishi mumkin bo'lgan yuqori sifatli, professional ko'rinishdagi rasm.
eDiff-I a keyingi avlod generativ AI misli ko'rilmagan kontent yaratish vositasi matndan tasvirga sintez, tezkor uslubni uzatish va so'zlar bilan intuitiv bo'yash. Matndan vizual tasvirlarni yaratish uchun diffuziya modeli sifatida eDiff-I diffuziya modellarining xatti-harakatlari namuna olishning turli bosqichlarida o‘zgarib turishi haqidagi empirik xulosaga javoban har biri ma’lum bir shovqin oralig‘i uchun ixtisoslashgan ekspert denoising tarmoqlari ansamblini tayyorlashni taklif qiladi.
T5 matn o'rnatish, CLIP tasvirni o'rnatish va CLIP matn kiritishlari eDiff-I kontseptsiyasi uchun asos bo'lib xizmat qiladi. Ushbu metodologiya har qanday matn so'roviga javoban fotorealistik grafiklarni ishlab chiqishi mumkin.
U matndan tasvirga sintez qilishdan tashqari ikkita qo'shimcha imkoniyatlarni taqdim etadi: (1) uslubni uzatish, bu bizga mos yozuvlar uslubi tasviridan foydalangan holda yaratilgan namunaning uslubini boshqarish imkonini beradi va (2) "So'zlar bilan bo'yash" vositasi foydalanuvchilarga segmentatsiya xaritalarini tuvalga bo'yash orqali tasvirlar yaratish imkonini beradi.
Quvur uchta diffuziyali modellar kaskadidan iborat: 64×64 oʻlchamli namunalar yaratishi mumkin boʻlgan asosiy model va rasmlarni asta-sekin mos ravishda 256×256 va 1024×1024 piksellar soniga koʻpaytirishi mumkin boʻlgan ikkita oʻta oʻlchamli stek. Modellar kiritish sifatida sarlavhani olgandan keyin T5 XXL va matn kiritishni hisoblaydi. Ushbu rasm qo'shimchalari uslub vektori sifatida ishlatilishi mumkin. Keyin, bu o'rnatishlarni bizning kaskadimizga kiriting diffuziya modellari, bu asta-sekin 1024 x 1024 o'lchamli tasvirlarni ishlab chiqaradi.
eDiff-I yondashuvi ochiq manbali matndan tasvirga algoritmlari bilan solishtirganda doimiy ravishda sintez sifatini yaxshilaydi (Stable diffusion) va (DALL-E2).
CLIP tasvirni o'rnatishdan foydalanilganda, eDiff-I yondashuvi uslublarni uzatishni osonlashtiradi. eDiff-I birinchi navbatda chiqaradi KLIP Uslubga mos yozuvlar vektori sifatida foydalanish mumkin bo'lgan mos yozuvlar uslubidagi rasmdan rasm o'rnatish. Stilistik ma'lumotni quyidagi rasmning chap panelida ko'rish mumkin. Uslubni sozlash yoqilganda natijalar markaziy panelda ko'rsatiladi. Uslubni sozlash o'chirilganda natijalar o'ngdagi panelda ko'rsatiladi. Uslubni sozlash qo'llanilganda, eDiff-I modeli kirish sarlavhasi uslubiga ham to'g'ri keladigan natijalarni yaratadi. Uslubni sozlash o'chirilganda, tabiiy ko'rinishdagi fotosuratlar ishlab chiqariladi.
Iboralarni tanlash va ularni rasmga chizish orqali eDiff-I usuli foydalanuvchilari matn taklifida ko'rsatilgan narsalarning joylashishini o'zgartirishi mumkin. Shundan so'ng, model foydalanadi tasvirlarni yaratish uchun so'rov va xaritalar sarlavha va kiritish xaritasi bilan mos keladi.
Tegishli maqolalarni o'qing:
Masʼuliyatdan voz kechish
Bunga javoban Ishonch loyihasi bo'yicha ko'rsatmalar, iltimos, ushbu sahifada taqdim etilgan ma'lumotlar yuridik, soliq, investitsiya, moliyaviy yoki boshqa har qanday maslahat shakli sifatida talqin qilinmasligi va talqin qilinmasligini unutmang. Faqat yo'qotishingiz mumkin bo'lgan narsaga investitsiya qilish va agar shubhangiz bo'lsa, mustaqil moliyaviy maslahat olish muhimdir. Qo'shimcha ma'lumot olish uchun biz shartlar va emitent yoki reklama beruvchi tomonidan taqdim etilgan yordam va qo'llab-quvvatlash sahifalariga murojaat qilishni tavsiya qilamiz. MetaversePost to'g'ri, xolis hisobot berish majburiyatini oladi, lekin bozor sharoitlari ogohlantirilmasdan o'zgarishi mumkin.
Muallif haqida
Damir - guruh rahbari, mahsulot menejeri va muharrir Metaverse Post, AI/ML, AGI, LLMs, Metaverse va kabi mavzularni qamrab oladi Web3- tegishli sohalar. Uning maqolalari har oy milliondan ortiq foydalanuvchilarning katta auditoriyasini jalb qiladi. U SEO va raqamli marketing bo'yicha 10 yillik tajribaga ega mutaxassis bo'lib ko'rinadi. Damir haqida Mashable, Wired nashrlarida tilga olingan. Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto va boshqa nashrlar. U BAA, Turkiya, Rossiya va MDH davlatlari oʻrtasida raqamli koʻchmanchi sifatida sayohat qiladi. Damir fizika bo'yicha bakalavr darajasini oldi, uning fikricha, bu unga internetning doimiy o'zgaruvchan manzarasida muvaffaqiyatga erishish uchun zarur bo'lgan tanqidiy fikrlash qobiliyatlarini berdi.
Boshqa maqolalar
Damir - guruh rahbari, mahsulot menejeri va muharrir Metaverse Post, AI/ML, AGI, LLMs, Metaverse va kabi mavzularni qamrab oladi Web3- tegishli sohalar. Uning maqolalari har oy milliondan ortiq foydalanuvchilarning katta auditoriyasini jalb qiladi. U SEO va raqamli marketing bo'yicha 10 yillik tajribaga ega mutaxassis bo'lib ko'rinadi. Damir haqida Mashable, Wired nashrlarida tilga olingan. Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto va boshqa nashrlar. U BAA, Turkiya, Rossiya va MDH davlatlari oʻrtasida raqamli koʻchmanchi sifatida sayohat qiladi. Damir fizika bo'yicha bakalavr darajasini oldi, uning fikricha, bu unga internetning doimiy o'zgaruvchan manzarasida muvaffaqiyatga erishish uchun zarur bo'lgan tanqidiy fikrlash qobiliyatlarini berdi.
