GPT-5 Mokymai kainuos 2.5 mlrd. USD ir prasidės kitais metais
„Twitter“ vartotojas Martinas Shkreli iš Niujorko tai paskelbė šiandien GPT-5 mokymams reikės 2.0–2.5 mlrd. Šie mokymai apimtų 500,000 100 H90s Tensor Core GPU per XNUMX dienų arba alternatyvią konfigūraciją. Mokymai turėtų prasidėti kitais metais.
OpenAI aktyviai dirba stiprinti GPT-4 su įvairiomis galimybėmis, pavyzdžiui, įsikūnijimas, agentūra, sokratinis samprotavimas, žinių grafikai, pasaulio modeliai, daugiarūšiškumas, planavimas, semantinis aiškinamumas, avilio protas, kontrolė ir ribotumas, taip pat mažesnės didelės vertės užduotys.
H100/A100 gamybos mastai kelia klausimų. Ar užteks šių GPU tokiai svarbiai veiklai? Tikimasi, kad iki metų pabaigos bus pagaminta apie 1 mln. H100, o kitais metais gali būti išsiųsta apie 5 mln.
Kalbant apie kainą, yra tinkama pastaba apie GPU. Šių GPU išlaidų įtraukimas į mokymo išlaidas gali būti klaidinantis, nes po mokymo proceso jie nepasensta. Vien tie GPU gali siekti 20 mlrd.
Verta paminėti, kad Chip Manufacturing firmos Sustainable Metal Cloud (SMC) didžiausias H100 gamybos pajėgumas šiuo metu yra 15,000 50,000 vienetų per mėnesį, tačiau jie padidino gamybą iki maždaug XNUMX XNUMX vienetų per mėnesį.
Kalbant apie elektros sąnaudas, jos sudaro palyginti nedidelę visų skaičiavimo sąnaudų dalį. Žvelgiant į perspektyvą, 6,000,000 1 XNUMX kWh būtų maždaug XNUMX mln.
Atrodo, kad iki kitų metų įsigyti 500,000 100 HXNUMX yra sudėtinga užduotis, net ir su „Microsoft“ palaikymu. Be to, kyla klausimų dėl išvadų kaina jei mokymo procesas iš tiesų yra toks daug skaičiavimo reikalaujantis, kaip siūloma.
Kontekste Nvidia rinka 2023 m., pastebėtina, kad jų sėkmė išaugo trigubai ir viršijo 1 trilijoną USD. Šis augimas daugiausia gali būti siejamas su padidėjusiu Nvidia lustų pritaikymu dirbtinio intelekto programose. Tačiau svarbu tai atsižvelgti JAV eksporto suvaržymai apribojo aukščiausios klasės AI lustų pardavimą Kinijos rinkoje, o tai gali turėti įtakos gamybos ir mokymo išlaidoms.
„Nvidia“ uždirba beveik tūkstantį kartų didesnį pelno procentą Anot Barrono vyresniojo rašytojo Tae Kimo, už kiekvieną parduodamą H100 GPU greitintuvą. Tai reiškia, kad „Nvidia“ gatvės kaina nuo maždaug 25,000 30,000 USD iki 3,320 100 USD už kiekvieną HPC greitintuvą apima 2024 150 USD už lustą ir periferinius komponentus. Sąnaudų analizė neaiški, tačiau manoma, kad tai grynai gamybos sąnaudų klausimas. Taip pat reikia atsižvelgti į „Nvidia“ mokslinių tyrimų ir plėtros išlaidas, nes tokių lustų kaip H2027 kūrimas reikalauja tūkstančių valandų iš specializuotų darbuotojų. Tačiau „Nvidia“ dirbtinį intelektą greitinantys produktai jau parduodami iki XNUMX m., o AI greitintuvų rinka iki XNUMX m. turėtų būti apie XNUMX mlrd.
Bendrovė gauna naudos iš savo infrastruktūros ir produktų paketo, tačiau biudžetai ir alternatyvios išlaidos gali apriboti investicijas į kitas sritis arba apriboti riziką tyrimų ir plėtros vietose.
Atsakomybės neigimas
Remdamasi tuo, Pasitikėjimo projekto gairės, atkreipkite dėmesį, kad šiame puslapyje pateikta informacija nėra skirta ir neturėtų būti aiškinama kaip teisinė, mokesčių, investicinė, finansinė ar bet kokia kita konsultacija. Svarbu investuoti tik tai, ką galite sau leisti prarasti, ir, jei turite kokių nors abejonių, kreiptis į nepriklausomą finansinę konsultaciją. Norėdami gauti daugiau informacijos, siūlome peržiūrėti taisykles ir nuostatas bei pagalbos ir palaikymo puslapius, kuriuos pateikia išdavėjas arba reklamuotojas. MetaversePost yra įsipareigojusi teikti tikslias, nešališkas ataskaitas, tačiau rinkos sąlygos gali keistis be įspėjimo.
Apie autorių
Damiras yra komandos vadovas, produktų vadovas ir redaktorius Metaverse Post, apimantis tokias temas kaip AI/ML, AGI, LLM, Metaverse ir Web3– susijusiose srityse. Jo straipsniai kas mėnesį pritraukia didžiulę daugiau nei milijono vartotojų auditoriją. Atrodo, kad jis yra ekspertas, turintis 10 metų SEO ir skaitmeninės rinkodaros patirtį. Damiras buvo paminėtas Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ir kiti leidiniai. Jis keliauja tarp JAE, Turkijos, Rusijos ir NVS kaip skaitmeninis klajoklis. Damiras įgijo fizikos bakalauro laipsnį, kuris, jo manymu, suteikė jam kritinio mąstymo įgūdžių, reikalingų sėkmingam nuolat besikeičiančiame interneto peizaže.
Daugiau straipsnių
Damiras yra komandos vadovas, produktų vadovas ir redaktorius Metaverse Post, apimantis tokias temas kaip AI/ML, AGI, LLM, Metaverse ir Web3– susijusiose srityse. Jo straipsniai kas mėnesį pritraukia didžiulę daugiau nei milijono vartotojų auditoriją. Atrodo, kad jis yra ekspertas, turintis 10 metų SEO ir skaitmeninės rinkodaros patirtį. Damiras buvo paminėtas Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ir kiti leidiniai. Jis keliauja tarp JAE, Turkijos, Rusijos ir NVS kaip skaitmeninis klajoklis. Damiras įgijo fizikos bakalauro laipsnį, kuris, jo manymu, suteikė jam kritinio mąstymo įgūdžių, reikalingų sėkmingam nuolat besikeičiančiame interneto peizaže.
