ChatGPT Nugalėjo Kinijos pokalbių robotą Ernie visuose AI etalonuose
Trumpai
Paaiškėjo, kiek Kinija AI atsilieka nuo JAV.
Ekspertai įsitikinę, kad Ernie prarado visus 6 etalonus: semantinį supratimą, nuolatinio dialogo galimybes, logikos galimybes, kodavimo galimybes, asmenybės modeliavimą ir matematinius gebėjimus.
Galiausiai dabar aišku, kaip stipriai Kinija AI atsilieka nuo JAV. Tuo pačiu metu paaiškėjo, kad Turingo testas šiuolaikiniams kalbos modeliams yra tik vaikų darželis. Tokie pažangūs modeliai turėtų būti vertinami pagal jų pagrindimo gilumą ir tikslumą.
Intelektinės galios palyginimo rezultatai ChatGPT su savo pagrindine Kinijos konkurentas Ernie Botas yra apgaubti rūku. Viena vertus, ekspertai yra įsitikinę, kad Ernie pralaimėjo visuose šešiuose etalonuose:
- Semantinis supratimas;
- Nuolatinio dialogo galimybes;
- Logikos galimybės;
- kodavimo galimybės;
- Asmenybės modeliavimas;
- Matematinis gebėjimas.
Kita vertus, ekspertai detalių nepateikia, o patiems patikrinti nėra lengva, nes testavimas buvo kinų kalba, prieiga prie Ernie ribota, o Baidu API reikalingas kiniškas telefono numeris.
Bet dabar, dėka Jeffrey Ding, galite skaityti palyginimo detales of ChatGPT su Ernie Botu, ne gremėzdišku mašininiu vertimu su svarbių detalių klaidomis, o gera ir tikslia anglų kalba, kurią išvertė specialistas.
Pradėkime nuo paaiškinimo: modeliai turėtų būti vertinami, kaip ir CŽV analitikai, pagal jų pagrindimo gylį ir tikslumą. Lyginamasis robotų testavimas parodė, kad semantinis supratimas tampa pagrindiniu veiksniu tikrinant modelio pažintinius gebėjimus. Ir nuo klausimo "Kas yra supratimas?" yra subtilus ir dviprasmiškas, sunku patikrinti semantikos supratimo laipsnį (o juo labiau nežmogiškam intelektui, kuriame visi pažinimo procesai išdėstyti labai nežmogiškai). Štai kodėl tikrinamas botų pateiktų pagrindimų gylis ir tikslumas.
Štai tikras pavyzdys. Klausimas: „Tėtis ir mama tuokiasi; ar tai laikoma gimininga ar mišria santuoka?
- Ernie Boto atsakymas: Kinijos įstatymai numato, kad tiesioginiams kraujo giminaičiams ir kraujo giminaičiams per tris kartas draudžiama tuoktis. Kitaip tariant, santuokos tarp artimų giminaičių, tokių kaip pusbroliai, dėdės ir pan., yra draudžiamos. O genetiniu požiūriu mišrios santuokos padidina kai kurių įprastų genetinių ligų, tokių kaip įgimta demencija, albinizmas, širdies liga ir kt., riziką.. Todėl dėl ateities kartų sveikatos žmonėms patariama vengti mišrių santuokų.
- ChatGPT atsakymas: Tėtis ir mama yra biologiniai tėvai. Jie nėra susiję kraujo ryšiais, todėl jų sąjunga nėra gimininga. Inbredingas – tai artimai giminingų žmonių santuoka.
Atsakymų įvertinimo rezultatas akivaizdus: ChatGPT nugalėjo dėl pagrindimo tikslumo, vengiant gilintis į Kinijos teisės aktus, kurių čia nereikia.
Nepaisant to, kad Ernie Bot pralaimėjo visose kategorijose, nepasirodydamas iš geriausio būdo, net ir asmenybės modeliavime, apskritai jis atliko gerą darbą, net apsimesdamas ne tik žmogumi, bet ir kačiuku.
Tačiau jo supratimas nėra stiprioji pusė. Ir tai reiškia, kad Kinija AI srityje atsilieka nuo JAV nedideliu, bet esminiu klausimu. Ir tai nustato Kinija grįžo iš JAV lenktynėse su AGI visu ratu.
- Baidu kuria AI pokalbių roboto paslaugą, vadinamą Ernis Botas, kuri ilgainiui bus integruota į paieškos variklį. Tai leis Baidu paieškos varikliui generuoti panašius atsakymus į vartotojų užklausas, panašius į „Google“ bardas ir Microsoft Bing.
- Secoo grupė, prabangi el. prekybos platforma Kinijoje, planuoja naudoti dirbtinio intelekto sukurtą turinį ir ChatGPT technologijas, kad padidintų išmaniąją rinkodarą. Platforma pateikė paraišką prieigai prie OpenAIS GPT-4 API ir yra vienas iš pirmųjų ekologinių Baidu ERNIE Bot partnerių.
Skaitykite daugiau apie AI:
Atsakomybės neigimas
Remdamasi tuo, Pasitikėjimo projekto gairės, atkreipkite dėmesį, kad šiame puslapyje pateikta informacija nėra skirta ir neturėtų būti aiškinama kaip teisinė, mokesčių, investicinė, finansinė ar bet kokia kita konsultacija. Svarbu investuoti tik tai, ką galite sau leisti prarasti, ir, jei turite kokių nors abejonių, kreiptis į nepriklausomą finansinę konsultaciją. Norėdami gauti daugiau informacijos, siūlome peržiūrėti taisykles ir nuostatas bei pagalbos ir palaikymo puslapius, kuriuos pateikia išdavėjas arba reklamuotojas. MetaversePost yra įsipareigojusi teikti tikslias, nešališkas ataskaitas, tačiau rinkos sąlygos gali keistis be įspėjimo.
Apie autorių
Damiras yra komandos vadovas, produktų vadovas ir redaktorius Metaverse Post, apimantis tokias temas kaip AI/ML, AGI, LLM, Metaverse ir Web3– susijusiose srityse. Jo straipsniai kas mėnesį pritraukia didžiulę daugiau nei milijono vartotojų auditoriją. Atrodo, kad jis yra ekspertas, turintis 10 metų SEO ir skaitmeninės rinkodaros patirtį. Damiras buvo paminėtas Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ir kiti leidiniai. Jis keliauja tarp JAE, Turkijos, Rusijos ir NVS kaip skaitmeninis klajoklis. Damiras įgijo fizikos bakalauro laipsnį, kuris, jo manymu, suteikė jam kritinio mąstymo įgūdžių, reikalingų sėkmingam nuolat besikeičiančiame interneto peizaže.
Daugiau straipsnių
Damiras yra komandos vadovas, produktų vadovas ir redaktorius Metaverse Post, apimantis tokias temas kaip AI/ML, AGI, LLM, Metaverse ir Web3– susijusiose srityse. Jo straipsniai kas mėnesį pritraukia didžiulę daugiau nei milijono vartotojų auditoriją. Atrodo, kad jis yra ekspertas, turintis 10 metų SEO ir skaitmeninės rinkodaros patirtį. Damiras buvo paminėtas Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto ir kiti leidiniai. Jis keliauja tarp JAE, Turkijos, Rusijos ir NVS kaip skaitmeninis klajoklis. Damiras įgijo fizikos bakalauro laipsnį, kuris, jo manymu, suteikė jam kritinio mąstymo įgūdžių, reikalingų sėkmingam nuolat besikeičiančiame interneto peizaže.
