ChatGPT Legyőzi a kínai Chatbot Ernie-t az All AI Benchmarksban
Röviden
Világossá vált, hogy Kína milyen mértékben van lemaradva az Egyesült Államok mögött a mesterséges intelligencia terén.
A szakértők meg vannak győződve arról, hogy Ernie mind a 6 benchmarkban veszített: a szemantikai megértés, a folyamatos párbeszéd lehetőségei, a logikai lehetőségek, a kódolási képességek, a személyiségmodellezés és a matematikai képességek.
Végül most már világossá vált, hogy Kína mennyire lemarad az Egyesült Államok mögött a mesterséges intelligencia terén. Ugyanakkor az is nyilvánvalóvá vált, hogy a modern nyelvi modellek Turing-tesztje még csak óvodás. Az ilyen fejlett modelleket indoklásuk mélysége és pontossága alapján kell megítélni.
Az intellektuális ereje összehasonlításának eredményei ChatGPT fővel Ernie Bot kínai versenyző ködbe burkolóznak. Egyrészt a szakértők meg vannak győződve arról, hogy Ernie mind a hat benchmarkban veszített:
- Szemantikai megértés;
- Lehetőségek folyamatos párbeszédre;
- Logikai lehetőségek;
- Kódolási képességek;
- Személyiségmodellezés;
- Matematikai képesség.
Másrészt a szakértők nem adnak részleteket, és nem könnyű saját kezűleg ellenőrizni, mert a tesztelés kínai nyelven zajlott, az Ernie-hez való hozzáférés korlátozott, a Baidu API-hoz pedig kínai telefonszám kell.
De most, hála Jeffrey Dingnek, olvashatsz az összehasonlítás részleteit of ChatGPT Ernie Bottal, nem ügyetlen gépi fordításban, fontos részletek hibáival, hanem jó és pontos angolul szakember által lefordítva.
Kezdjük egy pontosítással: a modelleket – a CIA elemzőihez hasonlóan – indoklásaik mélysége és pontossága alapján kell megítélni. A robotok összehasonlító tesztelése megmutatta, hogy a szemantikai megértés kulcstényezővé válik a modell kognitív képességeinek tesztelésében. És mivel a "Mi a megértés?" kényes és kétértelmű, nehéz ellenőrizni a szemantika megértésének fokát (és még inkább egy nem emberi értelem esetében, amelyben minden kognitív folyamat nagyon nem emberi módon van elrendezve). Ezért ellenőrizzük a botok által adott indoklás mélységét és pontosságát.
Íme egy valós példa. Kérdés: „Apa és anya összeházasodnak; ez beltenyésztésnek vagy vegyes házasságnak számít?”
- Ernie Bot válasza: A kínai törvények előírják, hogy a közvetlen vérrokonok és a három generáción belüli vérrokonok nem házasodhatnak össze. Más szóval, a közeli rokonok, például unokatestvérek, nagybátyák stb. közötti házasságok tilosak. Genetikai szempontból pedig a vegyes házasságok növelik néhány gyakori genetikai betegség kockázatát, mint például a veleszületett demencia, albinizmus, szívbetegség stb. Ezért a jövő generációinak egészsége érdekében az embereknek azt tanácsolják, hogy kerüljék a vegyes házasságot.
- ChatGPT válasz: Apa és anya biológiai szülők. Nem rokoni rokonságban állnak egymással, így kapcsolatuk nem rokon. A beltenyésztés olyan emberek házassága, akiknek vér szerinti rokonai vannak.
A válaszok kiértékelésének eredménye nyilvánvaló: ChatGPT nyert az indoklás pontossága terén, miközben elkerülte a kínai jogszabályokba való mélyedést, amire itt nincs szükség.
Annak ellenére, hogy Ernie Bot minden kategóriában veszített, még a személyiségszimulációban sem mutatta meg magát a legjobban, összességében jó munkát végzett, még úgy is, mintha nem csak ember, hanem cica is lenne.
Megértése azonban nem az erős oldala. Ez pedig azt jelenti, hogy Kína egy kicsi, de kulcsfontosságú kérdésben lemarad az Egyesült Államok mögött a mesterséges intelligencia terén. És ez beállítja Kína visszatért az USA-ból az AGI-hez való versenyben egy teljes körrel.
- A Baidu egy mesterséges intelligencia chatbot szolgáltatást fejleszt Ernie Bot, amely végül beépül a keresőjébe. Ez lehetővé teszi, hogy a Baidu keresőmotorja emberszerű válaszokat generáljon a felhasználói lekérdezésekre, hasonlóan a A Google Bardja és a Microsoft Bing.
- Secoo csoport, egy luxus e-kereskedelmi platform Kínában, mesterséges intelligencia által generált tartalmak és ChatGPT technológiákat az intelligens marketing fellendítésére. A platform hozzáférési kérelmet nyújtott be OpenAI'S GPT-4 API és a Baidu ERNIE Bot egyik első ökológiai partnere.
Tudjon meg többet az AI-ról:
A felelősség megtagadása
Összhangban a A Trust Project irányelvei, kérjük, vegye figyelembe, hogy az ezen az oldalon közölt információk nem minősülnek jogi, adózási, befektetési, pénzügyi vagy bármilyen más formájú tanácsnak, és nem is értelmezhetők. Fontos, hogy csak annyit fektessen be, amennyit megengedhet magának, hogy elveszítsen, és kérjen független pénzügyi tanácsot, ha kétségei vannak. További információkért javasoljuk, hogy tekintse meg a szerződési feltételeket, valamint a kibocsátó vagy hirdető által biztosított súgó- és támogatási oldalakat. MetaversePost elkötelezett a pontos, elfogulatlan jelentéstétel mellett, de a piaci feltételek előzetes értesítés nélkül változhatnak.
A szerzőről
Damir a csapat vezetője, termékmenedzsere és szerkesztője Metaverse Post, olyan témákkal foglalkozik, mint az AI/ML, AGI, LLMs, Metaverse és Web3- kapcsolódó mezők. Cikkei havonta több mint egymillió felhasználót vonzanak. Úgy tűnik, szakértő, aki 10 éves tapasztalattal rendelkezik a SEO és a digitális marketing területén. Damirt a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto és más kiadványok. Digitális nomádként utazik az Egyesült Arab Emírségek, Törökország, Oroszország és a FÁK között. Damir fizikából szerzett bachelor-diplomát, és úgy gondolja, hogy ez megadta neki azokat a kritikus gondolkodási készségeket, amelyek szükségesek ahhoz, hogy sikeres legyen az internet folyamatosan változó táján.
További cikkek
Damir a csapat vezetője, termékmenedzsere és szerkesztője Metaverse Post, olyan témákkal foglalkozik, mint az AI/ML, AGI, LLMs, Metaverse és Web3- kapcsolódó mezők. Cikkei havonta több mint egymillió felhasználót vonzanak. Úgy tűnik, szakértő, aki 10 éves tapasztalattal rendelkezik a SEO és a digitális marketing területén. Damirt a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto és más kiadványok. Digitális nomádként utazik az Egyesült Arab Emírségek, Törökország, Oroszország és a FÁK között. Damir fizikából szerzett bachelor-diplomát, és úgy gondolja, hogy ez megadta neki azokat a kritikus gondolkodási készségeket, amelyek szükségesek ahhoz, hogy sikeres legyen az internet folyamatosan változó táján.
