ChatGPT Besegrar den kinesiska chatboten Ernie i alla AI-riktmärken
I korthet
I vilken grad Kina släpar efter USA i AI har blivit tydligt.
Experter är övertygade om att Ernie förlorade i alla 6 riktmärken: semantisk förståelse, möjligheter till kontinuerlig dialog, logiska möjligheter, kodningsförmåga, personlighetsmodellering och matematisk förmåga.
Slutligen är det nu klart exakt hur illa Kina ligger efter USA i AI. Samtidigt har det också blivit uppenbart att Turingtestet för moderna språkmodeller bara är dagis. Sådana avancerade modeller bör bedömas efter djupet och noggrannheten i deras motiveringar.
Resultaten av att jämföra den intellektuella kraften hos ChatGPT med dess huvudsakliga Kinesiska konkurrenten Ernie Bot är höljda i dimma. Å ena sidan är experter övertygade om att Ernie förlorade i alla sex riktmärken:
- Semantisk förståelse;
- Möjligheter till kontinuerlig dialog;
- Logiska möjligheter;
- Kodningsmöjligheter;
- Personlighetsmodellering;
- Matematisk förmåga.
Å andra sidan ger experter inga detaljer, och det är inte lätt att kontrollera det själv eftersom testet var på kinesiska, tillgången till Ernie är begränsad och Baidu API kräver ett kinesiskt telefonnummer.
Men nu, tack vare Jeffrey Ding, kan du läsa detaljerna i jämförelsen of ChatGPT med Ernie Bot, inte i klumpig maskinöversättning med fel i viktiga detaljer, utan på bra och korrekt engelska översatt av en specialist.
Låt oss börja med ett förtydligande: Modeller bör bedömas, som CIA-analytiker, efter djupet och noggrannheten i deras motiveringar. Jämförande testning av bots har visat att semantisk förståelse blir en nyckelfaktor för att testa modellens kognitiva förmågor. Och eftersom frågan "Vad är förståelse?" är känslig och tvetydig är det svårt att kontrollera graden av förståelse av semantik (och ännu mer för ett icke-mänskligt intellekt, där alla kognitiva processer är ordnade mycket icke-mänskligt). Det är därför det som kontrolleras är djupet och noggrannheten i de motiveringar som ges av bots.
Här är ett verkligt exempel. Fråga: ”Pappa och mamma ska gifta sig; anses detta vara inavel eller ett blandäktenskap?”
- Ernie Bots svar: Kinas lag föreskriver att direkta släktingar och släktingar inom tre generationer är förbjudna att gifta sig. Med andra ord är äktenskap mellan nära släktingar, såsom kusiner, farbröder etc., förbjudna. Och ur en genetisk synvinkel ökar blandäktenskap risken för vissa vanliga genetiska sjukdomar, såsom medfödd demens, albinism, hjärtsjukdomar etc. Därför, för framtida generationers hälsa, rekommenderas människor att undvika blandäktenskap.
- ChatGPT svar: Pappa och mamma är biologiska föräldrar. De är inte släkt med blod, så deras förening är inte släkt. Inavel är äktenskapet mellan människor som är nära släkt med blod.
Resultatet av att utvärdera svaren är uppenbart: ChatGPT vunnit när det gäller riktigheten av motiveringen samtidigt som man undviker djupet av att gräva i kinesisk lagstiftning som inte behövs här.
Trots det faktum att Ernie Bot förlorade i alla kategorier och inte visade sig på bästa sätt, ens i personlighetssimulering, i allmänhet, gjorde han ett bra jobb, och låtsades till och med vara inte bara en person utan också en kattunge.
Men hans förståelse är inte dess starka sida. Och detta betyder att Kina ligger efter USA i AI i en liten men avgörande fråga. Och det sätter Kina tillbaka från USA i kapplöpningen till AGI med ett helt varv.
- Baidu utvecklar en AI-chatbottjänst som heter Ernie Bot, som så småningom kommer att integreras i sin sökmotor. Detta kommer att tillåta Baidus sökmotor att generera mänskliga svar på användarfrågor, liknande Googles Bard och Microsofts Bing.
- Secoo Group, en lyxig e-handelsplattform i Kina, planerar att använda AI-genererat innehåll och ChatGPT teknik för att stärka sin intelligenta marknadsföring. Plattformen har lämnat in en ansökan om tillgång till OpenAIÄr GPT-4 API och är en av de första ekologiska partnerna till Baidus ERNIE Bot.
Läs mer om AI:
Villkor
I linje med den Riktlinjer för Trust Project, vänligen notera att informationen på den här sidan inte är avsedd att vara och inte ska tolkas som juridisk, skattemässig, investerings-, finansiell eller någon annan form av rådgivning. Det är viktigt att bara investera det du har råd att förlora och att söka oberoende finansiell rådgivning om du har några tvivel. För ytterligare information föreslår vi att du hänvisar till villkoren samt hjälp- och supportsidorna som tillhandahålls av utfärdaren eller annonsören. MetaversePost är engagerad i korrekt, opartisk rapportering, men marknadsförhållandena kan ändras utan föregående meddelande.
Om författaren
Damir är teamledare, produktchef och redaktör på Metaverse Post, som täcker ämnen som AI/ML, AGI, LLMs, Metaverse och Web3-relaterade områden. Hans artiklar lockar en massiv publik på över en miljon användare varje månad. Han verkar vara en expert med 10 års erfarenhet av SEO och digital marknadsföring. Damir har nämnts i Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto och andra publikationer. Han reser mellan Förenade Arabemiraten, Turkiet, Ryssland och OSS som en digital nomad. Damir tog en kandidatexamen i fysik, som han tror har gett honom de kritiska tänkande färdigheter som behövs för att bli framgångsrik i det ständigt föränderliga landskapet på internet.
fler artiklar
Damir är teamledare, produktchef och redaktör på Metaverse Post, som täcker ämnen som AI/ML, AGI, LLMs, Metaverse och Web3-relaterade områden. Hans artiklar lockar en massiv publik på över en miljon användare varje månad. Han verkar vara en expert med 10 års erfarenhet av SEO och digital marknadsföring. Damir har nämnts i Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto och andra publikationer. Han reser mellan Förenade Arabemiraten, Turkiet, Ryssland och OSS som en digital nomad. Damir tog en kandidatexamen i fysik, som han tror har gett honom de kritiska tänkande färdigheter som behövs för att bli framgångsrik i det ständigt föränderliga landskapet på internet.
