ChatGPT Derrota el chatbot xinès Ernie a tots els punts de referència d'IA
En breu
S'ha fet evident el grau en què la Xina s'està quedant darrere dels Estats Units en IA.
Els experts estan convençuts que Ernie va perdre en els 6 punts de referència: comprensió semàntica, oportunitats de diàleg continu, possibilitats lògiques, capacitats de codificació, modelització de personalitat i capacitat matemàtica.
Finalment, ara queda clar fins a quin punt la Xina està endarrerida en IA per darrere dels Estats Units. Al mateix temps, també s'ha fet evident que la prova de Turing per a models de llenguatge modern és només el jardí d'infants. Aquests models avançats s'han de jutjar per la profunditat i la precisió de les seves justificacions.
Els resultats de la comparació del poder intel·lectual de ChatGPT amb el seu principal El competidor xinès Ernie Bot estan envoltats de boira. D'una banda, els experts estan convençuts que Ernie va perdre en els sis punts de referència:
- Comprensió semàntica;
- Oportunitats de diàleg continu;
- possibilitats lògiques;
- Capacitats de codificació;
- Modelatge de la personalitat;
- Capacitat matemàtica.
D'altra banda, els experts no proporcionen detalls i no és fàcil comprovar-ho tu mateix perquè les proves van ser en xinès, l'accés a Ernie és limitat i l'API de Baidu requereix un número de telèfon xinès.
Però ara, gràcies a Jeffrey Ding, pots llegir els detalls de la comparació of ChatGPT amb Ernie Bot, no en una traducció automàtica maldestra amb errors en detalls importants, sinó en un anglès bo i precís traduït per un especialista.
Comencem amb un aclariment: els models s'han de jutjar, com els analistes de la CIA, per la profunditat i la precisió de les seves justificacions. Les proves comparatives de bots han demostrat que la comprensió semàntica esdevé un factor clau per provar les capacitats cognitives del model. I des de la pregunta "Què és entendre?" és delicat i ambigu, és difícil comprovar el grau de comprensió de la semàntica (i més encara per a un intel·lecte no humà, en el qual tots els processos cognitius estan disposats de manera molt no humana). Per això el que es comprova és la profunditat i exactitud de les justificacions que donen els bots.
Aquí teniu un exemple real. Pregunta: “El pare i la mare es casen; això es considera endogàmia o un matrimoni mixt?"
- La resposta d'Ernie Bot: La llei de la Xina estipula que els parents directes i els familiars de consanguinitat dins de les tres generacions estan prohibits de casar-se. És a dir, els matrimonis entre parents propers, com cosins, oncles, etc., estan prohibits. I des del punt de vista genètic, els matrimonis mixts augmenten el risc d'algunes malalties genètiques comunes, com la demència congènita, l'albinisme, les cardiopaties, etc. Per tant, per a la salut de les generacions futures, s'aconsella evitar els matrimonis mixts.
- ChatGPT resposta: El pare i la mare són pares biològics. No estan relacionats per sang, per tant la seva unió no és consanguina. La consanguinitat és el matrimoni de persones estretament relacionades per sang.
El resultat de l'avaluació de les respostes és obvi: ChatGPT va guanyar en termes d'exactitud de justificació i alhora s'evita la profunditat d'excavació en la legislació xinesa que aquí no cal.
Malgrat que Ernie Bot va perdre en totes les categories, no mostrant-se de la millor manera, fins i tot en la simulació de la personalitat, en general, va fer una bona feina, fins i tot fent veure que no només era una persona sinó també un gatet.
Tanmateix, la seva comprensió no és el seu fort. I això significa que la Xina es queda per darrere dels EUA en IA en un tema petit però crucial. I això estableix La Xina torna dels EUA en la cursa per AGI per una volta completa.
- Baidu està desenvolupant un servei de chatbot d'IA anomenat Ernie Bot, que finalment s'integrarà al seu cercador. Això permetrà que el motor de cerca de Baidu generi respostes semblants a les persones a les consultes dels usuaris, de manera similar a Bard de Google i Bing de Microsoft.
- Grup Secoo, una plataforma de comerç electrònic de luxe a la Xina, té previst utilitzar contingut generat per IA i ChatGPT tecnologies per impulsar el seu màrqueting intel·ligent. La plataforma ha presentat una sol·licitud d'accés OpenAI'S GPT-4 API i és un dels primers socis ecològics del bot ERNIE de Baidu.
Llegeix més sobre AI:
renúncia
En línia amb la Directrius del projecte Trust, si us plau, tingueu en compte que la informació proporcionada en aquesta pàgina no pretén ni s'ha d'interpretar com a assessorament legal, fiscal, d'inversió, financer o de cap altra forma. És important invertir només el que et pots permetre perdre i buscar assessorament financer independent si tens dubtes. Per obtenir més informació, us suggerim que feu referència als termes i condicions, així com a les pàgines d'ajuda i assistència proporcionades per l'emissor o l'anunciant. MetaversePost es compromet a fer informes precisos i imparcials, però les condicions del mercat estan subjectes a canvis sense previ avís.
About The Autor
Damir és el líder d'equip, cap de producte i editor de Metaverse Post, que cobreix temes com AI/ML, AGI, LLMs, Metaverse i Web3-camps relacionats. Els seus articles atrauen una audiència massiva de més d'un milió d'usuaris cada mes. Sembla ser un expert amb 10 anys d'experiència en SEO i màrqueting digital. Damir ha estat esmentat a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i altres publicacions. Viatja entre els Emirats Àrabs Units, Turquia, Rússia i la CEI com a nòmada digital. Damir va obtenir una llicenciatura en física, que creu que li ha donat les habilitats de pensament crític necessàries per tenir èxit en el paisatge en constant canvi d'Internet.
més articles
Damir és el líder d'equip, cap de producte i editor de Metaverse Post, que cobreix temes com AI/ML, AGI, LLMs, Metaverse i Web3-camps relacionats. Els seus articles atrauen una audiència massiva de més d'un milió d'usuaris cada mes. Sembla ser un expert amb 10 anys d'experiència en SEO i màrqueting digital. Damir ha estat esmentat a Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i altres publicacions. Viatja entre els Emirats Àrabs Units, Turquia, Rússia i la CEI com a nòmada digital. Damir va obtenir una llicenciatura en física, que creu que li ha donat les habilitats de pensament crític necessàries per tenir èxit en el paisatge en constant canvi d'Internet.
