ChatGPT Besiegt den chinesischen Chatbot Ernie in allen KI-Benchmarks
In Kürze
Es ist deutlich geworden, wie sehr China den Vereinigten Staaten in Sachen KI hinterherhinkt.
Experten sind davon überzeugt, dass Ernie in allen 6 Benchmarks verloren hat: Semantisches Verständnis, Möglichkeiten für kontinuierlichen Dialog, logische Möglichkeiten, Codierungsfähigkeiten, Persönlichkeitsmodellierung und mathematische Fähigkeiten.
Schließlich ist jetzt klar, wie sehr China in der KI hinter den Vereinigten Staaten zurückbleibt. Gleichzeitig hat sich auch gezeigt, dass der Turing-Test für moderne Sprachmodelle nur ein Kindergarten ist. Solche fortschrittlichen Modelle sollten nach der Tiefe und Genauigkeit ihrer Begründungen beurteilt werden.
Die Ergebnisse des Vergleichs der intellektuellen Leistungsfähigkeit von ChatGPT mit seiner Hauptsache Der chinesische Konkurrent Ernie Bot sind in Nebel gehüllt. Einerseits sind Experten davon überzeugt, dass Ernie in allen sechs Benchmarks verloren hat:
- Semantisches Verständnis;
- Möglichkeiten zum kontinuierlichen Dialog;
- Logikmöglichkeiten;
- Codierungsfähigkeiten;
- Persönlichkeitsmodellierung;
- Mathematische Fähigkeit.
Auf der anderen Seite liefern Experten keine Details, und es ist nicht einfach, dies selbst zu überprüfen, da die Tests auf Chinesisch erfolgten, der Zugriff auf Ernie eingeschränkt ist und die Baidu-API eine chinesische Telefonnummer erfordert.
Aber dank Jeffrey Ding können Sie jetzt lesen die Details des Vergleichs of ChatGPT mit Ernie Bot, nicht in einer ungeschickten maschinellen Übersetzung mit Fehlern in wichtigen Details, sondern in gutem und genauem Englisch, übersetzt von einem Spezialisten.
Beginnen wir mit einer Klarstellung: Modelle sollten wie CIA-Analysten nach der Tiefe und Genauigkeit ihrer Begründungen beurteilt werden. Vergleichende Tests von Bots haben gezeigt, dass semantisches Verständnis zu einem Schlüsselfaktor beim Testen der kognitiven Fähigkeiten des Modells wird. Und da die Frage „Was ist Verstehen?“ heikel und mehrdeutig ist, ist es schwer, den Grad des Verständnisses der Semantik zu überprüfen (und erst recht für einen nicht-menschlichen Intellekt, in dem alle kognitiven Prozesse sehr nicht-menschlich angeordnet sind). Aus diesem Grund wird die Tiefe und Genauigkeit der Begründungen von Bots überprüft.
Hier ist ein echtes Beispiel. Frage: „Vater und Mutter heiraten; wird dies als Inzucht oder Mischehe angesehen?“
- Ernie Bots Antwort: Das chinesische Gesetz sieht vor, dass direkte Blutsverwandte und Blutsverwandte innerhalb von drei Generationen nicht heiraten dürfen. Mit anderen Worten, Ehen zwischen nahen Verwandten wie Cousins, Onkeln usw. sind verboten. Und aus genetischer Sicht erhöhen Mischehen das Risiko für einige häufige genetische Krankheiten wie angeborene Demenz, Albinismus, Herzkrankheiten usw. Daher wird den Menschen für die Gesundheit zukünftiger Generationen geraten, Mischehen zu vermeiden.
- ChatGPT Antworten: Papa und Mama sind leibliche Eltern. Sie sind nicht blutsverwandt, daher ist ihre Vereinigung nicht blutsverwandt. Inzucht ist die Heirat von Menschen, die eng miteinander verwandt sind.
Das Ergebnis der Auswertung der Antworten liegt auf der Hand: ChatGPT hinsichtlich der Genauigkeit der Begründung gewonnen und gleichzeitig vermieden, sich intensiv mit der chinesischen Gesetzgebung zu befassen, was hier nicht nötig wäre.
Trotz der Tatsache, dass Ernie Bot in allen Kategorien verlor und sich selbst in der Persönlichkeitssimulation nicht optimal zeigte, machte er im Allgemeinen gute Arbeit und gab sogar vor, nicht nur eine Person, sondern auch ein Kätzchen zu sein.
Allerdings ist sein Verständnis nicht seine Stärke. Und das bedeutet, dass China in einer kleinen, aber entscheidenden Frage im Bereich KI hinter den USA zurückbleibt. Und das setzt China verdrängt die USA im Rennen um AGI um eine volle Runde.
- Baidu entwickelt einen KI-Chatbot-Dienst namens Ernie Bot, das schließlich in seine Suchmaschine integriert wird. Dadurch kann die Suchmaschine von Baidu menschenähnliche Antworten auf Benutzeranfragen generieren, ähnlich wie Googles Barde und Microsofts Bing.
- Secoo-Gruppe, eine Luxus-E-Commerce-Plattform in China, plant die Verwendung von KI-generierten Inhalten und ChatGPT Technologien zur Förderung seines intelligenten Marketings. Die Plattform hat einen Antrag auf Zugang gestellt OpenAI GPT-4 API und ist einer der ersten ökologischen Partner von Baidus ERNIE Bot.
Lesen Sie mehr über KI:
Haftungsausschluss
Im Einklang mit der Richtlinien des Trust-ProjektsBitte beachten Sie, dass die auf dieser Seite bereitgestellten Informationen nicht als Rechts-, Steuer-, Anlage-, Finanz- oder sonstige Beratung gedacht sind und nicht als solche interpretiert werden sollten. Es ist wichtig, nur so viel zu investieren, wie Sie sich leisten können, zu verlieren, und im Zweifelsfall eine unabhängige Finanzberatung einzuholen. Für weitere Informationen empfehlen wir einen Blick auf die Allgemeinen Geschäftsbedingungen sowie die Hilfe- und Supportseiten des Herausgebers oder Werbetreibenden. MetaversePost ist einer genauen, unvoreingenommenen Berichterstattung verpflichtet, die Marktbedingungen können sich jedoch ohne Vorankündigung ändern.
Über den Autor
Damir ist Teamleiter, Produktmanager und Redakteur bei Metaverse Post, behandelt Themen wie KI/ML, AGI, LLMs, Metaverse und Web3-bezogene Felder. Seine Artikel ziehen jeden Monat ein riesiges Publikum von über einer Million Nutzern an. Er scheint ein Experte mit 10 Jahren Erfahrung in SEO und digitalem Marketing zu sein. Damir wurde in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto und andere Publikationen. Als digitaler Nomade reist er zwischen den Vereinigten Arabischen Emiraten, der Türkei, Russland und der GUS. Damir hat einen Bachelor-Abschluss in Physik, der ihm seiner Meinung nach die Fähigkeiten zum kritischen Denken vermittelt hat, die er braucht, um in der sich ständig verändernden Landschaft des Internets erfolgreich zu sein.
Weitere Artikel
Damir ist Teamleiter, Produktmanager und Redakteur bei Metaverse Post, behandelt Themen wie KI/ML, AGI, LLMs, Metaverse und Web3-bezogene Felder. Seine Artikel ziehen jeden Monat ein riesiges Publikum von über einer Million Nutzern an. Er scheint ein Experte mit 10 Jahren Erfahrung in SEO und digitalem Marketing zu sein. Damir wurde in Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto und andere Publikationen. Als digitaler Nomade reist er zwischen den Vereinigten Arabischen Emiraten, der Türkei, Russland und der GUS. Damir hat einen Bachelor-Abschluss in Physik, der ihm seiner Meinung nach die Fähigkeiten zum kritischen Denken vermittelt hat, die er braucht, um in der sich ständig verändernden Landschaft des Internets erfolgreich zu sein.
