ChatGPT Pokonuje chińskiego Chatbota Erniego we wszystkich testach porównawczych AI
W skrócie
Stopień, w jakim Chiny pozostają w tyle za Stanami Zjednoczonymi w sztucznej inteligencji, stał się jasny.
Eksperci są przekonani, że Ernie przegrał we wszystkich 6 testach: zrozumienie semantyczne, możliwości ciągłego dialogu, możliwości logiczne, zdolności kodowania, modelowanie osobowości i zdolności matematyczne.
Wreszcie, jest teraz jasne, jak bardzo Chiny pozostają w tyle za Stanami Zjednoczonymi w AI. Jednocześnie stało się również jasne, że test Turinga dla współczesnych modeli językowych to tylko przedszkole. Takie zaawansowane modele należy oceniać na podstawie głębokości i dokładności ich uzasadnień.
Wyniki porównania mocy intelektualnej ChatGPT z jego głównym Chiński konkurent Ernie Bot spowite są mgłą. Z jednej strony eksperci są przekonani, że Ernie przegrał we wszystkich sześciu benchmarkach:
- rozumienie semantyczne;
- Możliwości ciągłego dialogu;
- Możliwości logiczne;
- Możliwości kodowania;
- modelowanie osobowości;
- Umiejętności matematyczne.
Z drugiej strony eksperci nie podają szczegółów, a samemu sprawdzić nie jest łatwo, bo testy odbywały się po chińsku, dostęp do Erniego jest ograniczony, a Baidu API wymaga chińskiego numeru telefonu.
Ale teraz, dzięki Jeffreyowi Dingowi, możesz czytać szczegóły porównania of ChatGPT z Erniem Botem, nie w niezgrabnym tłumaczeniu maszynowym z błędami w ważnych szczegółach, ale w dobrym i dokładnym angielskim przetłumaczonym przez specjalistę.
Zacznijmy od wyjaśnienia: Modele należy oceniać, podobnie jak analitycy CIA, na podstawie głębi i dokładności ich uzasadnień. Testy porównawcze botów wykazały, że zrozumienie semantyczne staje się kluczowym czynnikiem w testowaniu zdolności poznawczych modelu. A ponieważ pytanie „Czym jest rozumienie?” jest delikatny i niejednoznaczny, trudno sprawdzić stopień zrozumienia semantyki (a tym bardziej dla nieludzkiego intelektu, w którym wszystkie procesy poznawcze układają się bardzo nieludzko). Dlatego sprawdzana jest głębia i trafność uzasadnień podawanych przez boty.
Oto prawdziwy przykład. Pytanie: „Tata i mama biorą ślub; czy to jest uważane za chów wsobny czy małżeństwo mieszane?”
- Odpowiedź Erniego Bota: Chińskie prawo stanowi, że krewni w linii prostej i krewni w ciągu trzech pokoleń nie mogą zawierać małżeństw. Innymi słowy, małżeństwa między bliskimi krewnymi, takimi jak kuzyni, wujkowie itp., są zabronione. A z genetycznego punktu widzenia małżeństwa mieszane zwiększają ryzyko niektórych powszechnych chorób genetycznych, takich jak wrodzona demencja, albinizm, choroby serca itp. Dlatego dla zdrowia przyszłych pokoleń zaleca się unikanie małżeństw mieszanych.
- ChatGPT odpowiedź: Tata i mama są biologicznymi rodzicami. Nie są spokrewnieni, więc ich związek nie jest spokrewniony. Chów wsobny to małżeństwo osób blisko spokrewnionych.
Wynik oceny odpowiedzi jest oczywisty: ChatGPT wygrała pod względem trafności uzasadnienia, unikając jednocześnie zagłębiania się w chińskie prawodawstwo, które nie jest tutaj potrzebne.
Pomimo tego, że Ernie Bot przegrał we wszystkich kategoriach, nie pokazując się najlepiej, nawet w symulacji osobowości, ogólnie spisał się dobrze, udając nawet nie tylko człowieka, ale i kociaka.
Jednak jego zrozumienie nie jest jego mocną stroną. A to oznacza, że Chiny pozostają w tyle za USA w zakresie sztucznej inteligencji w drobnej, ale kluczowej kwestii. I to ustawia Chiny wracają z USA w wyścigu do AGI przez pełne okrążenie.
- Baidu opracowuje usługę chatbota AI o nazwie Erniego Bota, która docelowo zostanie zintegrowana z wyszukiwarką. Umożliwi to wyszukiwarce Baidu generowanie odpowiedzi na zapytania użytkowników podobnych do ludzkich Bard Google'a i Bing Microsoftu.
- Grupa Secoo, luksusowa platforma handlu elektronicznego w Chinach, planuje wykorzystać treści generowane przez sztuczną inteligencję i ChatGPT technologii w celu usprawnienia inteligentnego marketingu. Platforma złożyła wniosek o udostępnienie OpenAI'S GPT-4 API i jest jednym z pierwszych ekologicznych partnerów ERNIE Bota firmy Baidu.
Przeczytaj więcej o sztucznej inteligencji:
Odpowiedzialność
Zgodnie z Zaufaj wytycznym projektu, należy pamiętać, że informacje zawarte na tej stronie nie mają na celu i nie powinny być interpretowane jako porady prawne, podatkowe, inwestycyjne, finansowe lub jakiekolwiek inne formy porad. Ważne jest, aby inwestować tylko tyle, na utratę czego możesz sobie pozwolić, a w przypadku jakichkolwiek wątpliwości zasięgnąć niezależnej porady finansowej. Aby uzyskać więcej informacji, sugerujemy zapoznać się z warunkami oraz stronami pomocy i wsparcia udostępnianymi przez wydawcę lub reklamodawcę. MetaversePost zobowiązuje się do sporządzania dokładnych i bezstronnych raportów, jednakże warunki rynkowe mogą ulec zmianie bez powiadomienia.
O autorze
Damir jest liderem zespołu, menedżerem produktu i redaktorem w Metaverse Post, obejmujący takie tematy, jak AI/ML, AGI, LLM, Metaverse i Web3-pokrewne pola. Jego artykuły przyciągają każdego miesiąca ogromną publiczność, liczącą ponad milion użytkowników. Wydaje się być ekspertem z 10-letnim doświadczeniem w SEO i marketingu cyfrowym. Damir został wspomniany w Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i inne publikacje. Jako cyfrowy koczownik podróżuje między ZEA, Turcją, Rosją i WNP. Damir uzyskał tytuł licencjata z fizyki, co jego zdaniem dało mu umiejętności krytycznego myślenia potrzebne do odniesienia sukcesu w ciągle zmieniającym się środowisku internetowym.
Więcej artykułów
Damir jest liderem zespołu, menedżerem produktu i redaktorem w Metaverse Post, obejmujący takie tematy, jak AI/ML, AGI, LLM, Metaverse i Web3-pokrewne pola. Jego artykuły przyciągają każdego miesiąca ogromną publiczność, liczącą ponad milion użytkowników. Wydaje się być ekspertem z 10-letnim doświadczeniem w SEO i marketingu cyfrowym. Damir został wspomniany w Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto i inne publikacje. Jako cyfrowy koczownik podróżuje między ZEA, Turcją, Rosją i WNP. Damir uzyskał tytuł licencjata z fizyki, co jego zdaniem dało mu umiejętności krytycznego myślenia potrzebne do odniesienia sukcesu w ciągle zmieniającym się środowisku internetowym.
