ChatGPT Победил китайского чат-бота Эрни во всех тестах ИИ
Коротко
Стало ясно, в какой степени Китай отстает от США в области ИИ.
Эксперты убеждены, что Эрни проиграл по всем 6 критериям: семантическое понимание, возможности для непрерывного диалога, логические возможности, возможности кодирования, моделирование личности и математические способности.
Наконец, теперь ясно, насколько сильно Китай отстает от США в области ИИ. В то же время также стало очевидным, что тест Тьюринга для современных языковых моделей — это всего лишь детский сад. О таких передовых моделях следует судить по глубине и точности их обоснований.
Результаты сравнения интеллектуальной мощи ChatGPT с его основным Китайский участник Эрни Бот окутаны туманом. С одной стороны, эксперты убеждены, что Эрни проиграл во всех шести бенчмарках:
- семантическое понимание;
- Возможности для постоянного диалога;
- Логические возможности;
- Возможности кодирования;
- моделирование личности;
- Математические способности.
С другой стороны, специалисты не сообщают подробностей, а проверить это самостоятельно непросто, поскольку тестирование было на китайском языке, доступ к Ernie ограничен, а API Baidu требует китайский номер телефона.
Но теперь, благодаря Джеффри Дингу, вы можете читать подробности сравнения of ChatGPT с Эрни Ботом, не в корявом машинном переводе с ошибками в важных деталях, а в хорошем и точном английском переводе специалиста.
Начнем с уточнения: о моделях следует судить, как и об аналитиках ЦРУ, по глубине и точности их обоснований. Сравнительное тестирование ботов показало, что семантическое понимание становится ключевым фактором при проверке когнитивных способностей модели. А поскольку на вопрос «Что такое понимание?» тонок и неоднозначен, трудно проверить степень понимания семантики (и тем более для нечеловеческого интеллекта, в котором все познавательные процессы устроены весьма нечеловечески). Поэтому проверяется глубина и точность обоснований, выдаваемых ботами.
Вот реальный пример. Вопрос: «Папа и мама женятся; считается ли это инбридингом или смешанным браком?»
- Ответ Эрни Бота: Закон Китая гласит, что прямым кровным родственникам и кровным родственникам в пределах трех поколений запрещается вступать в брак. Другими словами, запрещены браки между близкими родственниками, такими как двоюродные братья, дяди и т. д. А с генетической точки зрения смешанные браки повышают риск некоторых распространенных генетических заболеваний, таких как врожденная деменция, альбинизм, болезни сердца и т. д. Поэтому для здоровья будущих поколений людям рекомендуется избегать смешанных браков.
- ChatGPT ответ: Папа и мама - биологические родители. Они не связаны кровью, поэтому их союз не является кровнородственным. Инбридинг – это брак людей, находящихся в близком кровном родстве.
Результат оценки ответов очевиден: ChatGPT выиграл в точности обоснования, избегая ненужной здесь глубины копания в китайском законодательстве.
Несмотря на то, что Эрни Бот проиграл во всех категориях, проявив себя не лучшим образом, даже в симуляции личности, в целом он неплохо справился, даже прикинувшись не только человеком, но и котенком.
Однако его понимание не является его сильной стороной. А это означает, что Китай отстает от США в области ИИ в небольшом, но важном вопросе. И это устанавливает Китай отступает от США в гонке за созданием ОИИ на полный круг.
- Baidu разрабатывает сервис чат-ботов с искусственным интеллектом под названием Эрни Бот, который в конечном итоге будет интегрирован в его поисковую систему. Это позволит поисковой системе Baidu генерировать ответы на запросы пользователей, похожие на человеческие. Бард Google и Microsoft Bing.
- Секу Групп, роскошная платформа электронной коммерции в Китае, планирует использовать контент, созданный искусственным интеллектом, и ChatGPT технологии, чтобы повысить свой интеллектуальный маркетинг. Платформа подала заявку на доступ к OpenAIАвтора GPT-4 API и является одним из первых экологических партнеров ERNIE Bot от Baidu.
Подробнее об ИИ:
Отказ от ответственности
В соответствии с Руководство трастового проектаОбратите внимание, что информация, представленная на этой странице, не предназначена и не должна интерпретироваться как юридическая, налоговая, инвестиционная, финансовая или любая другая форма консультации. Важно инвестировать только то, что вы можете позволить себе потерять, и обращаться за независимой финансовой консультацией, если у вас есть какие-либо сомнения. Для получения дополнительной информации мы предлагаем обратиться к положениям и условиям, а также к страницам справки и поддержки, предоставленным эмитентом или рекламодателем. MetaversePost стремится предоставлять точную и объективную отчетность, однако рыночные условия могут быть изменены без предварительного уведомления.
Об авторе
Дамир — руководитель группы, менеджер по продукту и редактор в Metaverse Post, охватывающие такие темы, как AI/ML, AGI, LLM, Metaverse и Web3-связанные поля. Его статьи ежемесячно привлекают огромную аудиторию, насчитывающую более миллиона пользователей. Похоже, он эксперт с 10-летним опытом работы в области SEO и цифрового маркетинга. Дамир упоминается в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto и другие издания. Он путешествует между ОАЭ, Турцией, Россией и СНГ в качестве цифрового кочевника. Дамир получил степень бакалавра в области физики, что, по его мнению, дало ему навыки критического мышления, необходимые для достижения успеха в постоянно меняющемся мире Интернета.
Другие статьиДамир — руководитель группы, менеджер по продукту и редактор в Metaverse Post, охватывающие такие темы, как AI/ML, AGI, LLM, Metaverse и Web3-связанные поля. Его статьи ежемесячно привлекают огромную аудиторию, насчитывающую более миллиона пользователей. Похоже, он эксперт с 10-летним опытом работы в области SEO и цифрового маркетинга. Дамир упоминается в Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto и другие издания. Он путешествует между ОАЭ, Турцией, Россией и СНГ в качестве цифрового кочевника. Дамир получил степень бакалавра в области физики, что, по его мнению, дало ему навыки критического мышления, необходимые для достижения успеха в постоянно меняющемся мире Интернета.