Почему ChatGPT проигрывает чат-боту Baidu?

По данным отчета организации NewsGuard, занимающейся мониторингом дезинформации, ChatGPT чаще сообщает неточную информацию на китайском языке, чем на английском. Хотя сами эти модели являются многоязычными, языки представляют собой отдельные перекрывающиеся регионы набора данных, и модель не имеет механизма для сравнения того, насколько различаются определенные фразы или прогнозы в этих регионах.

По данным TechCrunch , когда пользователь просит ChatGPT ответить на английском языке, он по сути извлекает все имеющиеся у него данные на английском языке, то же самое касается и китайского.

В марте Baidu представила «Ernie Bot» — чат-бота, основанного на модели искусственного интеллекта (ИИ) китайского поискового гиганта Ernie. В контексте ожесточенной технологической гонки между США и Китаем инвестиции и разработки Baidu в области искусственного интеллекта привлекают еще большее внимание.

По данным Reuters, Baidu сослался на результаты испытаний, проведенных China Science Daily с использованием наборов данных AGIEval и C-Eval — двух эталонных тестов, используемых для оценки производительности моделей ИИ.

К гонке за развитие искусственного интеллекта в Китае теперь присоединились три «больших парня»: Tencent, Alibaba и Baidu.

Эрни 3.5 продемонстрировал выдающиеся способности на тесте по китайскому языку, содержание которого основано на вступительных и профессиональных тестах, таких как вступительные экзамены в колледж или экзамены на получение адвокатской лицензии.

В другом китайском тесте с 13 000 вопросов с несколькими вариантами ответов, охватывающих 50 различных тем, Ernie 3.5 продолжил превосходить двух конкурентов из OpenAI. Но когда потребовался третий тест, разработанный группой университетов США, который включал вопросы по естествознанию и обществознанию, Ernie 3.5 полностью остался позади ChatGPT и GPT 4.

Технический директор Baidu Хайфэн Ван сообщил, что всего через три месяца после выпуска бета-версии Ernie Bot, большой языковой модели Baidu (LLM), созданной на основе Ernie 3.0, в Ernie 3.5 были достигнуты улучшения в эффективности, функциональности и производительности. По словам технического директора, эти улучшения очевидны при написании, выполнении запросов, рассуждениях и генерации кода, а также при обучении и выводе.

Baidu также заявила, что новая модель будет поддерживать плагины от Baidu и сторонних производителей. Компания заявила, что плагин «Baidu Search» был интегрирован и дает Ernie Bot возможность генерировать точную информацию в режиме реального времени. Плагины — это дополнительные приложения, которые позволяют ИИ работать в определенных ситуациях, например, резюмировать длинные тексты и генерировать более точные ответы.

По данным июньского теста, проведенного агентством «Синьхуа», Ernie Bot от Baidu занял первое место среди «китайских ChatGPT». По данным SCMP , Baidu стремится интегрировать Ernie Bot в другие продукты, такие как облачные сервисы, и объявила о создании венчурного фонда стоимостью 139 миллионов долларов для инвестиций в китайские стартапы в сфере генеративного ИИ.

По словам генерального директора и соучредителя Baidu Робина Ли, можно предположить, что большие языковые модели будут все больше проникать в новые области, становясь ключевым фактором развития цифровой экономики.

Ссылка на источник

Тема: ЧатGPT Чатбот Байду

Комментарий (0)