¿En qué aspectos ChatGPT es inferior al chatbot de Baidu?

[anuncio_1]

Según un informe de NewsGuard, el organismo de control de desinformación, ChatGPT proporciona información más imprecisa en chino que en inglés. Si bien los modelos son multilingües, los idiomas son regiones superpuestas del conjunto de datos, y carecen de mecanismos para comparar el grado de diferencia entre frases o predicciones en dichas regiones.

Según TechCrunch , cuando los usuarios piden a ChatGPT que responda en inglés, recupera principalmente todos los datos en inglés que tiene, y lo mismo se aplica al chino.

En marzo, Baidu presentó "Ernie Bot", un chatbot basado en el modelo de inteligencia artificial (IA) Ernie del gigante chino de las búsquedas. En medio de la intensa competencia tecnológica entre Estados Unidos y China, la inversión y el desarrollo de la IA por parte de Baidu han atraído aún más atención.

Según Reuters, Baidu citó los resultados de pruebas realizadas por China Science Daily utilizando los conjuntos de datos AGIEval y C-Eval, dos estándares utilizados para evaluar el desempeño de los modelos de IA.

La carrera por el desarrollo de la inteligencia artificial en China cuenta actualmente con tres actores principales: Tencent, Alibaba y Baidu.

Ernie, con una puntuación de 3,5, demostró una capacidad excepcional en una prueba de idioma chino basada en exámenes de ingreso y de competencia, como los de ingreso a la universidad o los de certificación de abogados.

En otra prueba de chino con 13 000 preguntas de opción múltiple que abarcaban 50 temas diferentes, Ernie 3.5 siguió demostrando superioridad sobre sus dos competidores de OpenAI. Sin embargo, al realizar una tercera prueba desarrollada por un grupo de universidades estadounidenses, que incluía preguntas sobre ciencias y estudios sociales, Ernie 3.5 fue superado por completo por ChatGPT y GPT 4.

El director de tecnología de Baidu, Haifeng Wang, declaró que, tan solo tres meses después del lanzamiento de la versión beta de Ernie Bot, el modelo de lenguaje grande (LLM) de Baidu, basado en Ernie 3.0 y Ernie 3.5, ha logrado mejoras en eficiencia, funcionalidad y rendimiento. Estas mejoras son evidentes en la escritura, las consultas, el razonamiento y la generación de código, así como en el rendimiento del entrenamiento y la inferencia, afirmó el director de tecnología.

Baidu también declaró que el nuevo modelo será compatible con plugins de Baidu y de terceros. La compañía indicó que el plugin "Baidu Search" se ha integrado y permite a Ernie Bot generar información precisa en tiempo real. Los plugins son aplicaciones adicionales que permiten a la IA actuar en situaciones específicas, como resumir textos largos y generar respuestas más precisas.

Según una prueba realizada en junio por la Agencia de Noticias Xinhua, Ernie Bot de Baidu se posicionó como el mejor ChatGPT de China. Baidu ha impulsado la integración de Ernie Bot en otros productos, como sus servicios en la nube, y anunció un fondo de capital riesgo de 139 millones de dólares para invertir en startups chinas de IA generativa, según SCMP .

Robin Li, CEO y cofundador de Baidu, dijo que es previsible que los grandes modelos lingüísticos penetren cada vez más campos y se conviertan en un factor clave que impulse la economía digital.

[anuncio_2]
Enlace de origen