Theo báo cáo của cơ quan giám sát thông tin sai lệch NewsGuard, mức độ ChatGPT đưa ra thông tin không chính xác trong tiếng Trung nhiều hơn tiếng Anh. Mặc dù bản thân các mô hình này là đa ngôn ngữ, nhưng các ngôn ngữ là các vùng chồng chéo riêng biệt của tập dữ liệu và mô hình chưa có cơ chế để so sánh mức độ khác nhau giữa các cụm từ hoặc dự đoán nhất định giữa các vùng đó.
Theo TechCrunch, khi người dùng yêu cầu ChatGPT trả lời bằng tiếng Anh, nó chủ yếu lấy tất cả dữ liệu tiếng Anh mà nó có, tương tự đối với tiếng Trung.
Vào tháng 3, Baidu đã giới thiệu “Ernie Bot”, chatbot dựa trên mô hình trí tuệ nhân tạo (AI) Ernie của gã khổng lồ tìm kiếm Trung Quốc. Trong bối cảnh cuộc đua công nghệ giữa Mỹ và Trung Quốc vẫn diễn ra gay gắt, việc Baidu đầu tư và phát triển AI càng thu hút sự chú ý hơn.
Theo Reuters, Baidu đã trích dẫn kết quả thử nghiệm do tờ China Science Daily thực hiện bằng cách sử dụng các bộ dữ liệu AGIEval và C-Eval, hai tiêu chuẩn được sử dụng để đánh giá hiệu suất của các mô hình AI.
Cuộc đua phát triển AI của Trung Quốc hiện nay có 3 “ông lớn” gia nhập là Tencent, Alibaba và Baidu
Ernie 3.5 đã thể hiện năng lực vượt trội trong bài kiểm tra tiếng Trung có nội dung dựa trên các đề thi tuyển sinh và kiểm tra trình độ, chẳng hạn như đề của kỳ thi đại học hoặc lấy chứng chỉ hành nghề luật sư.
Trong một bài kiểm tra tiếng Trung khác có 13.000 câu trắc nghiệm bao gồm 50 chủ đề khác nhau, Ernie 3.5 tiếp tục thể hiện sự vượt trội so với hai đối thủ đến từ OpenAI. Thế nhưng khi thực hiện bài kiểm tra thứ ba được phát triển bởi một nhóm các trường đại học ở Mỹ, bao gồm câu hỏi về khoa học và xã hội, Ernie 3.5 hoàn toàn bị ChatGPT và GPT 4 bỏ lại.
Giám đốc công nghệ của Baidu Haifeng Wang cho biết chỉ ba tháng sau khi phát hành phiên bản beta của Ernie Bot, mô hình ngôn ngữ lớn (LLM) của Baidu được xây dựng trên Ernie 3.0, Ernie 3.5 đã đạt được những cải tiến về hiệu quả, chức năng và hiệu suất. Những cải tiến này thể hiện rõ trong việc viết lách, hỏi đáp, lập luận và tạo mã, cũng như trong hiệu suất đào tạo và hiệu suất suy luận, vị CTO nói.
Baidu cũng cho biết mô hình mới sẽ hỗ trợ các plug-in từ Baidu và bên thứ ba. Công ty cho biết plug-in “Baidu Search” đã được tích hợp và trang bị cho Ernie Bot khả năng tạo thông tin chính xác và theo thời gian thực. Plug-in là các ứng dụng bổ sung cho phép AI hoạt động trong các tình huống cụ thể, ví dụ như tóm tắt văn bản dài và tạo ra các câu trả lời chính xác hơn.
Theo một cuộc thử nghiệm vào tháng 6 do Tân Hoa xã thực hiện, Ernie Bot của Baidu được xếp hạng hàng đầu trong số các “ChatGPT của Trung Quốc”. Baidu đã thúc đẩy tích hợp Ernie Bot trong các sản phẩm khác, chẳng hạn như dịch vụ đám mây và công bố quỹ đầu tư mạo hiểm trị giá 139 triệu USD để đầu tư vào các công ty khởi nghiệp AI tạo sinh của Trung Quốc, theo SCMP.
Giám đốc điều hành và đồng sáng lập Baidu Robin Li cho biết, có thể thấy trước các mô hình ngôn ngữ lớn sẽ ngày càng thâm nhập vào nhiều lĩnh vực hơn, trở thành yếu tố chính thúc đẩy nền kinh tế số.
