تم تطوير VMLU (فهم اللغة الفيتنامية متعددة المهام) بواسطة Zalo AI بالتعاون مع المعهد الياباني المتقدم للعلوم والتكنولوجيا (JAIST) لمساعدة مجتمع البحث والتطوير في مجال الذكاء الاصطناعي في فيتنام على الحصول على المزيد من الأدوات لتقييم جودة مخرجات نماذج الذكاء الاصطناعي التوليدي الفيتنامية.
وبناءً على ذلك، فإن هذه مجموعة معايير تقييم فيتنامية متعددة الأوجه ومتعددة المستويات تلبي الاحتياجات الأكثر تنوعًا في السوق اليوم مع 10880 سؤالًا متعدد الاختيارات تدور حول 58 موضوعًا مختلفًا.
لماذا تحتاج منظمة AI Vietnam إلى مجموعة كاملة من معايير تقييم إتقان اللغة الفيتنامية؟
لقد أدى النمو الهائل لـ ChatGPT إلى إنشاء سباق جديد: الذكاء الاصطناعي التوليدي. وفقًا للإحصائيات، منذ تقديم ChatGPT، يوجد حاليًا حوالي 16000 نموذج مشابه لـ ChatGPT في العالم.
فيتنام ليست بعيدة عن هذا الاتجاه حيث يوجد العديد من مجموعات البحث ذات المقاييس والإمكانات المختلفة التي تريد أيضًا تجربة الذكاء الاصطناعي التوليدي باستخدام اللغة الفيتنامية. وقد أدى هذا إلى الحاجة إلى مجموعة تقييم الكفاءة الفيتنامية لهذه النماذج الذكاء الاصطناعي لقياس مستوى المعرفة والتفكير باللغة الفيتنامية.
في السوق الحالية، يتعين على معظم مجموعات أبحاث الماجستير في القانون في فيتنام بناء مجموعة أدوات التقييم الخاصة بها مع معاييرها الخاصة لنماذجها. وهذه المراجعات داخلية، ولم تصبح متاحة للعامة بعد. تهدف مجموعة التقييم الخاصة بـ Zalo AI إلى تلبية الاحتياجات العامة، ويمكن استخدامها كمعيار مشترك لنماذج LLM ويتم تقديمها لمجتمع الذكاء الاصطناعي. وهذا يسمح لمجموعات البحث الصغيرة بالوصول إلى مجموعات بيانات التقييم الشاملة ويسمح لها بمقارنة النتائج مع بعضها البعض. ومن هناك، قم بإنشاء نموذج تحفيزي أكثر اكتمالاً.
تحفيز الذكاء الاصطناعي الفيتنامي للانضمام إلى موجة الذكاء الاصطناعي التوليدي العالمية
في نوفمبر 2023، أعلنت Zalo AI رسميًا عن معايير تقييم الكفاءة الفيتنامية VMLU. هذه مجموعة من المعايير التي تم البحث عنها وتطويرها من قبل مهندسي الذكاء الاصطناعي في Zalo بالتعاون مع JAIST لتقييم القدرة على فهم وتطبيق اللغة الفيتنامية لنماذج الذكاء الاصطناعي، وخاصة الذكاء الاصطناعي التوليدي.
لقد حفز ميلاد VMLU الأفراد والشركات الناشئة أو مجموعات البحث الصغيرة على تطوير نماذج الذكاء الاصطناعي الفيتنامية الجديدة. وهذا يسهل إجراء أبحاث جديدة، ويضع الأساس لقياس دقة وترقية نتائج النماذج الأساسية، مما يساعد على إتقان عملية تطوير تطبيقات الذكاء الاصطناعي باللغة الفيتنامية، التي أنشأها الفيتناميون لخدمة الشعب الفيتنامي.
وهذا أيضًا أحد العوامل المهمة التي تعزز تطوير الذكاء الاصطناعي التوليدي في فيتنام بشكل أسرع، ومواكبة موجة تطوير الذكاء الاصطناعي في العالم.
ما هي معايير تقييم كفاءة اللغة الفيتنامية؟
وعليه، فإن هذه مجموعة من معايير تقييم اللغة الفيتنامية متعددة الأوجه ومتعددة المستويات والتي تلبي الاحتياجات الأكثر تنوعًا في سوق البحث والتطوير للذكاء الاصطناعي التوليدي الفيتنامي، مع التركيز على جزأين رئيسيين: البيانات (مجموعة بيانات الاختبار) ومجموعة من معايير التقييم، كأساس لاختبار نماذج الذكاء الاصطناعي التي تطبق اللغة الفيتنامية.
على وجه التحديد، تتضمن مجموعة البيانات 10,880 سؤالاً متعدد الاختيارات تدور حول 58 موضوعًا مختلفًا. يحتوي كل موضوع على حوالي 200 سؤال ويتم توزيعه على 4 مجالات بما في ذلك: العلوم والتكنولوجيا والهندسة والرياضيات، والعلوم الاجتماعية، والعلوم الإنسانية، وفئة واسعة "ممتدة". باستخدام كتلة البيانات هذه، تمتلك VMLU تصنيفًا للصعوبة بأربعة مستويات: الابتدائية والثانوية والثانوية والمهنية - للجامعة والدراسات العليا. ومن هناك، تساعد مجموعة الأدوات في تقييم كفاءة اللغة الفيتنامية لنماذج الذكاء الاصطناعي بشكل فعال في كل من المعرفة الأساسية وحل المشكلات المعقدة.
بالإضافة إلى ذلك، لمساعدة مجموعات البحث على تقييم قدرات نماذج الذكاء الاصطناعي الفيتنامية الخاصة بهم بسهولة، قام فريق هندسة الذكاء الاصطناعي في Zalo بتصميم تعليمات بحيث يمكن للمجموعات استخدامها بسرعة وبساطة.
المساهمة في مجتمع الذكاء الاصطناعي الفيتنامي
وُلدت مجموعة معايير VMLU كمنتج بحثي يهدف إلى المساهمة في تطوير مجتمع أبحاث الذكاء الاصطناعي الفيتنامي على وجه الخصوص ومجتمع تكنولوجيا المعلومات بشكل عام، دون فرض رسوم على أي مستخدمين أو مجموعات بحثية أو شركات.
في السابق، قامت Zalo AI بتنفيذ ونشر وتنظيم سلسلة من المسابقات والبرامج لمجتمع الذكاء الاصطناعي الفيتنامي مثل: Zalo AI Challenge و Zalo AI Hackathon و Zalo AI Summit... هذه الأنشطة لا تخلق ساحة لعب لمجتمع الذكاء الاصطناعي الفيتنامي فحسب، بل تشجع أيضًا على تطبيق الذكاء الاصطناعي في الحياة، وحل المشكلات الاجتماعية العاجلة، وتلبية احتياجات ملايين الفيتناميين.
أكد الدكتور تشاو ثانه دوك، رئيس قسم أبحاث الذكاء الاصطناعي في زالو والمحاضر في جامعة العلوم الطبيعية بجامعة هوشي منه الوطنية: "يسعى زالو للذكاء الاصطناعي دائمًا إلى المساهمة في مجتمع الذكاء الاصطناعي الفيتنامي، وتحفيزه على التطور. ومن هذا المنطلق، نتوقع المزيد من منتجات الذكاء الاصطناعي من الفيتناميين، ولصالحهم".
[إعلان 2]
مصدر
تعليق (0)