Découvrez l'IA MC vietnamienne à AI4VN 2023

Avec 10 heures de données de conversation et une heure d'enregistrement, Saltlux recréera un MC et un assistant IA capable de comprendre et de communiquer couramment en vietnamien.

L'assistant IA et Metahuman (recréant de vraies personnes dans un espace virtuel) de Saltlux font partie des modèles qui ont attiré une grande attention de la part des visiteurs de l'exposition AI Expo dans le cadre du Festival de l'intelligence artificielle du Vietnam ( AI4VN 2023 ), qui se déroule à Ho Chi Minh-Ville.

Les assistants IA peuvent fonctionner de manière similaire aux chatbots populaires comme ChatGPT, mais peuvent communiquer en vietnamien de manière flexible et précise dans de nombreux contextes. Pendant ce temps, Metahuman suscite l’enthousiasme de nombreuses personnes lorsqu’il crée une copie de n’importe quelle personne dans l’environnement numérique.

Ces deux modèles peuvent être combinés pour créer une version intéressante de MC AI qui peut communiquer en vietnamien avec des informations mises à jour en temps réel.

Les visiteurs découvrent les modèles AI Assistant et Metahuman lors de l'exposition AI4VN qui s'est tenue le 21 septembre à Ho Chi Minh-Ville. Photo : Khuong Nha

La technologie de Saltlux permet à une personne de créer un clone d’elle-même après une heure d’enregistrement et environ 10 heures de conversation. Après avoir collecté suffisamment de données d'image, l'IA copiera automatiquement les images, les expressions, les mouvements et les intonations de personnes réelles, les simulera en tant que MC virtuel et les utilisera dans de nombreux contextes.

Pour décrire avec précision les traits et les expressions du visage de chaque personne, le développeur a intégré de nombreuses technologies de reconnaissance de graphes de connaissances, permettant la segmentation sémantique, l'estimation de la pose, la reconnaissance faciale, les gestes de la main, la classification des groupes d'âge, le sexe... de sorte que la version MC virtuelle ressemble presque à la vraie, et les utilisateurs ordinaires peuvent difficilement reconnaître la différence.

Ensuite, la technologie d’analyse vocale traitera le langage naturel pour reproduire avec précision le son et l’intonation d’une personne réelle avant d’être insérée dans le modèle MC virtuel. Saltlux utilise le modèle d'apprentissage en profondeur Hybrid-Tacotron, permettant à l'IA de recréer des voix humaines moyennes et aiguës, garantissant une stabilité et une personnalisation maximales.

Ensuite, le moteur de synthèse vocale qui permet la conversion du texte en parole et vice versa - de la parole en texte - permettra à l'IA MC et à la personne d'interagir directement en vietnamien en douceur.

Dans les expériences réelles dans des conditions bruyantes, l'IA MC de Saltlux entend toujours pleinement les lignes prononcées en direct sur scène et les convertit par écrit, avant d'exécuter les commandes données. L’IA reconnaît bien les accents de différentes régions et réagit rapidement au contenu lorsque les utilisateurs changent soudainement de sujet. Les utilisateurs peuvent interagir avec l'IA par la voix, glisser-déposer des commandes ou saisir du contenu dans la zone de discussion.

L’un des points positifs de cet AI MC parlant vietnamien est la précision des réponses. Au lieu de générer des réponses comme ChatGPT, Saltlux prend un contrôle maximal sur les réponses en divisant chaque champ. Par exemple, en ce qui concerne l’actualité, l’IA ne recevra des informations que de sources fiables. Après avoir synthétisé et fourni les résultats, l'IA citera les articles afin que les utilisateurs puissent accéder directement au lien s'ils souhaitent lire en profondeur.

Lorsqu'il pose des questions liées à une destination touristique, le développeur prépare le contenu à l'avance, le place dans de nombreux contextes différents pour prédire la question de l'utilisateur, fournissant ainsi des réponses appropriées avec une grande précision. La division de chaque zone de contenu et la flexibilité dans la création de filtres d'entrée et de sortie réduisent considérablement « l'illusion » des réponses auto-composées des chatbots IA.

En Corée du Sud, ce modèle d’IA a créé le « Goodpy National Assistant », qui est utilisé par le gouvernement pour fournir des services administratifs publics à 20 millions de personnes. Au Vietnam, le modèle d'IA et de MC virtuel a été étudié et exploité par Saltlux il y a deux ans. L’une des applications les plus importantes est le guide touristique virtuel du complexe de la pagode Tam Chuc. Le système aide non seulement les visiteurs à répondre aux questions, à donner des instructions, des directions et à expliquer chaque emplacement, mais peut également déterminer avec précision l'emplacement de chaque personne en temps réel, fournissant ainsi des instructions appropriées.

L'interface de la plateforme Ploonet Studio permet aux utilisateurs de créer eux-mêmes du contenu avec l'IA sans avoir besoin d'appareils puissants. Photo : Khuong Nha

Une fois que vous avez un MC et une voix virtuels, les utilisateurs peuvent personnaliser le contenu et le style d'hébergement sur la plateforme Ploonet Studio pour produire des vidéos en masse.

L'interface de Ploonet Studio est également simple, les utilisateurs doivent simplement cliquer et attendre environ deux minutes, une nouvelle vidéo sera publiée par le système. Tout est fait sur le serveur cloud, il n'y a donc aucune exigence de configuration de terminal. Au CES 2023 de Las Vegas, la plateforme Ploonet Studio a été récompensée par le Prix de l'Innovation.

Le représentant de Saltlux a déclaré que son modèle d'IA permet d'améliorer l'efficacité du travail de 20 % et de réduire les coûts d'exploitation de plus de 30 %, garantissant une haute disponibilité 24h/24 et 7j/7.

Pour faire fonctionner ce modèle d’IA MC, les utilisateurs doivent payer deux frais. Un forfait pour recréer une personne réelle dans un espace virtuel. Les prix des forfaits varient en fonction de la difficulté demandée par le client. Le deuxième frais à payer est le frais de création de vidéos sur Ploonet Studio, qui est facturé à l'heure. Saltlux n'a pas divulgué de prix spécifiques pour les clients individuels. L'entreprise cible les clients institutionnels et gouvernementaux.

Vnexpress.net