Erleben Sie den vietnamesischsprachigen AI MC auf der AI4VN 2023

Mit 10 Stunden Gesprächsdaten und einer Stunde Aufzeichnung wird Saltlux einen MC und einen KI-Assistenten erstellen, der Vietnamesisch verstehen und fließend darauf kommunizieren kann.

Der KI-Assistent und Metahuman (Nachbildung realer Menschen im virtuellen Raum) von Saltlux gehören zu den Modellen, die bei den Besuchern der AI Expo-Ausstellung im Rahmen des Vietnam Artificial Intelligence Festival ( AI4VN 2023 ), das in Ho-Chi-Minh-Stadt stattfindet, große Aufmerksamkeit erregt haben.

KI-Assistenten können ähnlich wie beliebte Chatbots wie ChatGPT funktionieren, können aber in vielen Kontexten flexibel und präzise auf Vietnamesisch kommunizieren. Mittlerweile begeistert Metahuman viele Menschen, da es eine Kopie einer beliebigen Person in der digitalen Umgebung erstellt.

Diese beiden Modelle können kombiniert werden, um eine interessante MC-KI-Version zu erstellen, die auf Vietnamesisch kommunizieren kann und deren Informationen in Echtzeit aktualisiert werden.

Besucher erleben KI-Assistenten und Metamenschen-Modelle auf der AI4VN-Ausstellung, die am 21. September in Ho-Chi-Minh-Stadt stattfindet. Foto von : Khuong Nha

Mithilfe der Technologie von Saltlux kann eine Person nach einer Stunde Aufnahme und etwa 10 Stunden Gespräch einen Klon von sich selbst erstellen. Nachdem genügend Bilddaten gesammelt wurden, kopiert die KI automatisch die Bilder, Ausdrücke, Bewegungen und Betonungen echter Menschen, simuliert sie als virtueller MC und setzt sie in vielen Kontexten ein.

Um die Gesichtszüge und Ausdrücke jeder Person genau zu beschreiben, hat der Entwickler viele Technologien zur Wissensgraphenerkennung integriert, die semantische Segmentierung, Posenschätzung, Gesichtserkennung, Handgesten, Altersgruppenklassifizierung, Geschlecht usw. ermöglichen, sodass die virtuelle MC-Version fast wie die echte aussieht und normale Benutzer den Unterschied kaum erkennen können.

Als Nächstes verarbeitet eine Sprachanalysetechnologie die natürliche Sprache, um den Klang und die Intonation einer realen Person genau wiederzugeben, bevor sie in das virtuelle MC-Modell eingefügt wird. Saltlux verwendet das Hybrid-Tacotron-Deep-Learning-Modell, wodurch KI sowohl mittlere als auch hohe menschliche Stimmen nachbilden kann und so maximale Stabilität und Personalisierung gewährleistet wird.

Dann wird die Sprachsynthese-Engine, die Text-to-Speech und umgekehrt – Sprache-to-Text – ermöglicht, dem AI MC und der Person eine reibungslose direkte Interaktion auf Vietnamesisch ermöglichen.

Bei realen Erlebnissen unter lauten Bedingungen hört die MC-KI von Saltlux die vor Ort gesprochenen Zeilen immer noch vollständig und wandelt sie in Text um, bevor sie die gegebenen Befehle ausführt. KI erkennt Akzente aus verschiedenen Regionen gut und reagiert schnell auf Inhalte, wenn Benutzer plötzlich das Thema wechseln. Benutzer können mit der KI per Sprache interagieren, Befehle per Drag & Drop eingeben oder Inhalte in das Chatfeld eingeben.

Einer der Pluspunkte dieses vietnamesischsprachigen KI-MC ist die Genauigkeit der Antworten. Anstatt Antworten wie ChatGPT zu generieren, übernimmt Saltlux die maximale Kontrolle über die Antworten, indem jedes Feld aufgeteilt wird. Bei aktuellen Nachrichten greift die KI beispielsweise nur auf Nachrichten seriöser Quellen zurück. Nach der Synthese und Bereitstellung der Ergebnisse zitiert die KI die Artikel, sodass Benutzer direkt auf den Link zugreifen können, wenn sie tiefer in die Materie einsteigen möchten.

Bei Fragen zu einem Reiseziel bereitet der Entwickler den Inhalt im Voraus vor und fügt ihn in viele unterschiedliche Kontexte ein, um die Frage des Benutzers vorherzusagen und so mit hoher Genauigkeit geeignete Antworten zu liefern. Durch die Aufteilung der einzelnen Inhaltsbereiche und die Flexibilität bei der Erstellung von Eingabe- und Ausgabefiltern wird die „Illusion“ selbst verfasster Antworten von KI-Chatbots erheblich reduziert.

In Südkorea hat dieses KI-Modell den „Goodpy National Assistant“ hervorgebracht, der von der Regierung eingesetzt wird, um 20 Millionen Menschen öffentliche Verwaltungsdienste bereitzustellen. In Vietnam wurde das KI- und virtuelle MC-Modell vor zwei Jahren von Saltlux erforscht und betrieben. Eine der bekanntesten Anwendungen ist der virtuelle Reiseführer durch die Tam-Chuc-Pagode. Das System hilft Besuchern nicht nur dabei, Fragen zu beantworten, Anweisungen und Wegbeschreibungen zu geben und jeden Standort zu erläutern, sondern kann auch den Standort jeder Person in Echtzeit genau bestimmen und so entsprechende Anweisungen geben.

Über die Plattformschnittstelle von Ploonet Studio können Benutzer selbst Inhalte mithilfe von KI erstellen, ohne dass hierfür leistungsstarke Geräte erforderlich sind. Foto von : Khuong Nha

Sobald Sie über einen virtuellen MC und eine Stimme verfügen, können Benutzer den Inhalt und den Hosting-Stil auf der Ploonet Studio-Plattform anpassen, um Videos in Massen zu produzieren.

Auch die Benutzeroberfläche von Ploonet Studio ist einfach: Benutzer müssen nur klicken und etwa zwei Minuten warten, dann veröffentlicht das System ein neues Video. Alles wird auf dem Cloud-Server erledigt, sodass keine Terminalkonfiguration erforderlich ist. Auf der CES 2023 in Las Vegas wurde die Ploonet Studio-Plattform mit dem Innovation Award ausgezeichnet.

Ein Vertreter von Saltlux sagte, dass ihr KI-Modell dazu beiträgt, die Arbeitseffizienz um 20 % zu verbessern und die Betriebskosten um mehr als 30 % zu senken und gleichzeitig eine hohe Verfügbarkeit rund um die Uhr sicherzustellen.

Um dieses MC-KI-Modell zu betreiben, müssen Benutzer zwei Gebühren zahlen. Eine feste Gebühr für die Wiederherstellung einer realen Person im virtuellen Raum. Die Paketpreise variieren je nach dem vom Kunden gewünschten Schwierigkeitsgrad. Die zweite zu zahlende Gebühr ist die Gebühr für die Erstellung von Videos im Ploonet Studio, die stundenweise berechnet wird. Konkrete Preise für Einzelkunden hat Saltlux nicht bekannt gegeben. Das Unternehmen richtet sich an Firmen- und Regierungskunden.

Vnexpress.net