Aktueller Test der NVIDIA AI-Game-Engine: Echtzeit-Chat mit NPC, Chinesisch ist fließend

Der intelligente NPC, den Akademiker Huang in „Cyberpunk 2077“ erschaffen hat, hat bereits Chinesisch gesprochen?

Bei meiner Erfahrung mit Qubits aus erster Hand habe ich gesehen, wie die NPCs fließend Chinesisch und Englisch sprachen, mit natürlichen Ausdrücken und Bewegungen und passenden Mundformen ...

Wenn es keinen Bildschirm vor mir gäbe, würde er es tun Ich habe wirklich das Gefühl, dort zu sein.

Auf der diesjährigen CES nutzte NVIDIA seine intelligente Engine Avatar Cloud Engine (ACE), um Spiel-NPCs „lebendig“ zu machen, was für einen ziemlichen Schock sorgte.

△Intelligenter NPC auf der CES gezeigt

Mit ACE können Charaktere im Spiel realistische Sprachgespräche mit Spielern führen und dabei lebendige Ausdrücke und Körperbewegungen zeigen, ohne im Voraus ein Skript vorbereiten zu müssen.

Beim Debüt kündigten große in- und ausländische Spielefirmen wie Ubisoft, Tencent, NetEase und MiHoYo an, dass sie diesem Beispiel folgen würden.

Durch das Hinzufügen des Übersetzungsmoduls können die NPCs im Spiel nun auch Chinesisch lernen.

Folgen wir nun der Qubit-Linse, um die chinesische Dialogversion der Cyberpunk-Welt zu erleben~

Der schlaue NPC spricht Chinesisch

Als wir als Kai den Ramen-Laden betraten, wurden wir immer noch vom Ladenbesitzer Jin und seinem Freund begrüßt Nova.

Der Hintergrund der Geschichte ist auch derselbe wie bei der auf der CES gezeigten DEMO. Nova ging zum Ramen-Laden, um Jin zu erzählen, dass ihre Firma gerade einen großen Deal unterzeichnet hatte.

Wir gingen zu Nova und baten sie, uns die besten Ramen zu empfehlen. Nova sagte uns ohne zu zögern, dass die Rindfleisch-Ramen die besten seien.

Sowohl der Inhalt als auch der Ausdruck sind sehr natürlich, aber die chinesische Aussprache ist etwas magisch, aber wenn man bedenkt, dass Nova eine Ausländerin ist, ist sie vernünftig.

Nachdem wir uns bedankt hatten, bestellte Nova freudig eine Schüssel Nudeln bei Jin und bat uns zu essen.

Nachdem wir uns entschuldigt hatten und sagten, wir müssten es selbst bezahlen, begannen wir zu plaudern. Durch das Gespräch erfuhren wir, dass Nova Stammkunde dieses Ladens ist.

Gleichzeitig erzählte uns Nova noch einmal von der Unterzeichnung eines Großauftrags durch ihr Unternehmen.

Nachdem wir Nova gratuliert hatten, wandten wir unsere Aufmerksamkeit dem Besitzer Jin zu.

Das Thema begann noch mit Ramen. Jin empfahl uns Sojasauce-Ramen und Miso-Ramen, und wir beschlossen, von jedem eine Schüssel zu essen.

Jin stimmte zu und brachte die vorbereiteten Ramen vor uns, und wir nutzten die Gelegenheit, um zu fragen, wie man Ramen macht.

Obwohl Jin unsere Fragen nicht auf Chinesisch beantwortete, lässt sich aus seinen Worten erkennen, dass er verstanden hat, was wir gesagt haben.

Im weiteren Verlauf des Gesprächs begann Jin jedoch, zwischen Chinesisch und Englisch hin und her zu springen, aber es gab immer kein Problem mit dem Verstehen.

Darüber hinaus hat es manchmal keinen Einfluss auf Jins Verständnis dessen, was wir ausdrücken wollen, selbst wenn wir nicht zu 100 % erkennen, was wir sagen.

Was Jin sagte, lieferte neue Ideen für unser anschließendes Gespräch und wir begannen, auf der Grundlage von Jins Antworten Fragen zu stellen.

Interessant ist, dass Jin seine Identität als Besitzer eines Ramen-Restaurants nie vergessen hat und wenn er über „neue Dinge“ spricht, wirbt er auch für den Sake im Laden.

In Anlehnung an die DEMO auf der CES haben wir Jin noch einmal nach seinen Ansichten zur künstlichen Intelligenz gefragt.

Der Unterschied besteht darin, dass Jin hier nicht dachte, dass er eine KI sein könnte, und dann scherzte:

Selbst wenn ich eine KI wäre, wäre es zumindest eine KI, die Ramen herstellen kann, oder?

Das liegt natürlich an der Hintergrundeinstellung dieses Spielerlebnisses – in ACE können Sie die Persönlichkeit des Charakters und andere Informationen voreinstellen, um unterschiedliche Antwortstile zu erhalten.

Nach einiger Erfahrung ist die Leistung von NPCs beeindruckend genug. Sie sind keine kalten Wortrezitationsmaschinen mehr, sondern „lebendig“ wie echte Menschen.

Dabei spielt die ACE-Plattform von NVIDIA eine wichtige Rolle.

Der echte chinesische NPC ist nicht weit entfernt?

Die Engine, die NPC antreibt, kann hauptsächlich in drei Module unterteilt werden – zwei davon stammen von der NVIDIA ACE-Plattform und eines von einem Drittanbieter.

Konkret sind die ACE-Microservices der beiden Module NVIDIA Riva und NVIDIA Audio2Face für die Verarbeitung von Sprach- bzw. Zeichenausdrücken zuständig.

Der spezifische Gesprächsinhalt wird vom Drittanbieter Convai mithilfe eines großen Modells generiert.

Da Convai nur Englisch unterstützt, müssen wir, wenn wir Chinesisch sprechen, einen Übersetzungsschritt durchlaufen, bevor wir ihn an das Modell senden können, und dann die vom Modell zurückgegebenen englischen Ergebnisse zurück ins Chinesische übersetzen.

Das erklärt auch, warum es in den Dialogen der NPC-Charaktere zu einem Wechsel von Chinesisch und Englisch kommt.

Aber die ACE-Plattform ist offen und das für die Generierung von Inhalten verantwortliche Modell ist nicht unersetzlich. Andererseits haben inländische Hersteller auf der CES auch ihre Fortsetzung dieser Technologie angekündigt.

Vielleicht kannst du bald mit NPCs auf Chinesisch spielen. Freust du dich auf so ein Spiel?