Test réel du moteur de jeu NVIDIA AI : chat en temps réel avec des PNJ, le chinois est courant

Le PNJ intelligent créé par l'académicien Huang dans "Cyberpunk 2077" parle déjà chinois ?

Expérience directe de Qubit, voyant les PNJ parler couramment en chinois et en anglais, avec des expressions et des mouvements naturels, et des formes de bouche assorties...

S'il n'y avait pas d'écran devant moi, ce serait vraiment l'impression d'y être. La sensation de son environnement.

Lors du salon CES de cette année, NVIDIA a utilisé son moteur intelligent Avatar Cloud Engine (ACE) pour rendre les PNJ du jeu « vivants », ce qui a provoqué un véritable choc.

△Smart NPC présenté au CES

Grâce à ACE, les personnages du jeu peuvent avoir des conversations vocales réalistes avec les joueurs tout en montrant des expressions vives et des mouvements corporels sans avoir à préparer un script à l'avance.

Au moment de ses débuts, de grandes sociétés de jeux nationales et étrangères telles que Ubisoft, Tencent, NetEase et MiHoYo ont annoncé qu'elles emboîteraient le pas.

Désormais, en ajoutant le module de traduction, les PNJ du jeu peuvent également apprendre le chinois.

Maintenant, suivons l'objectif du qubit pour découvrir la version de dialogue chinois du monde cyberpunk~

Le PNJ intelligent parle chinois

Lorsque nous sommes entrés dans le magasin de ramen en tant que Kai, nous avons toujours été accueillis par le propriétaire du magasin Jin et son ami Nova.

Le contexte de l'histoire est également le même que celui de la DÉMO présentée au CES. Nova s'est rendue au magasin de ramen pour dire à Jin que son entreprise venait de signer un gros contrat.

Nous avons marché jusqu'à Nova et lui avons demandé de nous recommander les meilleurs ramen ici. Nova nous a dit sans hésitation que le ramen au bœuf était le meilleur.

Le contenu et l'expression sont très naturels, mais la prononciation chinoise est un peu magique, mais étant donné que Nova est étrangère, c'est raisonnable.

Après avoir exprimé notre gratitude, Nova a joyeusement commandé un bol de nouilles à Jin et nous a demandé de manger.

Après nous être excusés et avoir dit que nous devions payer nous-mêmes, nous avons commencé à discuter. Au cours de la conversation, nous avons appris que Nova est un client régulier de ce magasin.

Dans le même temps, Nova nous a encore une fois parlé de la signature d'une commande importante par son entreprise.

Après avoir félicité Nova, nous avons tourné notre attention vers le propriétaire Jin.

Le sujet a toujours commencé avec les ramen. Jin nous a recommandé des ramen à la sauce soja et des ramen au miso, et nous avons décidé de prendre un bol de chacun.

Jin a accepté et a apporté les ramen préparés devant nous, et nous en avons profité pour demander comment préparer les ramen.

Bien que Jin n'ait pas répondu à nos questions en chinois, on peut voir d'après ce qu'il a dit qu'il a compris ce que nous avons dit.

Cependant, au fur et à mesure que la conversation se poursuivait, Jin a commencé à faire des allers-retours entre le chinois et l'anglais, mais il n'y avait toujours aucun problème de compréhension.

De plus, parfois, même si nous ne reconnaissons pas à 100 % ce que nous disons, cela n’affecte pas la compréhension de Jin de ce que nous voulons exprimer.

Ce que Jin a dit a fourni de nouvelles idées pour notre conversation ultérieure, et nous avons commencé à poser des questions basées sur les réponses de Jin.

Ce qui est intéressant, c'est que Jin n'a jamais oublié son identité de propriétaire d'un restaurant de ramen, et lorsqu'il parle de « nouveautés », il fait également la promotion du saké dans le magasin.

Imitant la DEMO au CES, nous avons de nouveau interrogé Jin sur son point de vue sur l'intelligence artificielle.

La différence est que Jin ici ne pensait pas qu'il pourrait être une IA, puis a plaisanté :

Même si j'étais une IA, au moins ce serait une IA capable de faire des ramen, n'est-ce pas ?

Bien sûr, cela est dû au paramètre d'arrière-plan de cette expérience de jeu : dans ACE, vous pouvez prédéfinir la personnalité du personnage et d'autres informations pour obtenir différents styles de réponse.

Après quelques expériences, les performances des PNJ sont assez impressionnantes. Ce ne sont plus de froides machines à réciter des mots, mais des "vivants" comme de vraies personnes.

En cela, la plateforme ACE de NVIDIA joue un rôle important.

Le vrai PNJ chinois n'est pas loin ?

Le moteur qui pilote NPC peut être principalement divisé en trois modules - dont deux proviennent de la plate-forme NVIDIA ACE et un d'un tiers.

Plus précisément, les microservices ACE des deux modules NVIDIA Riva et NVIDIA Audio2Face sont respectivement responsables du traitement des expressions vocales et des caractères.

Le contenu spécifique de la conversation est généré par le tiers Convai à l'aide d'un grand modèle.

Étant donné que Convai ne prend en charge que l'anglais, lorsque nous parlons chinois, nous devons passer par une étape de traduction avant de pouvoir l'envoyer au modèle, puis traduire les résultats anglais renvoyés par le modèle en chinois.

Cela explique aussi pourquoi il y a une alternance de chinois et d'anglais dans les dialogues des personnages PNJ.

Mais la plateforme ACE est ouverte, et le modèle chargé de générer du contenu n'est pas irremplaçable, d'autre part, les fabricants nationaux ont également annoncé leur suivi de cette technologie au CES ;

Peut-être pourrez-vous bientôt jouer avec des PNJ en chinois. Attendez-vous avec impatience un tel jeu ?