Convai, utilizzando la nuova tecnologia NVIDIA ACE, è destinato a elevare gli NPC IA attraverso ulteriori progressi nell’intelligenza artificiale generativa. La loro dimostrazione iniziale, con un negozio di ramen realistico e i personaggi Jin e Kai, è stata impressionante. Ora, Convai sta rivelando una nuova fase nella tecnologia dei personaggi basata sull’intelligenza artificiale. Questa innovazione consente ai personaggi di impegnarsi in conversazioni autentiche con i giocatori all’interno dei giochi, migliorando l’interazione tra i giocatori.
Con la scoperta di capacità migliorate nella generazione di conversazioni, percezioni e azioni, Convai ha fatto passi da gigante nella creazione di esperienze di gioco coinvolgenti. Questi sviluppi promettono un salto di trasformazione nel modo in cui i giocatori interagiscono con gli ambienti e i personaggi del gioco, segnando un notevole progresso per la tecnologia AI NPC.
Annunci del CES 2024: Prodotti più interessanti
Convai dà il benvenuto agli NPC IA con NVIDIA ACE
NVIDIA ACE rappresenta un passo rivoluzionario nella tecnologia di gioco. Immagina uno scenario in cui i giocatori possono impegnarsi in conversazioni intelligenti, senza copione e dinamiche con personaggi non giocabili (NPC) nei giochi. Questi NPC avrebbero personalità in evoluzione, animazioni facciali accurate e la capacità di interagire nella lingua madre del giocatore. Questo concetto sta diventando realtà grazie alle tecnologie di intelligenza artificiale generativa.
Al COMPUTEX 2023, NVIDIA ha annunciato il futuro degli NPC con NVIDIA Avatar Cloud Engine (ACE) for Games. NVIDIA ACE for Games è un servizio di fonderia di modelli IA su misura progettato per rivoluzionare i giochi infondendo ai personaggi non giocabili interazioni in linguaggio naturale basate sull’intelligenza artificiale. Questo sviluppo è destinato a trasformare l’esperienza di gioco, rendendo le interazioni con i personaggi del gioco più realistiche e coinvolgenti.
L’intelligenza artificiale generativa ha il potenziale per rivoluzionare l’interattività che i giocatori possono avere con i personaggi del gioco e aumentare notevolmente l’immersione nei giochi. Basandosi sulla nostra competenza nell’intelligenza artificiale e su decenni di esperienza di lavoro con gli sviluppatori di giochi, NVIDIA sta guidando l’uso dell’intelligenza artificiale generativa nei giochi.
-John Spitzer, vicepresidente della tecnologia per sviluppatori e prestazioni di NVIDIA
NVIDIA ACE per gli sviluppatori
NVIDIA ACE for Games sta aprendo la strada agli sviluppatori di middleware, strumenti e giochi per incorporare funzionalità IA avanzate. Attraverso questa piattaforma, possono creare e distribuire modelli di intelligenza artificiale personalizzati per parlato, conversazione e animazione nei loro software e giochi, accessibili sia in ambienti cloud che PC.
I modelli di base IA ottimizzati integrati in NVIDIA ACE for Games includono:
- NVIDIANeMo: offre modelli linguistici fondamentali insieme a strumenti di personalizzazione dei modelli, consentendo agli sviluppatori di perfezionare ulteriormente i modelli per adattarli ai personaggi del gioco. Questo modello linguistico di grandi dimensioni (LLM) personalizzabile facilita la creazione di retroscena e personalità di personaggi unici, adattati al mondo di gioco di uno sviluppatore. NeMo Guardrails consente inoltre agli sviluppatori di impostare regole programmabili per gli NPC, garantendo che le interazioni dei giocatori siano coerenti con il contesto di una scena.
- NVIDIA Riva: Estende le funzionalità di riconoscimento vocale automatico (ASR) e sintesi vocale (TTS), favorendo conversazioni vocali dal vivo integrate con NVIDIA NeMo. Ciò facilita l’interazione senza soluzione di continuità tra giocatori e personaggi del gioco.
- NVIDIA Omniverse Audio2Face: Una caratteristica straordinaria, Audio2Face genera animazioni facciali espressive per i personaggi del gioco solo da una sorgente audio. Con i connettori Omniverse per Unreal Engine 5, gli sviluppatori possono aggiungere direttamente animazioni facciali ai personaggi MetaHuman, migliorando significativamente il realismo e l’espressività nel gioco.
Questi componenti di NVIDIA ACE for Games rappresentano un sostanziale passo avanti nello sviluppo di giochi, offrendo strumenti per creare esperienze di gioco più realistiche e interattive. Questa suite di strumenti sottolinea l’impegno di NVIDIA nel far progredire il settore dei giochi attraverso applicazioni IA innovative.
Come funziona NVIDIA ACE?
NVIDIA ACE for Games opera in un modo che dimostra le sue straordinarie capacità e fornisce uno sguardo al futuro dello sviluppo di NPC nei giochi. Per illustrare ciò, NVIDIA ha collaborato con Convai, una startup NVIDIA Inception dedicata alla creazione e all’implementazione di personaggi IA in giochi e mondi virtuali. Questa partnership è stata determinante per l’ottimizzazione e l’integrazione dei moduli ACE nella piattaforma Convai.
La demo Kairos, una vetrina di NVIDIA ACE for Games, ha utilizzato varie tecnologie NVIDIA:
Con NVIDIA ACE for Games, gli strumenti di Convai possono raggiungere la latenza e la qualità necessarie per rendere i personaggi non giocabili dell’intelligenza artificiale disponibili a quasi tutti gli sviluppatori in modo economicamente vantaggioso.
-Purnendu Mukherjee, fondatore e CEO di Convai
NVIDIA Riva è stata utilizzata per le funzioni di sintesi vocale e di sintesi vocale, NVIDIA NeMo ha potenziato l’intelligenza artificiale conversazionale e Audio2Face è stato utilizzato per l’animazione facciale basata sull’intelligenza artificiale derivata da input vocali. Questi moduli sono stati incorporati perfettamente nella piattaforma di servizi Convai, quindi integrati con Unreal Engine 5 e MetaHuman, culminando nella creazione di Jin, un personaggio della scena Ramen Shop.
Questa scena, insieme a Jin, è stata realizzata dal team artistico di NVIDIA Lightspeed Studios e completamente renderizzata in Unreal Engine 5. Il rendering ha utilizzato NVIDIA RTX Direct Illumination (RTXDI) per luci e ombre con ray tracing e DLSS per ottimizzare frame rate e immagini. qualità.
La dimostrazione in tempo reale di Jin e del suo Ramen Shop non solo mostra le capacità delle schede grafiche GeForce RTX, delle tecnologie NVIDIA RTX e NVIDIA ACE for Games, ma esemplifica anche il potenziale futuro dei giochi che utilizzeranno questa tecnologia innovativa.
