Durante a palestra GTC 2024 de hoje, o CEO da NVIDIA, Jensen Huang, exibiu uma nova demonstração AI NPC chamada Covert Protocol. Ao contrário da demonstração Kairos mostrada na CES 2024, que foi baseada na tecnologia Convai, esta demonstração é alimentada pela Inworld AI, a outra grande plataforma AI NPC voltada para o desenvolvimento de jogos. Como você deve se lembrar, Inworld AI foi adicionado pela primeira vez pelo modelo “Bloc” em jogos como Mount & Blade II: Bannerlord, The Elder Scrolls V: Skyrim e Grand Theft Auto V, embora a Rockstar rapidamente tenha provocado isso para desespero de seus criador.Conteúdo. .

Em novembro, a Microsoft anunciou uma parceria com a Inworld AI para desenvolver um kit de ferramentas multiplataforma com um copiloto de design de IA e um mecanismo de tempo de execução de personagem. Agora, a tecnologia da Inworld foi integrada ao NVIDIA ACE Gaming, a plataforma Avatar Cloud Engine revelada no ano passado na Computex.

O NVIDIA ACE tem como objetivo fornecer um “pipeline humano digital” completo. Tudo começa com o Riva, que permite reconhecimento automático de fala (ASR) e conversão de texto em fala (TTS) usando o Nemotron Large Language Model (LLM) personalizável. Aqui, os desenvolvedores podem criar histórias e personagens específicos que se adaptam ao mundo do jogo do desenvolvedor. Eles também podem adaptar melhor as interações dos jogadores ao contexto da cena por meio de regras programáveis ​​para NPCs usando NeMo Guardrails. Por fim, o Audio2Face cria automaticamente animações faciais expressivas para personagens do jogo a partir de apenas uma fonte de áudio.

Ao final do Inworld, os desenvolvedores podem ajustar vários parâmetros para cada NPC: personalidade, conhecimento, percepção, objetivos, cenas, segurança, memória de longo prazo e relacionamentos. Kellan Gibbs, CEO da Inworld AI, também disse:

A combinação dos microsserviços NVIDIA ACE e do Inworld Engine permite que os desenvolvedores criem personagens digitais que podem conduzir narrativas dinâmicas, abrindo novas possibilidades de como os jogadores podem decodificar, raciocinar e jogar.

Curiosamente, os “Parceiros de Plataforma Humana Digital” da NVIDIA pretendem levar o ACE ao mercado, tanto para desenvolvedores de jogos quanto para empresas, para fins de atendimento ao cliente. Aqui está a lista atual compartilhada para GTC 2024: