Apresentamos o Project G-Assist: uma prévia de como os assistentes de IA podem aprimorar jogos e aplicações

Na Computex 2024, exibimos o Project G-Assist, uma demonstração de tecnologia de assistente de IA com tecnologia RTX que fornece ajuda baseada no contexto para jogos e aplicações no PC.

Os jogos para PC oferecem vastos universos para explorar e mecânicas complexas para desafiar até o jogador mais dedicado. Muitos de nós passamos horas vasculhando a Internet em busca de ajuda para aprender e dominar nossos títulos favoritos. A quantidade de conhecimento disponível é imensa, abrangendo milhões de guias e inúmeras palavras.

O Project G-Assist visa colocar o conhecimento do jogo e do sistema ao alcance dos jogadores. Basta fazer uma pergunta sobre o desempenho do seu jogo ou sistema e o assistente de IA fornecerá respostas baseadas no contexto.

Como funcionam os assistentes de IA para jogos

O Project G-Assist recebe entradas de voz ou texto do jogador, junto com um chat do que está na janela do jogo. O chat será alimentado em modelos de visão de IA que fornecem reconhecimento de contexto e compreensão específica do aplicativo para o Large Language Model (LLM), que está conectado a um banco de dados de conhecimento de jogos, como um wiki. O resultado do LLM é uma resposta perspicaz e personalizada – seja texto ou fala da IA ​​– com base no que está acontecendo no jogo.

A visão e os modelos de linguagem do G-Assist podem ser personalizados pelos desenvolvedores para um jogo ou aplicativo específico, proporcionando um alto grau de precisão e perspicácia.

Esses modelos de IA personalizados podem ser executados na nuvem ou acelerados localmente por PCs e Notebooks  GeForce RTX com IA.

A demo do Project G-Assist em jogo, apresentada no ARK: Survival Ascended

Para demonstrar o que é possível com o Project G-Assist, fizemos uma parceria com o Studio Wildcard para uma demonstração tecnológica usando ARK: Survival Ascended, seu jogo de sobrevivência com Unreal Engine 5, de mundo aberto e cheio de dinossauros.

Ativado, pressionando uma tecla de atalho ou usando uma frase de ativação, o AI Assistant pode ajudar os jogadores com perguntas que eles frequentemente procuram online: seja sobre missões, itens, conhecimento ou chefes difíceis de enfrentar. Em ARK: Survival Ascended, pode sugerir a melhor arma do início do jogo e onde encontrar os materiais necessários para fabricá-la.

Aproveitando os modelos de visão de IA para entender o que está acontecendo na janela do jogo, o Assistente de IA pode aconselhar se um dinossauro na tela deve ser evitado ou diferentes abordagens para domesticar uma fera específica.

E, como o assistente reconhece o contexto, ele pode personalizar suas recomendações de acordo com o jogo do usuário: pode analisar pontos de habilidade, o menu de criação e engramas atualmente bloqueados, por exemplo, e sugerir o que escolher em seguida para ajudar os jogadores a conquistar áreas de nível superior. e inimigos.

Se você desejar saber mais sobre uma resposta específica, links sensíveis ao contexto podem direcioná-lo para informações adicionais online, neste caso no wiki oficial do ARK.

Em um RPG ou jogo baseado em níveis, o assistente pode sugerir a localização de itens secretos e conhecimentos perdíveis, antes de fornecer instruções passo a passo para alguns ou todos, se solicitado. Em um RTS, ele pode compartilhar a ordem recomendada de construção do jogo inicial ou estratégias de gerenciamento de recursos para ajudá-lo a chegar ao nível dos jogadores antigos. E em um FPS, você pode descobrir instantaneamente o meta de carregamento atual, junto com todos os acessórios recomendados, nivelando o campo e garantindo que você não esteja em desvantagem competitiva.

Estas são apenas algumas das muitas possibilidades.

Ajuste de desempenho com o Project G-Assist 

Os jogos modernos exigem desempenho máximo de nossos sistemas para uma jogabilidade suave e envolvente. Mas determinar as melhores configurações de PC e jogo para sua configuração específica geralmente não é simples e pode exigir muitos ajustes e testes demorados.

O Project G-Assist também pode ser extremamente útil no ajuste de desempenho. Para demonstrar, vamos dar uma olhada em um PC GeForce RTX jogando o jogo aclamado pela crítica da CD PROJEKT RED, Cyberpunk 2077.

Com um simples prompt, o Project G-Assist pode avaliar a configuração e o desempenho do seu sistema e ajustá-lo instantaneamente para uma experiência ideal. Aplique as configurações de jogo otimizadas do aplicativo NVIDIA, com base em testes extensivos em milhares de configurações de hardware; habilite o Performance Tuning para aplicar um overclock seguro da GPU; ative o NVIDIA Reflex para reduzir a latência do sistema para jogos mais responsivos; além de muito mais.

O Assistente de IA pode rastrear e representar graficamente taxas de frames, uso de energia, latência do PC e outras estatísticas de hardware, sugerindo maneiras de melhorá-las quando solicitado.

Ele pode encontrar maneiras inteligentes de aumentar o desempenho por watt, como diminuir a tensão dinâmica da GPU, respeitando uma meta de taxa de frames. Para usuários de notebook, o uso de energia é de particular importância, determinando quanto tempo eles podem jogar antes que a bateria acabe.

Existem dezenas de configurações de jogos e hardware espalhadas entre menus de jogos, aplicativos e painéis de controle. O Assistente de IA pode verificar seu sistema para ver se há algo errado, como não aproveitar ao máximo a resolução, taxa de atualização ou outros recursos da tela, incluindo HDR e G-SYNC.

Também pode descrever o que as configurações fazem e qual é o impacto esperado no desempenho. Por exemplo, pode explicar a diferença entre DLAA e DLSS e entre o modo de latência ultrabaixa no painel de controle NVIDIA e o NVIDIA Reflex no jogo.

Essas perguntas e muito mais podem ser respondidas rapidamente com assistentes de IA.

Project G-Assist: um vislumbre do futuro

Imaginamos que os assistentes de IA transformem a maneira como interagimos com nossos jogos e aplicativos favoritos. Imagine obter assistência instantânea baseada no contexto com um fluxo de trabalho criativo complexo em um aplicativo de foto ou vídeo. Ou um treinador de IA analisando seus replays multijogador, ensinando estratégias para subir na classificação em partidas competitivas. O Projeto G-Assist é um vislumbre desse futuro.

O Project G-Assist não jogará um jogo para você como sugerimos em nosso vídeo profético do Dia da Mentira de 2017, mas pode ajudá-lo a aproveitar melhor seus jogos favoritos e encontrar ajuda para um chefe problemático. Pedidos de comida para viagem, no entanto… definitivamente poderíamos adicionar isso ao roteiro.

Acesse GeForce.com para saber mais sobre nossos outros anúncios da Computex 2024 e fique ligado para saber mais sobre as inovações de IA nas quais trabalharemos a seguir. Se você é um desenvolvedor interessado em aprender mais sobre o Projeto G-Assist, inscreva-se aqui.