O Project G-Assist recebe entradas de voz ou texto do jogador, junto com snapshot que está na janela do jogo. O snapshot é alimentado em modelos de visão de IA que fornecem reconhecimento de contexto e compreensão específica da aplicação para o Large Language Model (LLM), que está conectado a um banco de dados de conhecimento de jogos, como um wiki. O resultado do LLM é uma resposta perspicaz e personalizada – seja texto ou fala da IA – com base no que está acontecendo no jogo.
A NVIDIA fez parceria com o Studio Wildcard para demonstrar a tecnologia com ARK: Survival Ascended. O Project G-Assist pode ajudar a responder perguntas sobre criaturas, missões, itens, conhecimento, chefes difíceis de enfrentar e muito mais. E como o Project G-Assist reconhece o contexto, ele personaliza suas respostas de acordo com o jogo do usuário.
Além disso, o Project G-Assist pode avaliar a configuração e o desempenho do seu sistema e ajustá-lo instantaneamente para uma experiência ideal. Aplique as configurações de jogo otimizadas do aplicativo NVIDIA, com base em testes extensivos em milhares de configurações de hardware; habilite o Performance Tuning para aplicar um overclock seguro da GPU; ative o NVIDIA Reflex para reduzir a latência do sistema para jogos mais responsivos; além de muito mais.
Imaginamos que os assistentes de IA transformem a maneira como interagimos com nossos jogos e aplicativos favoritos. Imagine obter assistência instantânea baseada no contexto com um fluxo de trabalho criativo complexo em um aplicativo de foto ou vídeo. Ou um treinador de IA analisando seus replays multiplayer, ensinando estratégias para subir na classificação em partidas competitivas. O Project G-Assist é um vislumbre desse futuro.
O Project G-Assist não jogará um jogo para você como sugerimos em nosso vídeo profético do Dia da Mentira em 2017, mas pode ajudá-lo a aproveitar melhor seus jogos favoritos e encontrar ajuda para um chefe problemático. Pedidos de comida para viagem, no entanto… definitivamente poderíamos adicionar isso ao roteiro.
Para mais detalhes, confira nosso artigo dedicado ao Projeto G-Assist.