Novo estudo mostra que a IA supera os seres humanos em testes de jogo

Os estúdios de jogos há muito tratam os testes como um gargalo inevitável – Sllow, repetitivo e caro. Mas um novo estudo sugere que um dos empregos mais intensivos para o sexo humano pode estar maduro para a automação.

Pesquisadores da Universidade de Zhejiang e do Laboratório da FUXI AI Introduziram o Titan, um agente de testes movido a IA que usa o raciocínio de modelos de grande idioma para explorar e avaliar vastos mundos de interpretação de papéis on-line.

Em ensaios em dois títulos comerciais, o Titan não apenas completou 95% das tarefas atribuídas, mas também identificou quatro bugs anteriormente desconhecidos – atualizando os testadores humanos em termos de velocidade, cobertura e descoberta.

Os testes são uma das fases mais caras da produção de jogos, consumindo milhões de dólares em trabalho de parto e meses de tempo de resposta. De acordo com a empresa de pesquisa de mercado Dataintello, o mercado global de serviços de teste de jogos deve atingir US $ 5,8 bilhões até 2032.

Os resultados de Titan sugerem que a IA generativa pode assumir uma parte desse fardo, trazendo automação a uma disciplina, uma vez que se pensa muito aberto e imprevisível para máquinas.

O estudo sugere um futuro em que os agentes da IA ​​não apenas imitam jogadores razão Como eles – identificando falhas, equilibrando a mecânica e navegando em ambientes virtuais dinâmicos com mais eficiência do que equipes de controle de qualidade humanas.

“Projetamos o fluxo de trabalho do Titan espelhando como os testadores especializados operam o teste do MMORPG: percebem o estado do jogo, escolhem ações significativas, refletem sobre o progresso e diagnosticassem problemas”, escreveram os pesquisadores. “Em sua essência, um modelo de fundação gera raciocínio de alto nível, enquanto os módulos de apoio fornecem percepção, andaimes de ação e oráculos de diagnóstico para interação em circuito fechado”.

No experimento, um módulo de percepção traduziu o jogo complexo em texto simplificado, permitindo que o programa raciocine por meio de objetivos. O agente também usou capturas de tela para revisar seu próprio progresso e se recuperar do progresso paralisado.

Por que isso importa

Titan é o exemplo mais recente de como a IA está se mudando para a indústria de jogos e as funções de preenchimento normalmente tratadas pelos seres humanos. Em agosto, uma pesquisa do Google Cloud disse que quase nove em 10 desenvolvedores de jogos dizem que já construíram agentes de IA em seu trabalho.

“Se você não está no movimento da IA ​​agora, já está atrasado”, Kelsey Falter, CEO e co-fundador da Indie Studio Mother Games, disse recentemente Descriptografar.

A pesquisa ocorre em meio a esforços mais amplos para integrar a IA mais profundamente nos fluxos de trabalho de desenvolvimento. Em agosto, Jack Buser, diretor de jogos globais do Google Cloud, alertou que os estúdios incapazes de adotar ferramentas de IA “não sobreviverão”.

Um novo tipo de testador de jogo

Os testadores humanos geralmente seguiam caminhos familiares, observou o relatório, enquanto os robôs existentes lutavam para generalizar nas versões do jogo. No entanto, os pesquisadores reconheceram que não confiam apenas na IA para concluir o estudo.

“Trabalhamos com testadores e designers profissionais para identificar os principais fatores de estado relevantes para o progresso geral no MMORPGS, que servem como referências de modelo”, disseram os pesquisadores.

Essas referências de modelo incluem a localização do jogador, os objetivos atuais do jogo e os vitais dos jogadores como Health e Mana, enquanto “dados irrelevantes” como as informações de outros jogadores são filtrados, a menos que seja necessário.