Sumário
A nova IA de jogos da Sony, “GT Sophy”, foi treinada via Deep Learning. Ele pode ultrapassar os profissionais mais rápidos do Gran Turismo.
Como a primeira “IA sobre-humana”, de acordo com a Sony, GT Sophy venceu quatro dos melhores pilotos humanos do mundo na simulação de corrida Gran Turismo. As competições humano x IA aconteceram em julho e outubro de 2021.
O GT Sophy superou os profissionais de jogos em corridas de contra-relógio e em uma corrida frente a frente no formato do campeonato Gran Turismo certificado pela FIA. “GT Sophy nos mostrou novas possibilidades que não havíamos imaginado antes”, diz Igor Fraga, campeão do Campeonato FIA Gran Turismo 2018.
A IA foi desenvolvida em colaboração entre a divisão Playstation da Sony, a Sony AI, fundada em abril de 2020, e o estúdio Gran Turismo Polyphony Digital. O artigo científico “Outracing Champion Gran Turismo Drivers with Deep Reforce Learning” foi publicado na revista Nature.
Aprendizado de reforço sem modelo para IA de corrida imbatível
O trabalho atual está relacionado a uma publicação do outono de 2020: Naquela época, Sony publicou uma IA para Gran Turismo Sport treinados por aprendizado por reforço em colaboração com a Universidade de Zurique.
Adquiriu suas habilidades de direção sem preparação humana, como na linha de corrida ou na física do jogo, apenas por tentativa e erro e recompensas específicas.
O agora desenvolvido modelo de IA “GT Sophy” também é treinado por meio de aprendizado por reforço sem um modelo predefinido, embora com assistência humana: para algumas manobras particularmente exigentes, como a direção slipstream, a Sony criou manualmente cenários de treinamento exemplares e também usou sparrings para o IA.
A Sony enfatiza que o GT Sophy é rápido e justo. De acordo com a Sony, por meio de aprendizado de reforço profundo combinado com treinamento de cenário misto, o inteligência artificial
- desenvolveu uma compreensão profunda da dinâmica do carro e linhas de corrida,
- é capaz de aplicar diferentes táticas de corrida, dependendo da situação da corrida: Slipstreaming, ultrapassagem ou bloqueio defensivo de outros carros,
- e adere a “regras de esportividade altamente refinadas, mas imprecisamente especificadas”. Sophy evita colisões, por exemplo, e respeita as linhas de condução opostas.
O vídeo a seguir demonstra uma manobra de ultrapassagem complexa do GT Sophy.
Sophy será integrado em futuros jogos do Gran Turismo
Para o treinamento de IA, a Sony também desenvolveu a plataforma de computação baseada em nuvem DART (Distributed Asynchronous Rollouts and Training), que tem acesso a mais de 1.000 consoles PS4. Por meio do DART, os pesquisadores coletaram o material de treinamento e avaliaram modelos Sophy já treinados para melhorar ainda mais a IA.
De acordo com Sony, GT Sophy pode ser integrado como um oponente de IA em futuras versões da série Gran Turismo. A IA também é uma contribuição para áreas fora dos jogos, como direção autônoma e robótica e controle de alta velocidade, diz o CEO da Sony AI Hiroaki Kitano.
Que a Sony está muito orgulhosa do que chama de “inovação da IA” é evidente em o site oficial elaborado , que documenta o desenvolvimento do GT Sophy em detalhes. A Sony AI quer se envolver ainda mais com a IA em jogos no futuro.
Leia mais sobre Inteligência Artificial:
- CEO do Google: Investir em inteligência artificial é fundamental
- Chefe de IA da Meta: três grandes desafios da inteligência artificial
- Inteligência artificial geral: “Não temos nada”