A Skywork AI, braço da Kunlun Tech (Kunlun Wanwei), abriu em 15 de outubro o código do Matrix-Game 4.0. A nova versão muda a abordagem: o motor do jogo cuida do estado do mundo, das regras de física e dos comandos do jogador, enquanto o modelo de vídeo apenas “pinta” as imagens low-poly geradas pelo motor, transformando-as em quadros ricos em detalhes.
A métrica divulgada oficialmente é de 480p a 60 quadros por segundo em uma única RTX 5090, com latência inferior a 150 milissegundos entre a ação do jogador e a resposta da imagem. O projeto descreve a solução como renderização neural em fluxo (streaming neural rendering) para jogos jogáveis.
O motor cuida da lógica, o modelo cuida da imagem
Segundo a descrição no GitHub, o modelo de vídeo da versão 4.0 é um modelo generativo causal que opera com poucos passos. A entrada são quadros RGB low-poly renderizados pelo motor, mais um prompt de texto; a saída são imagens contínuas, quadro a quadro, com alto nível de detalhe. Regras do jogo, colisões e pontuação continuam no motor.
Há ainda um agente de programação: o jogador pede mudanças em linguagem natural, por exemplo trocar uma regra de jogabilidade, e o agente as traduz em novas regras de jogo e prompts de renderização, de modo que o estilo visual e a jogabilidade podem mudar juntos.
O material liberado desta vez inclui:
- Pesos do modelo, configuração e código de inferência (inferência em uma única placa)
- Demo para navegador e código-fonte do jogo
- Ativos de três cenários: dois jogos de tiro em terceira pessoa (castelo medieval e Egito Antigo) e um jogo de corrida urbana
A licença indicada no README é a Apache-2.0; componentes e ativos de terceiros seguem suas respectivas licenças. O número de parâmetros do modelo não foi divulgado.
O caminho percorrido por quatro versões
Ao encadear as versões do Matrix-Game, a mudança de rumo fica evidente.
A versão 1.0, de maio de 2025, tinha mais de 17 bilhões de parâmetros e se concentrava em cenas do tipo Minecraft; o modelo gerava diretamente o trecho de vídeo seguinte a partir das ações, e o próprio mundo também era “imaginado” pelo modelo. A 2.0, de agosto de 2025, priorizou baixa latência e interações longas, gerando de forma contínua a cerca de 25 quadros por segundo. A 3.0, de 27 de março deste ano, acrescentou memória de longo prazo, com foco em alta resolução e interação em tempo real, tendo como referência o Genie 3, do Google.
Nas três primeiras versões, o modelo carregava ao mesmo tempo o mundo e a imagem, e a consistência sempre foi o ponto difícil: ao se afastar e voltar, a cena podia não coincidir mais. A 4.0 devolve o mundo ao motor, o modelo só renderiza, a consistência fica garantida pelo motor, e a taxa de quadros sobe dos cerca de 25 da 2.0 para 60. O custo é que o limite do conteúdo jogável volta ao que o motor consegue expressar: o jogador não pode “gerar” do nada um objeto ou uma regra que não exista no motor, só alterá-los por meio do agente de programação.
Essa linha lembra, em espírito, a renderização neural como o DLSS da NVIDIA: o pipeline tradicional entrega um resultado de baixa precisão e uma rede completa os detalhes. A diferença é que o preenchimento do Matrix-Game 4.0 é muito maior, e a entrada low-poly fornece quase só composição e movimento.
Para desenvolvedores na China que queiram reproduzir o resultado, há ainda um obstáculo de hardware. Por causa dos controles de exportação, os canais oficiais no país vendem a versão específica RTX 5090D, enquanto a configuração de teste divulgada pelo projeto é a RTX 5090. Quantos quadros a versão D ou a geração anterior, a 4090, alcançam, e se a latência passaria de 150 milissegundos, o README não informa. Para pequenas equipes que queiram prototipar, rodar a demo oficial na própria placa é mais confiável do que confiar nos números de divulgação.
O projeto lista três próximos passos: aumentar a resolução, suportar mais gêneros de jogo e explorar como manter consistente a imagem vista por cada jogador em cenários multijogador. 480p ainda está longe da qualidade visual dos jogos convencionais, e por ora não há medições de terceiros em outras placas de vídeo.
Fontes: página do projeto SkyworkAI no GitHub, TechNode, CocoLoop, Pandaily; resolução, taxa de quadros e latência seguem o critério de teste em uma única RTX 5090 divulgado pela Kunlun Tech, e a licença segue o README do projeto.