Skywork AI, unit di bawah Kunlun Tech, merilis Matrix-Game 4.0 secara open source pada 15 Oktober. Versi ini mengubah pendekatannya: mesin gim memegang status dunia, aturan fisika, dan input pemain, sedangkan model video hanya bertugas "menggambar ulang" tampilan low-poly keluaran mesin menjadi gambar yang detail.
Angka resmi yang diumumkan adalah berjalan pada 480p dan 60 fps di satu RTX 5090, dengan latensi dari aksi pemain hingga respons layar di bawah 150 milidetik. Proyek ini menyebutnya sebagai neural rendering streaming untuk gim yang bisa dimainkan.
Mesin mengurus logika, model mengurus gambar
Menurut keterangan di GitHub, model video pada versi 4.0 adalah model generatif kausal dengan langkah yang sedikit. Inputnya berupa frame RGB low-poly yang dirender mesin ditambah prompt teks, dan outputnya berupa gambar berdetail tinggi yang kontinu dari frame ke frame. Aturan gim, tabrakan, dan skor semuanya tetap berada di mesin.
Ada pula agen pemrograman. Pemain mengajukan perubahan dengan bahasa alami, misalnya mengganti aturan permainan, lalu agen menerjemahkannya menjadi aturan gim baru dan prompt render, sehingga gaya visual dan cara bermain bisa berubah bersamaan.
Isi rilis kali ini meliputi:
- Bobot model, konfigurasi inferensi, dan kode inferensi (inferensi dengan satu GPU)
- Demo di browser dan kode sumber gim
- Aset untuk tiga skenario: dua gim tembak-menembak orang ketiga bertema kastil abad pertengahan dan Mesir kuno, serta satu gim balap mobil di kota
Lisensi yang tertulis di README adalah Apache-2.0, sementara komponen dan aset pihak ketiga mengikuti lisensinya masing-masing. Jumlah parameter model tidak diumumkan secara resmi.
Perjalanan empat versi
Jika semua versi Matrix-Game dirangkai, perubahan arahnya terlihat jelas.
Versi 1.0 pada Mei 2025 memiliki lebih dari 17 miliar parameter dan berfokus pada adegan ala Minecraft. Model langsung menghasilkan potongan video berikutnya berdasarkan aksi pemain, dan dunianya sendiri juga "dibayangkan" oleh model. Versi 2.0 pada Agustus 2025 menekankan latensi rendah dan interaksi urutan panjang, dengan generasi berkelanjutan pada kecepatan sekitar 25 frame per detik. Versi 3.0 pada 27 Maret tahun ini menambahkan memori jangka panjang, mengutamakan resolusi tinggi dan interaksi waktu nyata, dengan Genie 3 milik Google sebagai pembandingnya.
Ketiga versi sebelumnya sama-sama membuat model menanggung dunia sekaligus gambar, dan konsistensi selalu menjadi masalah: berjalan jauh lalu kembali, adegan bisa jadi tidak cocok lagi. Versi 4.0 mengembalikan dunia ke mesin dan model hanya merender, sehingga konsistensi dijamin oleh mesin, dan frame rate naik dari sekitar 25 frame pada 2.0 menjadi 60 frame. Harganya, batas konten yang bisa dimainkan kembali ke apa yang bisa diekspresikan mesin. Pemain tidak bisa begitu saja "menghasilkan" objek atau aturan yang tidak ada di mesin, hanya bisa mengubahnya lewat agen pemrograman.
Jalur ini mirip secara gagasan dengan neural rendering seperti DLSS dari Nvidia: pipeline tradisional menghasilkan keluaran berpresisi rendah, lalu jaringan saraf melengkapi detailnya. Bedanya, cakupan pelengkapan di Matrix-Game 4.0 jauh lebih besar, dengan input low-poly yang nyaris hanya memberi komposisi dan gerakan.
Bagi pengembang di Tiongkok yang ingin mereplikasinya, ada hambatan perangkat keras. Akibat kontrol ekspor, kartu yang dijual resmi lewat saluran di sana adalah RTX 5090D versi khusus, sementara pengujian yang dipublikasikan proyek memakai RTX 5090. Berapa frame yang bisa dicapai pada versi D atau 4090 generasi sebelumnya, dan apakah latensinya akan melebihi 150 milidetik, tidak ada datanya di README. Bagi tim kecil yang ingin membuat prototipe, menjalankan demo resmi di kartu milik sendiri lebih dapat diandalkan daripada melihat angka promosi.
Arah pengembangan berikutnya yang disebut resmi ada tiga: meningkatkan resolusi, mendukung lebih banyak genre gim, dan menjajaki cara menjaga konsistensi gambar yang dilihat tiap pemain dalam skenario multipemain. 480p masih jauh dari kualitas gambar gim arus utama, dan data uji dari pihak ketiga pada kartu grafis lain sejauh ini belum ada.
Sumber: halaman proyek SkyworkAI di GitHub, TechNode, CocoLoop, Pandaily; resolusi, frame rate, dan latensi mengikuti kondisi pengujian satu RTX 5090 yang diumumkan Kunlun Tech, sedangkan lisensi mengikuti README proyek.