Kunlun Tech’in açık kaynaklı Matrix-Game 4.0 modeli, yapay zekâ üretimini oyun motoruyla birleştirerek etkileşimli dünyalar sunuyor. Şirketin paylaştığı verilere göre sistem, tek bir Nvidia RTX 5090 ile 480p çözünürlükte 60 FPS hızında çalışabiliyor.
Model, yalnızca görüntü üretmek yerine oyuncuların içinde dolaşabildiği ve komutlarıyla değiştirebildiği dünyalar oluşturmayı hedefliyor. Geliştiriciler, proje kodlarından model ağırlıklarına ve tarayıcı demosuna kadar çeşitli bileşenleri açık kaynak olarak yayımladı.
Oyun motoru dünyadaki kuralları ve nesneleri yönetiyor
Çin merkezli Kunlun Tech tarafından geliştirilen Matrix-Game 4.0, oyun motorunun oluşturduğu anlık görüntüleri yapay zekâ destekli video üretimiyle işliyor. Fizik kuralları, nesnelerin konumları ve oyuncu etkileşimleri geleneksel oyun motorunda tutuluyor. Motor dünyayı basitleştirilmiş, düşük poligonlu grafiklerle kurarken yapay zekâ bu görüntüleri daha ayrıntılı karelere dönüştürüyor.
Bu yapı, dünyayı bütünüyle yapay zekânın oluşturduğu modellerde görülebilen bazı tutarlılık sorunlarını azaltmayı amaçlıyor. Kadraj dışına çıkan nesnelerin durumunun veya diğer nesnelerle ilişkisinin zamanla kaybolması, bu tür sistemlerin karşılaşabildiği sorunlar arasında. Matrix-Game 4.0’da oyun motorunun dünyadaki durumu koruması, modelin her karede oyun kurallarını yeniden çıkarmak zorunda kalmamasını sağlıyor.
Sistemde ayrıca oyuncu talimatlarına göre oyun kurallarını değiştirebilen bir kodlama ajanı bulunuyor. Ajan, doğal dille verilen komutları önce yapay zekâ modelinin kullanacağı istemlere, ardından yeni oyun mekaniklerine dönüştürüyor. Böylece oyuncular dünyada dolaşmanın yanı sıra gerçek zamanlı değişiklikler de yapabiliyor.
Tek RTX 5090 ile 480p çözünürlükte 60 FPS
Kunlun Tech’in verilerine göre Matrix-Game 4.0, tek bir Nvidia RTX 5090 ekran kartıyla 480p çözünürlükte saniyede 60 kare hızında çalışıyor. Oyuncu komutu ile karşılığının ekranda belirmesi arasındaki gecikme 112 milisaniyeye kadar iniyor. Şirket, uygun koşullarda video üretim hızının saniyede 83,4 kareye çıktığını da bildiriyor.
Modelin her kareyi sıfırdan üretmemesi, bu performansta önemli rol oynuyor. Matrix-Game 4.0, önceki karelerden yararlanarak yeni görüntüler oluşturan nedensel bir video üretim modeli kullanıyor. Sistem, DiT (Diffusion Transformer) mimarisinin damıtılmış bir sürümünden yararlanarak geleneksel video üretim modellerine kıyasla daha az işlemle kare üretebiliyor.
Farklı oyun türlerinde test edildi ve açık kaynak yayımlandı
Kunlun Tech, modeli üçüncü şahıs nişancı oyunları, yarış oyunları ve hava muharebesi senaryoları gibi farklı türlerde denedi. Yeni oyun türleri geliştirmek için video modelini baştan eğitmek yerine oyun motorundaki kuralların ve kodun değiştirilmesi yeterli olabiliyor.
Projenin kodları, model ağırlıkları, çıkarım kodu, oyun varlıkları ve tarayıcıda çalışan demosu açık kaynak olarak paylaşıldı. Geliştiriciler böylece sistemi inceleyip kendi projelerine uyarlayabiliyor.
Matrix-Game 4.0’ın öne çıkan sınırlaması 480p çözünürlükte çalışması. Modelin mevcut aşamadaki amacı yüksek grafik kalitesine sahip güncel oyunlarla yarışmak değil; yapay zekâyla etkileşimli ve tutarlı oyun dünyaları oluşturulabileceğini göstermek.
