NVIDIA’dan Yeni Gelişmeler: Oyun Karakterleri İçin Küçük Dil Modeli
Gamescom 2024 etkinliğinde, NVIDIA, oyun karakterlerinin konuşma yeteneklerini geliştirmek için ilk on cihaz küçük dil modelini (SLM) duyurdu. Ayrıca, NVIDIA ACE ve dijital insan teknolojilerini ilk kez sergileyen oyunun Amazing Seasun Games’in Mecha BREAK olduğunu açıkladı. Bu oyun, NVIDIA GeForce RTX AI PC’lerde doyurucu ve dinamik bir oyun deneyimi sunuyor.
NVIDIA ACE ve Yeni SLM ile Rol Yapma Deneyimini Artırma
NVIDIA ACE, konuşma, zeka ve animasyonu üretken yapay zeka ile destekleyen dijital insan teknolojileri setidir. Artık ilk NVIDIA SLM olan Nemotron-4 4B Instruct modelini de içermektedir. Bu yeni model, oyun geliştiricileri tarafından bulut ve cihaz üzerinde dağıtım için mevcut olup, kullanım kolaylığı sağlayan mikro hizmetler (NVIDIA NIM) sunmaktadır.
Nemotron-4 4B Instruct, hız ve cihaz üzerinde çıkarım için optimizasyon sağlamak amacıyla damıtma, budama ve INT4 kuantizasyonu ile geliştirilmiştir. VRAM kullanımı yaklaşık 2 GB ile minimum seviyeye indirilmiş ve bu, büyük dil modellerine (LLM) göre çok daha hızlı bir ilk token süre sunmaktadır.
- Damıtma, daha büyük bir modelin (öğretmen) çıktısını taklit etmeyi öğrenen daha küçük bir modelin (öğrenci) eğitilmesi sürecidir.
- Budama, öğrenci modelinin kritik olmayan çıktılarının kaldırılması sürecidir.
- Kuantizasyon, bir modelin ağırlıkları ve aktivasyonlarının hassasiyetinin azaltılması sürecidir.
Nemotron-4 4B Instruct, Nemotron-4 15B LLM’nden damıtılmıştır ve belirli görevlerde daha iyi performans sergilemek için talimat odaklı ince ayar tekniği ile özel olarak geliştirilmiştir. Bu model, rol oynama, retrieval augmented generation (RAG) ve fonksiyon çağırma yeteneklerini iyileştirerek oyun karakterlerinin oyuncu talimatlarını daha sezgisel bir şekilde anlamasını ve yanıt vermesini sağlamaktadır.
Nemotron-4 4B Instruct NIM’i, dijital insan teknolojisi hattınızda bulut üzerinden kullanabilir veya 100M’ün üzerinde NVIDIA GeForce RTX özellikli PC ve dizüstü bilgisayarı kullanarak cihaz üzerinde çıkarım yapabilirsiniz.
NVIDIA ACE NIM ile İlk Oyun Gösterimi
Mecha BREAK, Amazing Seasun Games tarafından geliştirilen ve ACE destekli etkileşimlerin ilk kez sergilendiği oyundur. NVIDIA Nemotron-4 4B Instruct NIM, bu oyun içerisinde cihazda çalışmaktadır.
NVIDIA Audio2Face-3D NIM ve OpenAI’nin otomatik konuşma tanıma modeli Whisper, cihaz üzerinde konuşma tanıma ve yüz animasyonu gerçekleştirmektedir. Elevenlabs karakterin sesini bulut üzerinden sağlamaktadır.
Bu gösterim demo’sunda, NVIDIA ACE ve dijital insan teknolojileri sayesinde oyuncular, mekanik bir karakterle etkileşim kuracak; bu karakter, çeşitli mech seçenekleri sunarak oyuncuların oyun stillerine veya takım ihtiyaçlarına uygun seçim yapmalarına yardımcı olacak, görünüm özelleştirmesi konusunda destek verecek ve devasa savaş makineleri için nasıl hazırlanacakları konusunda önerilerde bulunacaktır.
Oyun Geliştiricileri için Yeni Fırsatlar
NVIDIA ACE ve dijital insan teknolojileri, oyun endüstrisinde hızlı bir şekilde yaygınlaşıyor.
Küresel oyun yayıncısı ve geliştiricisi Perfect World Games, NVIDIA ACE ve dijital insan teknolojileri demo’su Legends üzerinde yeni yapay zeka destekli vizyon yetenekleri ile ilerliyor. Bu demo içerisinde, Yun Ni karakteri, oyuncuları görebiliyor ve bilgisayarın kamerası aracılığıyla gerçek dünyadaki insanları ve nesneleri tanıyabiliyor. Bu özellik, oyuna artırılmış gerçeklik katmanları ekleyerek deneyimi zenginleştiriyor.
Bu yetenekler, PC oyunları için yeni bir immersiyon ve erişilebilirlik seviyesi sunmaktadır. Daha fazla bilgi için NVIDIA ACE sayfasını ziyaret edebilir ve NIM’i indirerek üretken yapay zeka ile desteklenen oyun karakterleri inşa etmeye başlayabilirsiniz.