Unreal Fest 2024‘te NVIDIA, Unreal Engine 5 için yeni yerleşik eklentiler tanıttı. Bu eklentiler, NVIDIA ACE‘yi kullanarak Windows PC’lerde AI destekli MetaHuman karakterler oluşturmayı ve dağıtmayı kolaylaştırıyor. ACE, konuşma, zeka ve animasyon gibi dijital insan teknolojilerinin yer aldığı bir suite olarak, generatif AI ile desteklenmektedir.
Geliştiriciler şimdi ayrıca Autodesk Maya için Audio2Face-3D eklentisine erişim sağlayabilir. Bu eklenti, Maya’da avatar geliştirmeyi daha kolay ve hızlı hale getiren basit bir arayüz sunuyor. Eklenti, geliştiricilerin kendi dijital içerik oluşturma araçları için eklenti geliştirebilmeleri amacıyla kaynak kodu ile birlikte geliyor.
NVIDIA, Unreal Engine 5 için, Epic’in Unreal Pixel Streaming teknolojisini kullanan bir renderer mikroservisi de geliştirdi. Bu mikroservis, NVIDIA ACEAnimation Graph Microservice‘ını ve erken erişim için Linux işletim sistemini destekliyor. Animation Graph Microservice, gerçekçi ve tepkisel karakter hareketleri sağlarken, Unreal Pixel Streaming desteği ile MetaHuman yaratımlarınızı her cihaza akstream etmenizi mümkün kılıyor.
MetaHuman Karakterlere Hayat Verin
NVIDIA ACE Unreal Engine 5 örnek projesi, geliştiricilerin ACE’yi oyunlarına ve uygulamalarına entegre etmelerine rehberlik ediyor. Bu örnek proje, on-device ACE eklenti sayısını arttıran unsurları içeriyor:
- Audio2Face-3D için dudak senkronizasyonu ve yüz animasyonu
- Nemotron Mini 4B Instruct modeli için yanıt üretimi
- Geriye Dönük Zenginleştirilmiş Üretim (RAG) için bağlamsal bilgi
Geliştirici olarak, fikri mülkiyetiniz için bir veri tabanı oluşturabilir, düşük gecikme süresiyle ilgili yanıtlar üretebilir ve bu yanıtların ilgili MetaHuman yüz animasyonlarını Unreal Engine 5‘te sorunsuz bir şekilde yönlendirmesini sağlayabilirsiniz. Bu mikroservislerin her biri, düşük gecikme süresi ve minimal bellek ayak izi ile Windows PC’lerde çalışacak şekilde optimize edilmiştir.
Yeni eklentilere kısa süre içinde erişim sağlanacak. Başlamak için, uygun ACE eklentisini ve Unreal Engine örneğini indirip bir MetaHuman karakteri ile birlikte kullanmalısınız.
Maya ACE Eklentisiyle 3D Animasyonu Hızlandırın
Autodesk Maya, oyun geliştiricileri ve teknik sanatçılar için yüksek performanslı animasyon işlevleri sunarak kaliteli 3D grafikler oluşturmayı kolaylaştırıyor. Şimdi Audio2Face-3D eklentisi ile herhangi bir karakter için yüksek kaliteli, sesle yönlendirilen yüz animasyonları daha kolay bir şekilde oluşturabilirsiniz. Kullanıcı dostu arayüz, Unreal Engine 5 ortamına geçiş yapmanıza olanak tanıyor. Kaynak kodu ve scriptler, diğer dijital içerik oluşturma araçlarında kullanılmak üzere özelleştirilebilir.
Başlamak için, bir API anahtarı oluşturmanız ya da Audio2Face-3D mikroservisini indirmeniz gerekiyor. Audio2Face-3D mikroservisi, NVIDIA NIM adı verilen, bulut ya da veri merkezlerinde temel modellerin dağıtımını hızlandıran kullanımı kolay mikroservisler setinin bir parçasıdır.
Sonrasında Autodesk Maya 2023, 2024 veya 2025‘e sahip olduğunuzdan emin olun. NVIDIA/Maya-ACE GitHub reposuna erişin; bu repo, Maya eklentisi, gRPC istemci kütüphaneleri, test varlıkları ve keşfetmek, öğrenmek ve Audio2Face-3D ile yenilik yapmak için gereken her şeyi içermektedir.
Digital Human Teknolojisini Bulut Üzerinden Yaygınlaştırın
Dijital insan teknolojisini bulut üzerinden dağıtırken, amacı mümkün olduğunca çok müşteriye ulaşmaktır. Yüksek kaliteli karakterlerin akstreami, önemli hesaplama kaynakları gerektirir. En son Unreal Engine 5 renderer mikroservisi, NVIDIA Animation Graph Microservice‘ı ve erken erişim için Linux işletim sistemini destekliyor.
Animation Graph, AI modellerinden diğerleriyle etkileşime geçerek karakterler için bir konuşma boru hattı oluşturur. Geliştiricilerin RAG mimarilerini birbirine bağlayarak, hem bağlamı hem de konuşma geçmişini korumaktan sorumludur. Yeni UE5 pixel streaming uyumluluğu ile, bir MetaHuman karakterini bulutta bir sunucuda çalıştırabilir ve render edilen kareleri ve sesleri her tarayıcı ve kenar cihazına Web Gerçek Zamanlı İletişim (WebRTC) üzerinden akstream edebilirsiniz.
Hemen Başlayın
Unreal Engine 5 renderer mikroservisi ile başlamak için erken erişim başvurusu yapın. NVIDIA ACE hakkında daha fazla bilgi edinin ve NIM mikroservislerini indirerek, generative AI destekli oyun karakterleri oluşturmağa başlayın.