Ace Attorney Oyununda AI Modellerinin Testi
Bir geliştirici, Phoenix Wright: Ace Attorney oyununda yapılan son araştırmanın detaylarını yorumladı. Bu araştırmada, farklı AI modellerinin, klasik mahkeme oyun serisinin ilk bölümü üzerinden teste tabi tutulduğu belirtildi.
Hao AI Lab tarafından gerçekleştirilen bu çalışmada, dört farklı AI modelinin bellek kapasitesi, mantık yürütme becerileri, görsel anlama yetenekleri ve stratejik karar verme becerileri değerlendirildi. Sonuçlar, modellerin performanslarına göre değişiklik gösterdi. Ancak hiçbiri oyunu tam anlamıyla geçmeyi başaramadı. Google Gemini ve OpenAI’nın o1 modeli, oyunun önüne kadar ilerlemeyi başardı.
Test Süreci ve Sonuçlar
Araştırmayı yürüten AI uzmanı K Ishi, bu testi yapma sebebinin AI modellerinin pratik becerilerini değerlendirmek olduğunu belirtti. “Test sırasında AI’lerin ifade edilen inandırıcılıkları bulma, uygun delil seçip itiraz etme gibi yeteneklerini ölçtük” diyerek, en iyi “avukat” olarak o1 modelini öne çıkardı.
Her AI modelinin, davanın tamamını göz önünde bulundurarak kararlar vermesinin ve yeni delillerin mahkemede ortaya çıkması durumunda da esnek bir anlayış sergilemesinin gerektiği vurgulandı. Test edilen AI modellerinin performansı aşağıdaki videoda izlenebilir.
Geliştiriciden Yorumlar
Ace Attorney geliştiricisi Masakazu Sugimori, 25 yıl önce üzerinde çalıştığı oyunun bu kadar ilginç bir şekilde kullanıldığını görmekten şaşırdığını ifade etti. Sugimori, “Oyunumu bu şekilde test eden bir araştırma görmek beni çok mutlu etti,” dedi. Ayrıca, AI modellerinin oyunun ilk bölümünde takıldığını görünce, “İlk bölüm insan için oldukça basit bir şekilde tasarlandı. Belki de bu tür çıkarım gücü, insanların güçlü olduğu bir alandır” diye ekledi.
Sugimori, Takumi ve Mikami gibi yöneticilerin, oyunun zorluk seviyesini dengelemedeki titizliklerini de vurguladı. “O dönemde dünyada benzeri olmayan bir oyun yapmaya çalışıyorduk,” diyerek, “Geniş bir oyuncu kitle tarafından kabul edilebilir bir zorluk düzeyini sağlamak gerekiyordu.” dedi.
Oyun deneyimini tatmin edici ve keyifli kılabilmek için esneklik ve strateji önemini tekrar hatırlatan Sugimori, AI’lerin henüz bu tatmin duygusunu deneyimleyemediğini belirtti. Belki de 2030 yılına geldiğimizde AI modellerinin Ace Attorney’yi geçme yetenekleri hakkında konuşacağız.
