OpenAI, Yapay Zeka’nın küresel erişimini genişletme yolunda büyük bir adım attı. Şirket, Arapça, Almanca, Suahili, Bengalce ve Yoruba dahil olmak üzere 14 dilde dil modellerinin performansını değerlendiren çok dilli bir veri kümesini yayınladı.
Şirket, popüler Massive Multitask Language Understanding (MMLU) testine dayanan ancak yalnızca İngilizce olarak yapılan bir AI sisteminin 57 farklı alandaki bilgisini test eden yeni bir değerlendirme olan Multilingual Massive Multitask Language Understanding (MMMLU) veri kümesini Hugging Face açık veri platformunda paylaştı.
OpenAI, Çok Dilli Yapay Zeka’yı Değerlendirmek İçin Küresel Bir Ölçüt Sunuyor
MMMLU veri kümesi, işletmeler ve hükümetlerin giderek daha fazla AI destekli çözümleri benimsemeleri ile kullanıcılarla dünya çapında etkileşim kurabilen AI sistemlerine olan ihtiyacı yansıtan çeşitli dil ortamlarında AI modellerinin performansını sınar. AI araştırmalarının çoğunlukla yalnızca İngilizce ve birkaç yaygın dil üzerinde odaklandığı uzun bir sürecin ardından, Swahili ve Yoruba gibi milyonlarca insan tarafından konuşulan ancak AI araştırmalarında genellikle ihmal edilen dilleri içeren OpenAI’in bu kararı daha kapsayıcı bir AI teknolojisine doğru bir değişiklik sinyali gönderiyor.
İnsan Çevirisi, Çok Dilli AI’nın Doğruluğunu Artırıyor
OpenAI, MMMLU veri kümesini oluşturmak için profesyonel insan çevirmenlerini kullandı ve karşılaştırmalı veri kümelerine göre daha yüksek doğruluk sağladı. Otomatik çeviri araçları genellikle daha az eğitim verisine sahip dillerde özellikle ince hatalar yapar. İnsan uzmanlığına dayanarak OpenAI, veri kümesinin çoklu dillerdeki AI modellerini daha güvenilir bir şekilde değerlendirmek için daha sağlam bir temel sağladığından emin olur.
Hugging Face İşbirliği, Çok Dilli AI Verilerine Açık Erişimi Artırıyor
OpenAI, MMMLU veri kümesini paylaşarak popüler bir platform olan Hugging Face üzerinde daha geniş bir AI araştırma topluluğu ile etkileşime geçiyor. Hugging Face, açık kaynaklı AI araçlarını paylaşmak için bir hedef haline gelmiş ve MMMLU veri kümesinin eklenmesi, OpenAI’in AI araştırmalarında açık erişimi ilerletme taahhüdünü göstermektedir.
“MMMLU veri kümesi şu anda düzenlenen küresel bir AI etkinliği yaratmak için bir adım olarak yorumlanabilir” dedi.