Günlük ve haftalık haber bültenlerimize katılın, sektör lideri AI haberleri hakkında en son güncellemeleri ve özel içerikleri alın. Daha Fazla Bilgi
Şirketler, kompleks yapay zeka (AI) ajanları yatırımlarını artırıyor. Bu sistemlerin kendi içinde farklı alanlarda mantık yürütebilmeleri ve çeşitli görevleri yerine getirebilmeleri isteniyor; ancak genellikle ajan performansını değerlendirmenin karmaşık ve zaman alıcı süreçleri onları kısıtlıyor. Bugün, veri ekosisteminin lideri Databricks, geliştiricilerin bu süreci daha da kolaylaştıracak sentetik veri yeteneklerini duyurdu.
Şirketin belirttiğine göre, bu yeni özelliklerle geliştiriciler, devam eden ajan sistemlerinin performansını değerlendirmek için yüksek kaliteli yapay veri setleri üretebilecek. Bu süreç, konu uzmanlarıyla gereksiz yazışmaları azaltacak ve ajanları daha hızlı üretime sürmeyi sağlayacak.
Databricks’in AI Ajan Değerlendirme Stratejisi
Databricks, geçen yıl MosaicML şirketini satın aldı ve bu şirketin teknolojisini, veri gölü hizmeti sunan platformuna entegre etti. Böylece şirketler, kendi verilerini kullanarak makine öğrenimi (ML) ve jeneratif AI çözümleri geliştirmek, dağıtmak ve değerlendirmek için gereken her şeyi elde etmiş oldu.
Şirket, kompleks yapay zeka sistemleri geliştirirken, bunların yalnızca doğru yanıtlar verip mantık yürütebilmelerini değil, aynı zamanda destek taleplerini açıp kapatmaları, e-postalara yanıt vermeleri ve rezervasyon yapmaları gibi işlemleri de gerçekleştirmelerini sağlamaya odaklanıyor. Bu bağlamda, bu yıl Mosaic AI için yeni bir dizi özellik tanıttı; bunlar arasında temel modelleri ince ayar yapma, AI araçları kataloğu ve AI ajanlarının geliştirilmesi ve değerlendirilmesi için araçlar yer alıyor – Mosaic AI Ajan Çerçevesi ve Ajan Değerlendirme.
Sentetik Veri API’si ile Değerlendirme Sürecinin Hızlandırılması
Bugün, şirket Ajan Değerlendirme’yi yeni bir sentetik veri üretim API’si ile genişletti. Şu ana kadar, Ajan Değerlendirme, kullanıcılara ve konu uzmanlarına, ilgili sorular ve cevaplarla veri setlerini manuel olarak tanımlamalarını sağlayan iki ana özellik sundu. Bu, AI ajanlarının sağladığı yanıtların kalitesini değerlendirmek için bir ölçüt oluşturuyor. Ayrıca, uzmanların bu ölçütleri kullanarak ajanın kalitesini değerlendirmelerine ve geri bildirimde bulunmalarına olanak tanıyor.
Bu işlem etkili olsa da, değerlendirme veri setleri oluşturma işlemi oldukça zaman alıyor. Bunun nedenleri arasında, alan uzmanlarının her zaman erişilebilir olmaması, süreçlerin manuel olarak yürütülmesi ve kullanıcıların en uygun soruları belirlemede zorluk yaşamaları yer alıyor. İşte bu noktada sentetik veri üretim API’si devreye giriyor ve geliştiricilerin birkaç dakikada yüksek kaliteli değerlendirme veri setleri oluşturmalarına olanak tanıyor.
Öne Çıkan Özellikler ve Kullanıcı Deneyimi
Databricks’in sunmuş olduğu sentetik veri API’si, diğer değerlendirme veri setleri oluşturan araçların aksine, Mosaic AI Ajan Değerlendirmesi ile sıkı bir entegrasyona sahip. Böylece, geliştiricilerin mevcut iş akışlarından ayrılmalarına gerek kalmıyor.
API ile bir veri seti oluşturmak dört aşamalı bir süreç. Geliştiriciler, belgelerini analiz etmekte, bunları Delta Table olarak veri gölünde saklamakta, bu tabloyu sentetik veri API’sine iletmekte, oluşturulan veri ile değerlendirme yapıp kalite sonuçlarını gözlemlemektedir. Dış bir araç kullanıldığında çalıştırılması gereken ek adımlar olduğu için oldukça zahmetli bir süreç oluşuyor.
Birçok Databricks kullanıcısı, zaten API’nin suni veri üretiminden faydalanarak, ajanslarının kalitesini artırma sürecinde kaydedilen zamanın önemli ölçüde azaldığını bildirmektedir. Örneğin, Lippert şirketinin yapay zeka müdürü Chris Nishnick, kendi ekiplerinin bu API’nin verilerini kullanarak model yanıt kalitesini %60 oranında artırmayı başardığını belirtmiştir.
Gelecek için Planlanan Gelişmeler
Şirket, Mosaic AI Ajan Değerlendirme özelliklerini genişleterek konu uzmanlarının sentetik verileri daha da doğru hale getirmelerine yardımcı olmak ve veri setlerinin yaşam döngüsünü yönetme araçları eklemeyi planlıyor.
Peter, “Önizleme aşamasında, müşterilerin çeşitli ek yetenekler talep ettiğini gördük. İlk olarak, konu uzmanları için sentetik değerlendirme verilerini gözden geçirebilecekleri bir kullanıcı arayüzü istediler. İkincisi, veri değişikliklerini takip etmek için bir yönetim aracı olmasını talep ettiler.” diyerek, önümüzdeki yıl bu talepler doğrultusunda pek çok yeni özellik sunacaklarını belirtti.
Yapılan bu gelişmelerin Databricks’in Mosaic AI teklifinin benimsenmesini artırması bekleniyor ve şirketin veri ve jeneratif AI alanında güçlü bir konumda kalmasını daha da sağlamlaştırması muhtemel.
