Windows Agent Arena Üretken Yapay Zekaları Test Edecek

0

BEĞENDİM

ABONE OL

News

0

Microsoft Research tarafından özellikle Windows PC platformunda yapay zeka tahlillerini test etmek için bir kıyaslama (benchmark) geliştirdiğini duyurdu. Microsoft’un GitHub sayfasında açıklanan kıyaslama, Windows Agent Arena olarak isimlendiriliyor.

Windows Agent Arena, yapay zeka casuslarının insanların genellikle kullandığı Windows uygulamalarıyla ne kadar iyi ve ne kadar hızlı etkileşim kurabileceğini test etmek için tasarlandı. Windows Agent Arena’da yapay zeka casuslarıyla test edilen uygulamalar listesi arasında Microsoft Edge ve Google Chrome gibi web tarayıcıları, Dosya Gezgini Ayarları gibi işletim sistemi fonksiyonları, Visual Studio Code gibi kodlama uygulamaları, Not Defteri, Saat ve Paint gibi basit önceden yüklenmiş Windows uygulamaları ve VLC Player ile video izleme yer alıyor.

Microsoft’un açıklaması şu şekilde: “OSWorld çerçevesini, planlama, ekran anlama ve araç kullanımında casus yetenekleri gerektiren temsili etki alanlarında 150’den fazla farklı Windows görevi oluşturmak için uyarlıyoruz. Kıyaslama ölçütümüz de ölçeklenebilir ve 20 dakika gibi kısa bir sürede tam bir kıyaslama değerlendirmesi için Azure’da sıkıntısız bir şekilde paralelleştirilebilir.”

Microsoft Research ayrıca Windows Agent Arena karşılaştırma ölçütünde test etmek için Navi isimli kendi çok modlu casusunu oluşturdu. “Baktığım web sitesini bir PDF evrakına dönüştürebilir ve ana ekranıma, yani Masaüstüne koyabilir misin?” gibi belirli metin istemleriyle misyonlar gerçekleştirmesi istendi. Şirket, Navi’nin ortalama %19,5’lik bir performans başarı oranına sahip olduğunu buldu. Öte yandan bu, %74,5’lik insan performans oranına kıyasla hala epeyce düşük.

Windows Agent Arena gibi bir karşılaştırma ölçütüne sahip olmak, yapay zeka casuslarının oluşturulması için büyük bir gelişme olabilir. Böylece casuslar iyileştirilebilir ve insan performansına daha yakın performans gösterebilirler.

Kıyaslama ölçütünün koduyla birlikte tam makaleyi GitHub üzerinden inceleyebilirsiniz.

Diğer Teknoloji Haberleri İçin Tıklayın / Bursa Haber – Bursa Gündem – Bursa Gündem Haber – Bursa Haberleri – Bursa Son Dakika 

Bizi İnstagram’da Takip Edebilirsiniz / @BursaGündemHaber

Bizi X’de Takip Edebilirsiniz / @BursaGündemHbr

Bizi Facebook’da Takip Edebilirsiniz / @BursaGündemHaber

Bizi Youtube’da Takip Edebilirsiniz / @BursaGündemHaber

Bizi Linkedin’de Takip Edebilirsiniz / @BursaGündemHaber