Çok Amaçlı Dönüştürücü Ajan ve İlk Genel Amaçlı Veri Seti Tanıtıldı
Kaynak: huggingface.co ·
Araştırmacılar, video oyunları oynamak, robot kontrol etmek ve basit bir navigasyon ortamında komutları yürütmek gibi çeşitli sıralı karar verme görevlerini tek bir ağ üzerinden gerçekleştirebilen çok amaçlı bir dönüştürücü ajan olan Jack of All Trades modelini duyurdu. Bu çalışma kapsamında, genel amaçlı ajan eğitimi için geliştirilen ilk veri setinin yanı sıra çok çeşitli ortamlarda eğitilmiş uzman pekiştirmeli öğrenme ajanları da yayınlandı. Model, Atari, BabyAI, Meta-World ve MuJoCo olmak üzere dört farklı alanda değerlendirildi ve uzman performansının ortalama %65.8 oranına ulaştı. Ayrıca gelecekteki gözlemleri tahmin etme yardımcı görevinin doğru bir dengeyle öğrenme verimliliğini artırabileceği gösterildi.
Neden önemli?
Bu gelişme, tek bir modelin pekiştirmeli öğrenme, bilgisayarlı görü ve doğal dil işleme gibi farklı alanlarda tek bir ağırlık setiyle çalışabilmesine olanak tanıyarak çok yönlü sistemlerin geliştirilmesine katkı sağlar.
Bununla neler yapılabilir?
- Olası kullanım: Atari oyunlarında ve robot kontrol görevlerinde sıralı karar verme süreçlerinin tek bir model üzerinden yönetilmesi.
- Olası kullanım: Metin ve görüntü verilerinin işlenmesi gereken çok modlu uygulamalarda modelin yeteneklerinin test edilmesi.
Somut sonuçlar ve kanıtlar
- JAT, tüm 157 eğitim görevinde değerlendirildi ve 4 alandaki JAT uzmanına kıyasla ortalama %65.8 performans gösterdi. (Üreticinin açıklaması)
- Atari 57 oyunlarında ajan, uzmanın skorunun %14.1'ine ulaştı ve 21 oyunda insan performansını geçti. (Üreticinin açıklaması)
- BabyAI ortamında ajan, uzmanın skorunun %99.0'ına ulaştı. (Üreticinin açıklaması)
Sınırlar ve açık kalan sorular
Model metin ve görsel görevlerinde temel yetenekler göstermektedir ve henüz uzman düzeyini aşamamaktadır. Davranışsal Klonlama ile eğitildiği için alt optimal yörüngelerden tam olarak yararlanamamaktadır.