Generalist AI'dan robotlara saniyeler içinde görev öğreten yeni model
Generalist AI, robotların yeni fiziksel görevleri tek bir gösterimle hızla öğrenmesini sağlayan GEN-1.5 modelini tanıttı.
Robotların karmaşık görevleri öğrenmesi genellikle uzun ve detaylı programlama süreçleri gerektirir. Ancak Generalist AI, bu durumu kökten değiştirebilecek yeni temel modeli GEN-1.5'i duyurdu. Şirketin açıklamasına göre GEN-1.5, sadece 3 ila 12 saniyelik tek bir gösterimi analiz ederek herhangi bir ek ayarlama veya ince ayar olmadan görevi başarıyla yerine getirebiliyor.
GEN-1.5, video görüntüleri, sensör verileri, dil ve robotun kendi konum bilgileri gibi çok çeşitli girdileri işleyebilen büyük ve çok modlu bir model. Bu sayede, sensör verileri ve hareket dizilerinden oluşan örnekleri 'fiziksel istem' olarak alabiliyor. Model, 30 saniyelik bir bağlam penceresiyle saniyede 100 hareket komutu üreterek oldukça hızlı bir tepki süresi sunuyor.
Gerçekleştirilen deneylerde, GEN-1.5'in tek gösterimle 10 farklı kısa süreli manipülasyon görevinde ortalama %59 başarı oranı elde ettiği görüldü. Modelin yetenekleri sadece gösterilen hareketi tekrarlamakla kalmıyor; iki farklı fiziksel istemi birleştirerek daha uzun bir görev dizisi oluşturabiliyor. Örneğin, kalem kutusunun fermuarını açma ve içindeki parayı alma gösterimleri ayrı ayrı verildiğinde, model bu iki eylemi kesintisiz bir akış halinde gerçekleştirebildi. Hatta gösterimde olmayan yeniden konumlanma ve hatalardan kurtulma gibi ara hareketleri de kendisi üretti.
Modelin en dikkat çekici özelliklerinden biri, simülasyon ortamında kaydedilen bir gösterimin gerçek bir robota sıfır örnekle aktarılabilmesi. Yani, modelin ön eğitiminde simülasyon verisi olmamasına rağmen, sanal ortamdaki bir hareketi gerçek dünyadaki bir robotun yapması sağlanabiliyor. Ayrıca, model insanların kendi elleriyle yaptığı hareketleri robotun kameralarından izleyerek taklit edebiliyor.
Generalist AI, GEN-1.5'in beklenmedik durumlarda farklı stratejiler geliştirebildiğini de ortaya koydu. Bir nesneyi fırçayla kaseye süpürme görevi gösterildikten sonra, model aynı amaç için muzu geçici bir fırça olarak kullanabildi. Faraşla karşılaştığında ise nesneyi süpürmek yerine faraşla kaldırıp kasenin içine döken farklı bir yöntem geliştirdi. Şirket, modelin bu doğaçlama ve bağlam içinde öğrenme yeteneklerinin ön eğitim sürecinde kendiliğinden ortaya çıktığını belirtiyor. GEN-1.5'in gelişimiyle, robotlara görev öğretmek için aylar süren programlamalar yerine birkaç saniyelik gösterimlerin yeterli olacağı bir geleceğe adım atılabilir.
