Microsoft’un çok modlu AI projeleri: Jarvis’in AI modellerini ChatGPT ile yönetmesi bekleniyor

celeron

Global Mod
Global Mod
Microsoft, Tony Stark’ın Iron Man: Jarvis’teki yapay zeka asistanına dayanan Jarvis adlı başka bir çok modlu yapay zeka projesini devreye sokuyor veya artık GPT-4’ü de destekleyen HuggingGPT’nin ChatGPT’yi yüzlerce yapay zeka modeline bağlaması amaçlanıyor. Kullanıcılar bir istekte bulunduktan sonra, ChatGPT, Microsoft’un Görsel ChatGPT’sine benzer şekilde, açıklamalarına göre uygun AI modellerini seçer.


Pekin’deki Microsoft Research Asia’dan Yongliang Shen liderliğindeki araştırma ekibi Jarvis’i yarattı çünkü büyük dil modelleri şu anda genellikle birkaç alt göreve bölünebilen karmaşık görevleri işleme becerisine sahip değil.

Metinden videoya da mümkündür


Shen ve diğerlerinin bir makalesine göre, HuggingGPT’nin metin sınıflandırma, nesne tanıma, semantik bölümleme, görüntü oluşturma, soru yanıtlama, metinden konuşmaya ve metinden videoya dahil olmak üzere 24 farklı görev alanını kapsadığı söyleniyor. ortaya çıkar (PDF). Modellerin işbirliği, kullanıcıları amaçları için doğru AI’ları aramaktan kurtarır. Model açıklamaları, AI girişimi Hugging Face’in web sitesinden geliyor.




ChatGPT, diğer AI modellerini koordine eder



ChatGPT, diğer AI modellerini koordine eder


(Resim: Yongliang Shen ve ark.)



İlk adımda, HuggingGPT, kullanıcı isteklerinin ilk olarak ChatGPT kullanılarak analiz edildiği görevleri planlar. Görevler, “olabildiğince çözülebilir istemlere” bölünmüştür. ChatGPT daha sonra uygun modelleri seçer ve seçilen her modelin sonuçlarını ChatGPT’ye döndürür. Son olarak, ChatGPT tüm modellerin sonuçlarına göre yanıtlar üretir.


Visual ChatGPT, görüntüler ve bunların işlenmesiyle ilgili soruları ve açıklamaları yanıtlama konusunda uzmanlaşırken, HuggingGPT ayrıca AI modellerinin kullanımı hakkında ayrıntılar sağlar, yanıtları okur veya videolar oluşturur. Bir örnekte HuggingGPT, talimat verildiğinde bir astronotun kısa bir videosunu oluşturur. Videonun çıktısıyla, ilgili dosya adları da dahil olmak üzere ara adımların kesin bir göstergesi de vardır.




HuggingGPT kısa video oluşturur



HuggingGPT kısa video oluşturur


(Resim: Yongliang Shen ve ark.)



Öncelikle Python’da yazılan Jarvis kodu, GitHub’da MIT lisansı altında ücretsiz olarak mevcuttur. Depoya göre, Jarvis’i denemek istiyorsanız, ayrıca bir sarılma yüz belirtecine ve OpenAI API erişimine ihtiyacınız var – ikincisi ek ücrete tabi olabilir.


(mak)



Haberin Sonu