Meta, ImageBind adlı yeni açık kaynaklı yapay zeka aracını duyurdu
Meta, metin, ses, görsel veriler, sıcaklık ve hareket okumaları dahil olmak üzere birden fazla veri akışını birbirine bağlayan yeni açık kaynaklı AI modeli ImageBind’ı duyurdu. Model, bir kuş fotoğrafından kuş sesi, bir tiren sesinden tren fotoğrafı, veya bir araç motor sesi ve deniz fotoğrafından deniz kenarına park etmiş bir araba fotoğrafı oluşturabiliyor. ImageBind, insanların bir ortamı nasıl algıladığına veya hayal ettiğine benzer şekilde veriler arasındaki bağlantıları tahmin eden bir yapay zeka aracıdır.
ImageBind, diğer yapay zeka araçlarından farklı olarak
Midjourney, Stable Diffusion ve DALL-E 2 gibi görüntü oluşturucular kelimeleri görüntülerle eşleştirerek yalnızca bir metin açıklamasına dayalı görsel sahneler oluşturmanıza olanak tanırken, ImageBind daha geniş bir ağ oluşturuyor. Metin, görüntü / video, ses, 3D ölçümler (derinlik), sıcaklık verileri (termal) ve hareket verilerini (atalet ölçüm birimlerinden) birbiriyle birleştiren ImageBind, bunu her olasılık üzerinde eğitim almak zorunda kalmadan yapıyor.
İnsan algısı taklit ediliyor
ImageBind'ı makine öğrenimini insan öğrenmesine yaklaştıran bir araç olarak görebilirsiniz. İnsanlar ve diğer hayvanlar, genetik avantajımız olan hayatta kalmak ve DNA'mızı aktarmak için verileri işlemek üzere şekillenmiştir. Bilgisayarlar hayvanların çoklu duyusal bağlantılarını taklit etmeye yaklaştıkça, ImageBind gibi bir araç bu bağlantıları yalnızca sınırlı veri parçalarına dayalı olarak tamamen gerçekmiş gibi üretilmiş sahneler oluşturmak için kullanabilirler.
Hedef VR ve metaverse mi?
Meta, ImageBind gibi bir aracın erişilebilirlik alanında yeni kapılar açacağını, görme veya işitme engelli kişilerin yakın çevrelerini daha iyi algılamalarına yardımcı olmak için gerçek zamanlı multimedya açıklamaları oluşturacağını hayal etmek de zor değil. Ayrıca, Meta'nın hedefi VR, karma gerçeklik ve metaverse gibi alanlarda kullanımını genişletmek.
