Black Forest Labs, robotik için geliştirilen ilk yapay zeka modeli Flux 3’ü tanıttı

Flux görsel üretim modelleriyle tanınan Alman yapay zeka araştırma laboratuvarı Black Forest Labs, Çarşamba günü görsellerden, videodan ve sesten aynı anda öğrenen ve robotik eylemleri tahmin edebilen çok modlu bir temel model olan Flux 3'ü duyurdu. Lansman, şirketin içerik oluşturmadan fiziksel yapay zekaya resmi genişlemesini işaret ediyor.

Pikseller ve Robotlar İçin Tek Bir Model

Yalnızca görsel üretimine odaklanan önceki modellerinin aksine Flux 3; video, görsel ve ses üzerinde aynı anda, birleşik bir mimari içinde eğitiliyor. Şirket, gerçekçi bir video üretmenin modeli teması, hareketi, ağırlığı ve neden-sonuç ilişkisini öğrenmeye zorladığını, bu bilginin de doğrudan robotları kontrol etmeye aktarıldığını savunuyor.markets.businessinsider+2

Büyük ölçekli bir eğitim çalışmasında Black Forest Labs, modelin müfredatına eylem tahminini ekledi ve model tam performansa dönmeden önce video üretim kalitesinde yalnızca kısa bir düşüş gözlemledi. Bu durum, içerik oluşturma ve robotiğin aynı omurgayı paylaşabileceğini kanıtladı.bfl

Şirket modeli duyuran blog yazısında, "İçerik oluşturma ve fiziksel yapay zeka, aynı temelin iki uygulamasıdır" dedi.bfl

Yerel ses üretimine sahip Flux 3 Video ve Flux 3 Action artık erken erişimde sunulurken, Flux 3 Image önümüzdeki haftalarda takip edecek.bfl+1

Audi ile Fabrika Sahası Testleri

Flux 3 duyurusunun yanı sıra Black Forest Labs, maharetli manipülasyon konusunda uzmanlaşmış İsviçreli bir girişim olan Mimic Robotics ile ortaklığını açıkladı. Birlikte, Flux 3 omurgası üzerine inşa edilmiş ve robot eylemlerini tahmin etmek üzere robot verileriyle eğitilmiş bir video-eylem modeli olan Flux-mimic'i geliştirdiler.mimicrobotics+1

Model, Audi'de test edildi ve konuşlandırıldı; burada uzun süredir geleneksel otomasyona direnen görevlerin üstesinden geliyor: parçaları yapılandırılmış tepsilere yerleştirme, elektronik kontrol ünitelerini dar montaj parçalarına takma ve contalar ve kablolar gibi yumuşak, esnek malzemeleri manipüle etme.bfl

Audi Üretim Laboratuvarı'ndan Christoph Schneider, "Bu robotların, geleneksel robotikle yapılması imkansız olan karmaşık yumuşak gövde manipülasyon işlerini çözdüğünü gördük" dedi. "Bunun çalışanlarımıza yardımcı olma, verimliliği artırma ve üretim ile lojistik operasyonlarında esnek otomasyonu genişletme konusunda büyük bir etkisi olabilir."bfl

Hız ve Verimlilik

Black Forest Labs, Flux-mimic omurgasının girdiden dünya temsiline kadar tek bir RTX 5090 GPU üzerinde 80 milisaniyeden kısa sürede çalışabileceğini ve bunun insan görsel tepki süresiyle aynı büyüklük derecesine denk geldiğini belirtti. Mimic'in konuşlandırma optimizasyonlarıyla birlikte tam robot sistemi 101 milisaniyelik tepki sürelerine ulaşıyor.bfl

Şirket, önümüzdeki aylarda hem içerik oluşturma hem de eylem tahmini için çok modlu bir omurgaya açık ağırlıklı erişim sunmayı planlıyor.bfl