Newsletter Subscribe
Enter your email address below and subscribe to our newsletter
[forminator_form id="25163"]

openai.com.openai.com.openai.com.18 Kasım'da OpenAI, kodlama ajanlarının artık orta uzunluktaki araştırma görevlerinin neredeyse yarısını insan yardımı olmadan tamamladığını açıkladı. Şirket, kazanımların dengesiz olduğunu ve insanların "yapay zeka araştırma döngüsünün temel bir parçası olmaya devam ettiğini" ekledi. "Araştırma hızlandırma: Pürüzlü sınır" başlıklı raporunda şirket, ajanların iki ila dört saatlik insan emeği gerektiren görevlerdeki müdahalesiz başarı oranının Mart ayındaki %23'ten Ekim ayında %46'ya yükseldiğini tahmin etti. Dört ila sekiz saatlik görevlerde ise bu oran %13'ten %35'e çıktıopenai.com.
OpenAI ayrıca, yapay zeka laboratuvarlarının özyinelemeli öz-gelişim göstergelerini takip etmelerinin ve kamuoyuna açıklamalarının zorunlu tutulması çağrısını yineledi; bu, yapay zekanın gelecekteki yapay zekanın gelişimini hızlandırması anlamına geliyor. Şirket, kendi raporlamasının "tam bir RSI (özyinelemeli öz-gelişim) hedefi olarak okunmaması gerektiğini" belirttiopenai.com.
Sonuçlar işin türüne göre büyük ölçüde değişiklik gösterdi. 1 Ağustos ile 18 Ekim arasında ajanlar, eğitim süreçlerini izlerken %79, bunları başlatırken %35, çıkarım ve sunucu yığınları için kod yazarken ise %25 oranında müdahalesiz başarı sağladı. Şirket, araştırmacıların her süre bandında ajanlara verdikleri görevleri değiştirmiş olabileceği konusunda uyardı, bu nedenle artan başarı oranları sadece model iyileştirmelerini yansıtmıyor. Görev süreleri, ajanların ne kadar süre çalıştığını değil, tahmini insan emeğini tanımlıyorthedefiant.io+1.
Ajan kullanımı hızla arttı. API liste fiyatlarıyla, ortalama bir araştırmacı Ekim ayında günde yaklaşık 2.400 dolarlık ajan çalışması kullandı; bu, Eylül ayına göre %62'lik bir artış anlamına geliyor. 90. yüzdelik dilimdeki araştırmacılar ise yaklaşık 23.000 dolarlık kullanım gerçekleştirdi, bu da %105'lik bir artış demek. Araştırmacı başına düşen ajan iş günü (her 8 saatlik ajan kullanımı bir iş günü sayılarak) 0.5'ten 5.7'ye çıkarak on bir kat arttı. 101 araştırma personeliyle yapılan bir ankette, katılımcıların çoğu, gelişmiş kodlama ajanlarını üç ay daha ellerinde tutabilmek için ekip hesaplama gücünün %30'unu veya ekip personelinin %40'ını feda edebileceklerini belirttiopenai.com.
Görüşülen araştırmacılar, ajanların hala zayıf bir araştırma zevki sergilediğini ve yakın gözetim gerektiren "AI slop" (yapay zeka çöpü) içerikli çekme istekleri (pull requests) ürettiğini söyledi. Bir araştırmacı iş akışını şöyle tanımladı: "Bir tane yap. Ben inceleyip düzenlemeler yapayım. Sonra geri kalanını yap"openai.com.
Belgelenmiş güvenlik ve uyum çalışma haftaları, Ocak ayından Eylül ayına kadar %77 artarak herhangi bir araştırma alanındaki en büyük mutlak artışı kaydetti. OpenAI, bu hızlanmayı Temmuz ayındaki bir Hugging Face olayının sonrasına bağladı. OpenAI araştırmacısı David Holtz, X platformunda araştırmacıların "güvenlik ve uyuma giderek daha fazla zaman ayırdığını" yazdıx.com+1.
Bu açıklama hamlesi, OpenAI'nin Haziran ayındaki yönetişim planına dayanıyor. Bu plan, RSI takibi konusunda şeffaflık raporları gerektiren federal kurallar öneriyor ve ABD Yapay Zeka Standartları ve İnovasyon Merkezi'nden bunu ölçmek için yöntemler geliştirmesini istiyor. Raporun kendisi, daha fazla kod ve daha fazla deneyin "mutlaka daha hızlı araştırma ilerlemesi anlamına gelmediğini" belirtiyoropenai.com+1.