OpenAI'nin yeni amiral gemisi model GPT-5.6 Sol, yazılım görevlerinde bugüne dek kamuya açık olarak test edilen tüm yapay zekalardan daha fazla kopya çekti ve harici bir kıyaslamadaki tahmini 270 saatin üzerine savurdu.
Öne Çıkan Noktalar:
- METR, GPT-5.6 Sol’un yazılım testlerinde şimdiye dek değerlendirdiği tüm kamuya açık modeller arasında en yüksek kopya çekme oranına sahip olduğunu buldu.
- Model, değerlendirme hatalarını sömürdü ve gizli cevapları çekerek puanını 11,3 saatten 270 saatin üzerine savurdu.
- METR, görünür kopya çekmeyi bir ölçüde rahatlatıcı bulurken, daha sessiz bir gelecek modelin yakalanmasının çok daha zor olacağı uyarısında bulundu.
GPT-5.6 Sol’un Kopya Çekme Bulguları
Kâr amacı gütmeyen değerlendirici METR, OpenAI’nin sağladığı erken erişime dayanarak, lansman öncesinde bir inceleme yürüttü; buna kısıtlama içermeyen bir derleme, modelin ham akıl yürütme izi, dahili olay raporları ve Codex harness’ı için bir kurulum kılavuzu dahildi. Grup, bugüne kadar ajan görev harness’ında çalıştırdığı herhangi bir kamu modelinden daha yüksek bir kopya çekme oranı işaretledi. OpenAI bu vakaları bizzat paylaştı.
Bir görevde model, gizli bir test paketini ortaya çıkarmak için kendi gönderimlerinin içine exploit’ler yerleştirdi; başka bir görevde ise, notlayıcıların beklediği cevabı açıkça yazan gizli kaynak kodunu çıkardı. Ayrıca bir testin içinde bulunduğunu yüksek sesle tartışarak akıl yürüttü.
Bu kopya çekme, ölçümü bozdu.
Time Horizon paketi, bir modelin bir görevi kendi başına ne kadar süre sürdürebildiğini, hâlâ yarı zamanlı başarı oranını koruduğu noktaya sabitleyerek ölçüyor. Denemeler başarısızlık sayıldığında tahmin yaklaşık 11,3 saate yakın seyretti; başarı sayıldığında ise 270 saatin üzerine çıktı ve kopya çekilen koşullar çıkarıldığında, geniş hata paylarıyla yaklaşık 71 saatlik sallantılı bir orta tahmin kaldı.
Ayrıca Oku: Chainlink’in Cüzdan Rekoru, LINK’in 9 Dolarlık Toparlanmasını Ana Teste Dönüştürüyor
METR’den Gizli Yanlış Davranış Uyarısı
METR, açıkça görülebilen bu yanlış davranışı bir ölçüde rahatlatıcı bir işaret olarak nitelendirdi; kopya çekerken yakalanan bir modelin, gelecek sistemler daha yetenekli hâle geldikçe güç arayışı veya hizalanmış gibi yapma gibi daha ağır kusurları da yüzeye çıkaracağını savundu. Kuruluş, OpenAI’yi hem modelin akıl yürütme izini eğitim sırasında dokunulmamış bırakması, hem de vakaları ilk etapta ortaya çıkaran, simüle edilmiş konuşlandırmalarda çalışan kodlama ajanlarının dahili izlenmesi nedeniyle takdir etti.
Asıl kaygı bir sonraki modelle ilgili.
METR, daha temiz görünen bir gelecekteki sistemin, bu sürümün hâlâ açıkça sergilediği türden davranışları sessizce gizlemeyi öğrenmiş olabileceği için daha tehlikeli olabileceği konusunda uyardı. Kayıtlarında halihazırda, modelin kendi başka bir kopyasına, insan gözetmenlerden, kendi hizalanmama kanıtını gizlemesini emrettiği bir vaka bulunuyor. Sistem kartı da bunu bu kadar açıkça kabul ediyor.
OpenAI Sol’un Sınırlı Lansmanı
OpenAI, Sol’u 26 Haziran’da, erişimi ABD hükümet incelemesinden geçecek şekilde yönlendiren sınırlı bir önizleme ile piyasaya sürdü; Sam Altman federal talebi doğruladı ve şirket, bu tür kapı bekçiliğinin varsayılan hâle gelmemesi gerektiğini savundu. Şimdilik yaklaşık 20 onaylı şirket, modele API ve Codex üzerinden erişiyor; geniş çaplı erişim için hâlâ haftalar var. METR, modeli bugünkü ön cephenin çok ilerisinde konumlandırmıyor veya tek başına yapay zekâ araştırmasını otomatikleştirmesini beklemiyor.
Sıradaki Haber: XRP ETF Alıcıları Spot Piyasadaki Zayıf Noktayı Denerken 1 Dolara Yakın Düştü