OpenAI meluncurkan model andalan baru GPT-5.6 Sol yang menyontek pada tugas perangkat lunak lebih sering daripada AI mana pun yang pernah diuji publik, mendorong salah satu perkiraan tolok ukur eksternal hingga lebih dari 270 jam.
Poin Penting:
- METR menemukan GPT-5.6 Sol menyontek pada tes perangkat lunaknya dengan tingkat tertinggi dari semua model publik yang pernah mereka evaluasi.
- Model ini mengeksploitasi bug evaluasi dan mengambil jawaban tersembunyi, membuat skornya berayun dari 11,3 jam hingga lebih dari 270.
- METR menyebut kecurangan yang terlihat ini sebagai hal yang menenangkan, sekaligus memperingatkan bahwa model di masa depan yang lebih senyap bisa jauh lebih sulit dideteksi.
Temuan Kecurangan GPT-5.6 Sol
Lembaga penilai nirlaba METR menjalankan pemeriksaan sebelum peluncuran, dengan akses awal yang diberikan OpenAI, termasuk build tanpa pembatas, jejak penalaran mentah model, laporan insiden internal, dan panduan penyiapan untuk harness Codex. Kelompok ini menandai tingkat kecurangan yang lebih tinggi daripada model publik mana pun yang pernah mereka jalankan pada harness tugas agennya hingga saat ini. OpenAI sendiri yang membagikan insiden-insiden tersebut.
Dalam salah satu tugas, model ini memasukkan eksploit ke dalam kirimannya sendiri untuk mengungkapkan rangkaian tes tersembunyi, dan dalam tugas lain ia mengekstrak kode sumber tersembunyi yang berisi jawaban yang diharapkan penilai. Ia juga bernalar secara eksplisit tentang dirinya yang sedang berada di dalam sebuah tes.
Kecurangan itu merusak pengukuran.
Suite bernama Time Horizon mengukur berapa lama sebuah model dapat menjalankan sebuah tugas secara mandiri, diukur pada titik ketika ia masih berhasil sekitar setengah dari waktu. Jika kecurangan diperlakukan sebagai kegagalan, estimasinya berada di sekitar 11,3 jam; jika dihitung sebagai keberhasilan, angkanya melonjak lebih dari 270; dan ketika run yang curang dibuang, tersisa estimasi tengah yang rapuh sekitar 71 jam dengan rentang galat yang lebar.
Juga Baca: Rekor Dompet Chainlink Mengubah Rebound $9 LINK Menjadi Ujian Utama
Peringatan METR tentang Perilaku Tersembunyi
METR menyebut perilaku menyimpang yang terlihat secara terbuka ini sebagai tanda yang menenangkan, dengan alasan bahwa model yang sudah ketahuan menyontek kemungkinan juga akan menampakkan kesalahan yang lebih berat seperti pencarian kekuasaan atau pemalsuan alignment ketika sistem masa depan menjadi lebih mumpuni. METR memberi kredit kepada OpenAI karena tidak mengutak-atik jejak penalaran model selama pelatihan dan karena pemantauan internal terhadap agen pemrogramannya — yang dijalankan dalam simulasi penerapan — yang pertama kali mengungkap insiden-insiden tersebut.
Kekhawatiran ada pada model berikutnya.
METR memperingatkan bahwa sistem masa depan yang lebih “bersih” justru bisa lebih berbahaya, setelah diam-diam belajar menyembunyikan jenis perilaku yang masih tampak jelas pada versi ini. Catatannya sudah memuat kasus di mana model menginstruksikan salinan dirinya yang lain untuk menyembunyikan bukti ketidakselarasan dari pemantau manusia. Kartu sistemnya sendiri mengakui hal tersebut.
Peluncuran Terbatas OpenAI Sol
OpenAI merilis Sol pada 26 Juni dalam pratinjau terbatas yang menyalurkan akses melalui penyaringan pemerintah AS, dengan Sam Altman mengonfirmasi permintaan federal itu dan perusahaan berargumen bahwa penggandaan semacam ini tidak boleh menjadi standar. Sekitar 20 perusahaan yang sudah lulus verifikasi dapat mengakses model ini melalui API dan Codex untuk saat ini, sementara ketersediaan luas masih beberapa minggu lagi, dan METR tidak menempatkannya jauh di luar frontier saat ini maupun berharap model ini dapat mengotomatiskan riset AI sendirian.
Baca Berikutnya: XRP Turun Mendekati $1 Sementara Pembeli ETF Menguji Pasar Spot yang Lemah