← semua berita

Model terbuka tertinggal sekitar enam bulan soal kemampuan siber, menurut Epoch

AI · · · sumber (epoch.ai)

Epoch AI mulai melacak kemampuan keamanan siber sebagai ukuran tersendiri, versi Cyber dari Epoch Capabilities Index, dan pembacaan pertamanya menempatkan model open-weight sekitar enam hingga tujuh bulan di belakang frontier model tertutup. Model terbuka terbaik, GLM-5.3 dari Z.ai, meraih skor 160. Angka itu di atas GPT-5.4 milik OpenAI dari awal Maret, tapi di bawah Claude Mythos Preview dari Anthropic (April) dan GPT-5.5 (akhir April). Pemimpin model tertutup saat ini, Claude Opus 5.5 dan GPT-6 Astra, ada di kisaran 171.

Indeks ini kini mencakup 76 model di 35 benchmark siber, menarik hasil dari UK AI Security Institute, program CAISI di AS, dan firma evaluasi Irregular, di antara sumber lain. Bagian tersulitnya adalah menerjemahkan tumpukan skor benchmark yang tidak seragam menjadi satu angka yang bisa dibandingkan, dan Epoch berhati-hati soal titik-titik rawannya. Posisi GLM-5.3, misalnya, hanya bersandar pada tiga benchmark CAISI, dan penulisnya mencatat bahwa penyesuaian ulang model menurunkan beberapa skor teratas, sehingga nilai lama tidak bisa langsung dibandingkan.

Angka enam bulan itu klaim yang spesifik dan bertanggal. GPT-5.4 berumur tujuh bulan saat batas data, dan Mythos Preview enam bulan, yang mengapit posisi frontier terbuka sekarang. Apakah jarak itu bertahan masih jadi pertanyaan, sebab satu rilis terbuka yang kuat bisa menutupnya dengan cepat.

Kenapa ini penting

Kalau kamu merancang pertahanan berdasarkan apa yang bisa dijalankan penyerang secara lokal, kemampuan yang bisa mereka unduh hari ini kira-kira setara dengan yang dimiliki lab teratas setengah tahun lalu, dan selisih itulah margin yang sebenarnya kamu hadapi. Bagi pihak bertahan, ini angka untuk perencanaan, bukan alasan untuk tenang.

SecurityEvaluationOpen Models