Anthropic: AI agen menemukan celah senilai 4,6 juta dolar dalam kontrak nyata

Berita dari Biji Koin, Anthropic merilis laporan yang menyebutkan bahwa para akademisinya telah menguji model Claude Opus 4.5, Claude Sonnet 4.5, dan GPT-5 pada benchmark SCONE-bench yang dibangun sendiri (termasuk 405 kontrak yang benar-benar diserang antara tahun 2020-2025). Setelah pembaruan pengetahuan (Maret 2025), ketiga model tersebut menemukan total kerentanan yang dapat dimanfaatkan senilai sekitar 4,6 juta dolar AS pada kontrak yang diserang. Selain itu, dalam pengujian simulasi terhadap 2849 kontrak yang baru saja diterapkan dan tidak memiliki kerentanan yang diketahui, Sonnet 4.5 dan GPT-5 masing-masing menemukan 2 kerentanan nol hari baru, yang totalnya dapat menyebabkan kerugian sebesar 3694 dolar AS, di mana biaya API GPT-5 adalah 3476 dolar AS.