动察 Beating tarafından yapılan izlemeye göre, Epoch AI, Anthropic'in Claude Mythos serisi modellerinin siber güvenlik yeteneklerini sistematik olarak değerlendiren bir araştırma raporu yayınladı. Araştırmacılar, birden fazla güvenlik kıyaslama testine dayanarak bir "Siber Yetenek Endeksi" (Cyber-ECI) oluşturdu. Sonuçlar, Mythos Preview'in zafiyet istismarı geliştirme yeteneğinde büyük bir farkla önde olduğunu, doğrusal gelişim trendine kıyasla yaklaşık 7 ay erken bir performans sergilediğini ve aynı şekilde trendin yaklaşık 3 ay önünde olan OpenAI GPT-5.5'ten daha iyi olduğunu gösterdi.
Daha önce bazı akademisyenler, Mythos Preview'in performansının GPT-5.5 ile eşdeğer olduğunu sorgulamıştı. Rapor, bu farklılığın, bazı erken değerlendirmelerde Glasswing ortaklarına daha sonra açılan Nisan sürümü yerine daha zayıf performansa sahip dahili sürümlerin kullanılmasından kaynaklandığını ve bazı test setlerinin doygunluğa yaklaştığı için puan farkının açılmasının zor olduğunu belirtti. Gerçek güvenlik testleri, Mythos Preview'in sık sık kendi başına rastgele kod yürütme zafiyet istismarları oluşturabildiğini, oysa erken modellerin bunu neredeyse hiç yapamadığını gösterdi.
Zafiyet keşfi (Vulnerability discovery) alanında ise benzer bir ileri trend için güçlü bir kanıt bulunmuyor. Mythos Preview'in piyasaya sürülmesinin ardından, 21 tanınmış kuruluştan gelen yüksek ve kritik seviyedeki zafiyet (CVE) raporları, Nisan ve Mayıs aylarında 2025 taban çizgisine kıyasla sırasıyla %142 ve %262 oranında artış gösterdi. Ancak, bu ani artışın büyük ölçüde finansal yatırımdan kaynaklanmış olabileceği belirtiliyor. Anthropic, Glasswing'e 100 milyon dolara kadar API kredisi sağlayarak, çok sayıda güvenlik araştırmacısının kısa sürede eşzamanlı tarama yapmasını teşvik etti.
Örneğin, yoğun ilgi gören curl kod tabanı testinde, Mythos Preview yalnızca düşük riskli bir zafiyet tespit etti ve buna dört yanlış pozitif eşlik etti; performansı geleneksel denetim araçlarını aşamadı. Girişim şirketi AISLE de, bazı açık kaynaklı hafif modellerin aynı zafiyetleri tanımlayabildiğini doğruladı. Epoch AI, Mythos'un gerçek avantajının son derece düşük yanlış pozitif oranı ve daha doğru tehlike sınıflandırması olduğunu düşünüyor. Doğrudan yeni zafiyetler keşfetmekten ziyade, daha hassas sınıflandırma, savunma tarafının manuel inceleme süresini ve maliyetini önemli ölçüde azaltmasına yardımcı oluyor.
