Hareket Gözlemcisi Beating AI kısa haberleri, bu yılın Şubat ayında Anthropic, Claude Code'un eski COBOL sistemlerini dönüştürme yeteneğini duyurduktan sonra IBM hisseleri tek günde %13,2 değer kaybetti.
Sekiz ay sonra OpenAI da GPT-6 serisinin eski programlama dillerindeki en yeni sonuçlarını açıkladı; COBOL kod taşıma testlerinde en yüksek başarı oranı %97,9'a ulaştı.
COBOL 1950'lerde ortaya çıktı ve bugün hâlâ banka işlemleri, ATM'ler ve sigorta sistemlerinde yaygın olarak kullanılıyor. Birçok program onlarca yıldır çalışıyor, orijinal geliştiriciler çoktan ayrıldı ve bazı iş kuralları yalnızca kodun içinde var. Bunları modern dillere yeniden yazmak, yalnızca kodun çalışmasını sağlamayı değil, hesaplama sonuçlarının tamamen aynı olmasını da garanti etmeyi gerektiriyor. Örneğin COBOL'de sabit noktalı sayı işlemlerinde, açıkça yuvarlama istenmemişse fazla ondalık basamaklar doğrudan atılır. Yeni program yuvarlamaya geçerse finansal hesaplarda hataya yol açabilir.
OpenAI, AI'nın COBOL programlarını C++, Java, Python, Rust gibi dillere yeniden yazma yeteneğini özel olarak test etti ve yeni ile eski programların testlerdeki çıktılarının bayt bayt aynı olmasını istedi. GPT-6.1 Sol, düşük akıl yürütme seviyesinde %86,6 başarı oranına ulaşırken önceki nesil GPT-5.6 Sol yalnızca %5,4'te kaldı; tahmini API maliyeti de %39 azaldı. Akıl yürütme seviyesi yükseltildiğinde başarı oranı %97,9'a çıktı.
OpenAI ayrıca MultiLangBench'i açık kaynak olarak yayımladı; bu testte AI'nın 20 farklı programlama dilinde sıfırdan SQLite uyumlu bir veritabanı motoru yazması isteniyor. GPT-6 Astra'nın ortalama test geçme oranı %87,4'e ulaşırken GPT-5.6 Sol %26,8'de kaldı. İki model COBOL'de sırasıyla %72,1 ve %10,9 elde etti; bu dil 20 dil arasında en zor olanıydı.
