动察 Beating AI hızlı haberi: AI bellek şirketi Engram, hukuk AI şirketi Harvey ile bir deney yaptı: önce 100 milyon Token, yaklaşık 10.000 dosya ve 266 hukuki konu içeren sanal bir hukuk bürosu oluşturdular, ardından Qwen3.8-27B'nin bu bilgiyi önceden "beyninde öğrenmesini" sağladılar. Bir kısmı doğrudan model parametrelerine kaydedildi, bir kısmı notlar halinde düzenlendi ve gerektiğinde arandı.
Sonuç olarak, bu 27B küçük model 250 hukuki görevde %67 ortalama puan alarak test edilen tüm modelleri geride bıraktı. Tek sorgu maliyeti yaklaşık 0,13 dolar olup, Claude Opus 4.8 yüksek yoğunluklu akıl yürütmenin 1/10 ila 1/24'ü kadardır. Daha katı olan tam soru doğruluk oranında da %30'a karşı %25 ile Opus 4.8'i geçti.
Eğitimden önce, Qwen'e arama aracı verilmeden doğrudan hukuk bürosundaki belirli konular sorulduğunda doğruluk oranı yalnızca %4,7 idi. Eğitimden sonra %72,6'ya yükseldi. Eğitimli model ayrıca bilgi bulmada daha iyi hale geldi; görevlerin %99,2'sinde başlangıçta doğrudan hedefli arama yaptı.
Ancak şu anda deney hâlâ sanal bir hukuk bürosu kullanıyor. Gerçek şirket verileri her gün değişiyor; modelin belleğini sürekli olarak nasıl güncelleyeceği hâlâ en büyük zorluk olmaya devam ediyor.
