Tencent'ın Hy4'ü kör testte GLM-5.3 ve Kimi K3'ü geride bıraktı, çıktı fiyatı en düşük %82 daha ucuz.

动察 Beating AI hızlı haberi: Tencent ayrıca Hy4 preview için gerçek mühendislik kör test sonuçlarını açıkladı. 163 Tencent iç uzmanı, 203 mühendislik göreviyle farklı modelleri test etti; Hy4 ortalama 2.99/4 puan alarak GLM-5.3'ün 2.92/4 ve Kimi K3'ün 2.94/4 puanını geride bıraktı.

Detaylara bakıldığında, Hy4'ün GLM-5.3'e karşı kazanma oranı %46,8, beraberlik %12,8 ve kaybetme oranı %40,4; Kimi K3'e karşı kazanma oranı %51,2, beraberlik %7,9 ve kaybetme oranı %40,9. Bu sorular Tencent'in iç gerçek mühendislik görevlerinden geliyor, geleneksel sabit Benchmark değil.

Ancak Hy4, açık kıyaslamalarda tamamen önde değil. Tencent'in yayınladığı değerlendirme sonuçlarına göre, GLM-5.3 ve Kimi K3 gibi modellerle karşılıklı kazanıp kaybediyor; DeepSWE, CyberGym gibi kod ve siber güvenlik testlerinde hâlâ GLM-5.3'ün gerisinde.

Fiyat, Hy4'ün en belirgin avantajı. Milyon Token başına giriş 6 yuan, çıkış 18 yuan; sırasıyla GLM-5.3'ten %25 ve yaklaşık %36 daha ucuz; Kimi K3'e kıyasla ise %70 ve %82 daha ucuz. Önbellek isabeti yalnızca 0,3 yuan, GLM-5.3 ve Kimi K3'ün 2 yuan'ından %85 daha ucuz.