Yapay Zeka Belleği
Yapay zekâ hafızası, modellerin ve ajanların geçmiş etkileşimleri hatırlamasına, zaman içinde uyum sağlamasına ve daha etkili bir şekilde akıl yürütmesine olanak tanır. En popüler uzun vadeli öğrenme modellerinin (LLM'ler) hem uzun vadeli hem de kısa vadeli hafızada bilgi depolama yeteneklerini ve bağlam penceresi kapasitelerini inceledik.
VELC-Bench: Uzun Bağlam Benchmark'ında Doğrulama
Yapay Zeka BelleğiKıyaslama15 EkiModelin bağlam içinde belirli bir metriği bulma, değerini bir iddiayla karşılaştırma ve onaylama veya reddetme yeteneği. Bu, uzun bağlam koşullarında ince taneli değer eşleştirmeyi test eder. Model hem değeri almalı hem de hassas bir karşılaştırma yapmalıdır. Modeller aşağıdaki bağlam pencerelerinde test edilmiştir: claude-fable-5 EVET'i doğrulamada %90,0 ve HAYIR'ı doğrulamada %94,0 puan alır. Bu fark, aşağıda…
- Yapay Zeka BelleğiKıyaslama15 Eyl
RELC-Bench: Uzun Bağlamda Erişim Benchmark'ı
RELC-Bench (RELC-Bench: Uzun Bağlamda Erişim Benchmark'ı), bir model'in bağlamındaki bir veya daha fazla belgeden belirli bir sayısal değeri bulma ve çıkarma becerisini ölçmeyi amaçlar. Modelin, girdide az önce gördüğü belirli bir olguyu hatırlayıp getirip getiremediğini test eder. claude-fable-5 %97,0 puan alır ve 100 doğrudan hatırlama maddesinde saman yığını konumlarına göre değişmez (başlangıçta %97,0, ortada %97,1,…