Otonom Yapay Zeka Yapay Zeka BelleğiYapay Zeka Belleği

Yapay Zeka Belleği

Yapay zekâ hafızası, modellerin ve ajanların geçmiş etkileşimleri hatırlamasına, zaman içinde uyum sağlamasına ve daha etkili bir şekilde akıl yürütmesine olanak tanır. En popüler uzun vadeli öğrenme modellerinin (LLM'ler) hem uzun vadeli hem de kısa vadeli hafızada bilgi depolama yeteneklerini ve bağlam penceresi kapasitelerini inceledik.

VELC-Bench: Uzun Bağlam Karşılaştırması Üzerinde Doğrulama

Yapay Zeka Belleği

Kıyaslama

22 Tem

Modelin bağlam içinde belirli bir metriği bulma, değerini bir iddia ile karşılaştırma ve onaylama ya da reddetme yeteneği. Bu, uzun bağlam koşullarında ince taneli değer eşleştirmesini test eder. Model hem değeri almalı hem de hassas bir karşılaştırma yapmalıdır. Modeller aşağıdaki bağlam pencerelerinde test edilmiştir: claude-fable-5 doğrula EVET'te %90,0 ve doğrula HAYIR'da %94,0 puan alır. Fark,…

RELC-Bench: Uzun Bağlamda Erişim Karşılaştırması

RELC-Bench (RELC-Bench: Uzun Bağlamda Erişim Karşılaştırması), bir modelin bağlamındaki bir veya daha fazla belgeden belirli bir sayısal değeri bulma ve çıkarma yeteneğini ölçmeyi amaçlar. Modelin, girdide az önce gördüğü belirli bir gerçeği hatırlayıp hatırlamadığını ve geri getirip getirmediğini test eder. claude-fable-5, 100 doğrudan hatırlama öğesinde 97.0% puan alır, saman balyası konumları boyunca sabittir (başlangıç 97.0%,…