3 modelli sono entrati nell'indice: Cohere Embed 5 Fast, Cohere Embed 5 Pro, Cohere Embed v4.0.
Benchmark degli Embedding
v1.1Confronta i modelli di embedding su 200 domande di finanza, diritto, supporto tecnico e sanità. Esplora i risultati di recupero di AIMultiple, i prezzi delle API e i dettagli dei modelli. Consulta AIM Embeddings Index Methodology per ulteriori dettagli.
Risultati del benchmark fino al 1 ottobre 2026. Prezzi delle API verificati il 4 novembre 2026.
Classifica
Tutti i 25 modelli, classificati per nDCG@10 medio in finanza, diritto, supporto tecnico e sanità.
# | Modello | nDCG@10 | Finanza | CUAD (diritto) | TechQA (supporto) | MedRAG (sanità) |
|---|---|---|---|---|---|---|
| 1 | Voyage 4 Large Voyage AI | 0.851 | 0.838 | 0.704 | 0.887 | 0.978 |
| 2 | Cohere Embed 5 Pro Cohere | 0.850 | 0.791 | 0.759 | 0.894 | 0.953 |
| 3 | Cohere Embed 5 Fast Cohere | 0.839 | 0.808 | 0.762 | 0.846 | 0.940 |
| 4 | Gemini Embedding 2 Google | 0.830 | 0.824 | 0.731 | 0.796 | 0.967 |
| 5 | Voyage 4 Voyage AI | 0.829 | 0.782 | 0.700 | 0.855 | 0.980 |
| 6 | Voyage 4 Lite Voyage AI | 0.793 | 0.725 | 0.668 | 0.831 | 0.949 |
| 7 | Gemini Embedding 001 Google | 0.785 | 0.755 | 0.634 | 0.787 | 0.963 |
| 8 | Cohere Embed v4.0 Cohere | 0.772 | 0.723 | 0.626 | 0.785 | 0.953 |
| 9 | Voyage Code 4 Voyage AI | 0.770 | 0.824 | 0.687 | 0.616 | 0.952 |
| 10 | Codestral Embed Mistral AI | 0.766 | 0.790 | 0.588 | 0.753 | 0.933 |
Pagina 1 di 3 | ||||||
AIM Embeddings Index Methodology
Abbiamo valutato i modelli di embedding su un insieme fisso di 200 domande: 50 per ciascun dominio, finanza, diritto, supporto tecnico e sanità. Ogni query cerca nell'intera raccolta di passaggi di testo del proprio dominio. Classifichiamo i modelli in base al nDCG@10 medio, che premia il posizionamento dei passaggi rilevanti registrati in cima ai primi dieci risultati.
Le quattro raccolte contengono 341.040 passaggi di testo: segmenti estratti da documenti sorgente, non un conteggio di frasi o di documenti originali. Le domande sono state selezionate con BM25 e le etichette di rilevanza sono incomplete. Sono risultati su un set di sviluppo, non una valutazione alla cieca su dati riservati. Gli embedding sono stati generati tramite API ospitate; il grafico dei costi mostra quanto è costato a ogni modello l'intero benchmark, e i prezzi di listino delle API compaiono separatamente nella classifica.
Risultati grezzi di 25 punti dati dai benchmark AIMultiple su cui si basa questo indice. Scaricali come file ZIP contenente un file CSV e un README.
Vuoi i dati granulari che ci stanno dietro? Passa a Premium
Registro delle modifiche
5 aggiornamenti- v1.1
3 modelli sono entrati nell'indice: Cohere Embed 5 Fast, Cohere Embed 5 Pro, Cohere Embed v4.0.
- v1.1
Benchmark degli Embedding: L'indice usa ora un'esecuzione fissa di 200 query per ogni modello, valutata con nDCG@10. Versione aggiornata a v1.1.
- v1.0
2 modelli sono entrati nell'indice: Gemini Embedding 001, Gemini Embedding 2.
- v1.0
20 modelli sono entrati nell'indice: All-MPNet Base v2, BGE-M3 (dense), BGE Large EN v1.5, Codestral Embed, E5 Base v2 e altri 15.
- v1.0
Modelli di embedding open source: Aggiornati hardware, dimensione del batch e precisione nella configurazione di valutazione.
Esplora Embedding
Modelli di embedding: 25 modelli valutati in benchmark per il retrieval
EmbeddingsBenchmark1 ottAbbiamo sottoposto a benchmark 25 modelli di embedding su 200 domande di retrieval in ambito finanziario, contratti legali, supporto tecnico e letteratura medica. I quattro corpora contenevano in totale 341.040 brani di testo. Ogni query ha effettuato la ricerca nel proprio dominio. nDCG@10 misura quanto in alto appaiono i brani pertinenti registrati nei primi dieci…
- EmbeddingsBenchmark27 set
Open Source Embedding Models: 11 Models sottoposti a benchmark per il retrieval
nDCG@10 misura la posizione dei passaggi pertinenti registrati tra i primi dieci risultati di ricerca. Un punteggio pari a 1 rappresenta il ranking ideale per i positivi registrati. I passaggi più vicini alla cima ricevono più peso. PPLX Embed v1 4B ha guidato il confronto con 0.741 nDCG@10, seguito da PPLX Embed v1 0.6B con…