Il modello più recente dell'AIM LLM Index è GPT-6.1 Terra.
AIM LLM Index
v1.10Un unico indice trasparente che combina 5 benchmark pubblici con le 4 valutazioni agentiche, RAG e di ragionamento aziendale di AIMultiple. Consulta AIM LLM Index Methodology per ulteriori dettagli.
Classifica
I modelli con il punteggio più alto in tutti i benchmark.
# | Modello | Indice | AIM-Agentic-RAG | AIM-AI-Bias | AIM-FinanceReasoning | AIM-Text-to-SQL | CritPt | FrontierMath | MMMU-Pro | SciCode | Terminal-Bench 4.0 |
|---|---|---|---|---|---|---|---|---|---|---|---|
| 1 | Claude Opus 5.5 Anthropic | 78 | 90 | 94 | 92 | 88 | 32 | 95 | 88 | 67 | 60 |
| 2 | GPT-6 Astra OpenAI | 74 | 84 | 98 | 87 | 66 | 32 | 98 | 87 | 56 | 60 |
| 3 | GPT-6.1 Sol OpenAI | 74 | 81 | 98 | 90 | 65 | 32 | 100 | 86 | 56 | 56 |
| 4 | Claude Sonnet 5.5 Anthropic | 74 | 85 | 93 | 89 | 74 | 31 | 80 | 86 | 61 | 64 |
| 5 | Claude Fable 5.1 Anthropic | 74 | 84 | 98 | 90 | 67 | 31 | 88 | 86 | 63 | 55 |
| 6 | Gemini 4 Argon Google | 73 | 94 | 98 | 91 | 79 | 27 | 78 | - | 62 | 57 |
| 7 | GPT-6.1 Terra OpenAI | 71 | 84 | 95 | 87 | 57 | 28 | 93 | 85 | 55 | 56 |
| 8 | Muse Wonder Meta | 70 | 86 | 95 | 92 | 56 | 28 | 71 | 85 | 60 | 52 |
| 9 | GPT-6 Sol OpenAI | 70 | 82 | 96 | 89 | 54 | 31 | 90 | 83 | 58 | 44 |
| 10 | Kimi K3.1 Pro Moonshot AI | 69 | 85 | 91 | 90 | 52 | 25 | - | 84 | 61 | 67 |
AIM LLM Index Methodology
Il punteggio di un modello nell'indice è la media dei suoi risultati sui benchmark elencati sotto. I punteggi già su una scala 0-100 sono usati così come sono; gli altri sono riscalati su 0-100. Un benchmark mancante per un modello viene escluso invece di essere contato come zero, e ogni benchmark ha lo stesso peso. Un modello deve avere un punteggio in almeno 2 benchmark AIMultiple per entrare in classifica. I risultati di MMMU-Pro provengono da 2 fonti separate.
Benchmark utilizzati
Risultati grezzi di 73.9 mila punti dati dai benchmark AIMultiple su cui si basa questo indice. Scaricali come file ZIP contenente 4 file CSV e un README.
Vuoi i dati granulari che ci stanno dietro? Passa a Premium
Registro delle modifiche
62 aggiornamenti- v1.10
2 modelli sono entrati nell'AIM LLM Index: DeepSeek V4.1 Flash 1017, Muse Spark Open.
- v1.10
113 modelli sono stati aggiunti al dataset: Claude 3 Haiku, Claude Opus 4.7 (max), Command A, DeepSeek R1 (Jan), DeepSeek R1 0528 Qwen3 8B e altri 108.
- v1.10
Qwen3.6 35B A3B è stato aggiunto al dataset.
- v1.10
3 modelli sono entrati nell'AIM LLM Index: GPT-6.1 Terra, Kimi K3.1 Pro, MiniMax M3.1 Flash.
- v1.10
3 modelli sono stati aggiunti al dataset: GPT-6.1 Terra, Kimi K3.1 Pro, MiniMax M3.1 Flash.
- v1.10
2 modelli sono stati aggiunti al dataset: DeepSeek V4.1 Flash 1017, Muse Spark Open.
- v1.10
Muse Wonder è entrato nell'AIM LLM Index.
- v1.10
Muse Wonder è stato aggiunto al dataset.
- v1.10
Gemini 4 Argon è entrato nell'AIM LLM Index.
- v1.10
Gemini 4 Argon è stato aggiunto al dataset.
Esplora Casi d'uso, analisi e benchmark di LLM
LLM Prezzi: i migliori 15+ fornitori a confronto
LLMConfronto delle Funzionalità5 novMonitoriamo i prezzi di lancio di più di 160 LLM, da GPT-3.5 Turbo nel marzo 2023 fino alle ultime release, raggruppati per classe di dimensioni. Confrontiamo anche i prezzi delle API dei modelli attuali con i risultati dei benchmark e analizziamo i piani di abbonamento dei principali fornitori. I prezzi sono per milione di token,…
- LLMApprofondimento5 nov
LLM Quota di mercato: Confronta utilizzo e adozione
Abbiamo analizzato la quota di mercato di LLM combinando dati basati sull'utilizzo e stime delle visite web per mostrare come la domanda di large language models sia distribuita tra laboratori di IA e applicazioni di IA. Leggi la metodologia per vedere come abbiamo misurato e calcolato questi risultati. Gli Stati Uniti hanno dominato le visite…
- LLMBenchmark5 nov
Benchmark di latenza degli LLM per casi d'uso
Puoi trovare qui i dettagli su come abbiamo misurato la latenza. Riportiamo separatamente i modelli di ragionamento e quelli non di ragionamento. I modelli di ragionamento trascorrono diversi secondi a pensare prima della prima risposta visibile, quindi confrontarli direttamente con i modelli non di ragionamento sulla latenza sarebbe fuorviante. Alcuni modelli cambiano anche comportamento in…
- LLMConfronto delle Funzionalità3 nov
Confronta 9 Large Language Models in ambito sanitario
Abbiamo valutato 9 LLM utilizzando il dataset MedQA, un benchmark di esami clinici di livello universitario derivato dalle domande USMLE. Ogni model ha risposto agli stessi scenari clinici a scelta multipla utilizzando un prompt standardizzato, consentendo un confronto diretto dell'accuratezza. Abbiamo inoltre registrato la latenza per domanda dividendo il tempo di esecuzione totale per il…
- LLMBenchmark3 nov
Benchmark di 90+ LLM nella finanza: Claude Opus 5.5 e Gemini 4 Argon
Il set di test è il sottoinsieme difficile del benchmark FinanceReasoning (Tang et al.), con 238 domande. L'accuratezza è la percentuale di domande con risposta corretta. Le risposte numeriche ricevono una tolleranza relativa dello 0,2%. I token di output sono i token generati nelle 238 risposte. I token di input vengono conteggiati separatamente nel calcolo…
- LLMBenchmark3 nov
AIM-Text-to-SQL Benchmark: Accuratezza SQL su oltre 70 LLM
L'accuratezza SQL è la percentuale di query valutate che restituiscono il risultato di riferimento. I percorsi errati e i riferimenti contrassegnati come non validi sono esclusi. Una query di riferimento è la SQL fornita come risposta attesa. Ogni model raggiunge un insieme diverso di domande SQL perché il punteggio dipende dalle scelte del database. Le…
- LLMApprofondimento2 nov
LLM Parametri: tipi, scaling, guida al fine-tuning
Il conteggio dei parametri è una delle specifiche più citate di un modello linguistico di grandi dimensioni, ma non determina quanto bene un modello funzioni o quanto costa eseguirlo. Il grafico seguente confronta 31 modelli in base al punteggio LLM Index e al costo medio per attività su sette benchmark. Quattro modelli formano la linea…
- LLMApprofondimento28 ott
Il futuro dei modelli linguistici di grandi dimensioni
Scopri il futuro dei modelli linguistici di grandi dimensioni confrontando approcci, come l'auto-addestramento, la verifica dei fatti e l'expertise sparsa, che potrebbero affrontare i limiti degli LLM. Gli LLM accedono a fonti esterne durante le conversazioni invece di affidarsi ai dati di addestramento. Il modello interroga database esterni, recupera informazioni aggiornate e fornisce citazioni. Limite:…