Das neueste Modell im AIM LLM Index ist GPT-6.1 Terra.
AIM LLM Index
v1.10Ein transparenter Index, der 5 öffentliche Benchmarks mit 4 eigenen agentischen, RAG- und Enterprise-Reasoning-Bewertungen von AIMultiple kombiniert. Weitere Details finden Sie unter AIM LLM Index Methodology.
Bestenliste
Die am höchsten bewerteten Modelle über alle Benchmarks hinweg.
# | Modell | Index | AIM-Agentic-RAG | AIM-AI-Bias | AIM-FinanceReasoning | AIM-Text-to-SQL | CritPt | FrontierMath | MMMU-Pro | SciCode | Terminal-Bench 4.0 |
|---|---|---|---|---|---|---|---|---|---|---|---|
| 1 | Claude Opus 5.5 Anthropic | 78 | 90 | 94 | 92 | 88 | 32 | 95 | 88 | 67 | 60 |
| 2 | GPT-6 Astra OpenAI | 74 | 84 | 98 | 87 | 66 | 32 | 98 | 87 | 56 | 60 |
| 3 | GPT-6.1 Sol OpenAI | 74 | 81 | 98 | 90 | 65 | 32 | 100 | 86 | 56 | 56 |
| 4 | Claude Sonnet 5.5 Anthropic | 74 | 85 | 93 | 89 | 74 | 31 | 80 | 86 | 61 | 64 |
| 5 | Claude Fable 5.1 Anthropic | 74 | 84 | 98 | 90 | 67 | 31 | 88 | 86 | 63 | 55 |
| 6 | Gemini 4 Argon Google | 73 | 94 | 98 | 91 | 79 | 27 | 78 | - | 62 | 57 |
| 7 | GPT-6.1 Terra OpenAI | 71 | 84 | 95 | 87 | 57 | 28 | 93 | 85 | 55 | 56 |
| 8 | Muse Wonder Meta | 70 | 86 | 95 | 92 | 56 | 28 | 71 | 85 | 60 | 52 |
| 9 | GPT-6 Sol OpenAI | 70 | 82 | 96 | 89 | 54 | 31 | 90 | 83 | 58 | 44 |
| 10 | Kimi K3.1 Pro Moonshot AI | 69 | 85 | 91 | 90 | 52 | 25 | - | 84 | 61 | 67 |
AIM LLM Index Methodology
Der Index-Wert eines Modells ist der Durchschnitt seiner Ergebnisse in den unten aufgeführten Benchmarks. Werte, die bereits auf einer Skala von 0-100 liegen, werden unverändert übernommen; alle anderen werden auf 0-100 umgerechnet. Fehlt einem Modell ein Benchmark, wird dieser ausgelassen statt mit null bewertet, und jeder Benchmark hat das gleiche Gewicht. Ein Modell muss in mindestens 2 AIMultiple-Benchmarks bewertet sein, um in die Rangliste aufgenommen zu werden. Die MMMU-Pro-Ergebnisse stammen aus 2 separaten Quellen.
Verwendete Benchmarks
Rohergebnisse von 73.9 Tausend Datenpunkten aus den AIMultiple-Benchmarks, auf denen dieser Index beruht. Laden Sie sie als ZIP-Datei herunter, die 4 CSV-Dateien und eine README enthält.
Möchten Sie die granularen Daten dahinter? Premium beitreten
Änderungsprotokoll
62 Aktualisierungen- v1.10
2 Modelle sind in den AIM LLM Index aufgenommen worden: DeepSeek V4.1 Flash 1017, Muse Spark Open.
- v1.10
113 Modelle wurden dem Datensatz hinzugefügt: Claude 3 Haiku, Claude Opus 4.7 (max), Command A, DeepSeek R1 (Jan), DeepSeek R1 0528 Qwen3 8B und 108 weitere.
- v1.10
Qwen3.6 35B A3B wurde dem Datensatz hinzugefügt.
- v1.10
3 Modelle sind in den AIM LLM Index aufgenommen worden: GPT-6.1 Terra, Kimi K3.1 Pro, MiniMax M3.1 Flash.
- v1.10
3 Modelle wurden dem Datensatz hinzugefügt: GPT-6.1 Terra, Kimi K3.1 Pro, MiniMax M3.1 Flash.
- v1.10
2 Modelle wurden dem Datensatz hinzugefügt: DeepSeek V4.1 Flash 1017, Muse Spark Open.
- v1.10
Muse Wonder ist in den AIM LLM Index aufgenommen worden.
- v1.10
Muse Wonder wurde dem Datensatz hinzugefügt.
- v1.10
Gemini 4 Argon ist in den AIM LLM Index aufgenommen worden.
- v1.10
Gemini 4 Argon wurde dem Datensatz hinzugefügt.
LLM Anwendungsfälle, Analysen & Benchmarks erkunden
LLM-Preise: Top 15+ Anbieter im Vergleich
LLMFunktionsvergleich5. NovWir verfolgen die Einführungspreise von mehr als 160 LLMs, von GPT-3.5 Turbo im März 2023 bis zu den neuesten Veröffentlichungen, gruppiert nach Größenklasse. Wir vergleichen außerdem die API-Preise aktueller Modelle mit ihren Benchmark-Ergebnissen und betrachten die Abonnementpläne der wichtigsten Anbieter. Die Preise gelten pro eine Million Tokens, gemischt aus drei Teilen Eingabe zu einem Teil…
- LLMEinblick5. Nov
LLM Marktanteil: Nutzung & Adoption vergleichen
Wir haben den LLM-Marktanteil analysiert, indem wir nutzungsbasierte Daten und Schätzungen zu Web-Besuchen kombiniert haben, um zu zeigen, wie sich die Nachfrage nach großen Sprachmodellen auf KI-Labore und KI-Anwendungen verteilt. Lesen Sie die Methodik, um zu sehen, wie wir diese Ergebnisse gemessen und berechnet haben. Die Vereinigten Staaten dominierten die Web-Besuche in allen vier Monaten…
- LLMBenchmark5. Nov
LLM Latenz-Benchmark nach Anwendungsfällen
Details zur Messung der Latenz finden Sie hier. Wir berichten über Reasoning- und Nicht-Reasoning-Modelle getrennt. Reasoning-Modelle denken mehrere Sekunden nach, bevor die erste sichtbare Antwort erscheint; ein direkter Vergleich mit Nicht-Reasoning-Modellen bei der Latenz wäre daher irreführend. Einige Modelle ändern ihr Verhalten außerdem je nach Aufgabe: GPT-5.2 beantwortet Q&A ohne Reasoning, denkt aber bei den…
- LLMFunktionsvergleich3. Nov
Vergleichen Sie 9 große Sprachmodelle im Gesundheitswesen
Wir haben 9 LLMs mithilfe des MedQA-Datasets verglichen, einem Benchmark für klinische Prüfungen auf Graduierten-Niveau, der aus USMLE-Fragen abgeleitet ist. Jedes Model beantwortete dieselben klinischen Multiple-Choice-Szenarien mit einem standardisierten Prompt und ermöglichte so einen direkten Vergleich der Genauigkeit. Wir haben außerdem die Latenz pro Frage erfasst, indem wir die Gesamtlaufzeit durch die Anzahl der abgeschlossenen…
- LLMBenchmark3. Nov
Benchmark von 90+ LLMs im Finanzwesen: Claude Opus 5.5 & Gemini 4 Argon
Der Testsatz ist die schwere Teilmenge des FinanceReasoning-Benchmarks (Tang et al.) mit 238 Fragen. Die Genauigkeit ist der Prozentsatz der korrekt beantworteten Fragen. Numerische Antworten erhalten eine relative Toleranz von 0,2 %. Output-Tokens sind die Tokens, die über die 238 Antworten hinweg generiert wurden. Input-Tokens werden in der Kostenberechnung separat gezählt. Die Kosten sind die berechneten…
- LLMBenchmark3. Nov
AIM-Text-to-SQL-Benchmark: SQL-Genauigkeit bei über 70 LLMs
SQL-Genauigkeit ist der Prozentsatz der bewerteten Abfragen, die das Referenzergebnis zurückgeben. Falsche Routen und als fehlerhaft markierte Referenzen werden ausgeschlossen. Eine Referenzabfrage ist die SQL, die als erwartete Antwort angegeben wird. Jedes Modell erreicht einen anderen Satz von SQL-Fragen, da die Bewertung von seinen Datenbankentscheidungen abhängt. Unterschiede in diesen Teilmengen und im Ausführungssetup schränken die…
- LLMEinblick2. Nov
LLM-Parameter: Typen, Skalierung, Fine-Tuning-Leitfaden
Die Parameteranzahl ist eine der am häufigsten zitierten Spezifikationen eines großen Sprachmodells, aber sie bestimmt nicht, wie gut ein Modell funktioniert oder wie viel es kostet, es zu betreiben. Das folgende Diagramm vergleicht 31 Modelle anhand ihres LLM-Index-Scores und ihrer durchschnittlichen Kosten pro Aufgabe über sieben Benchmarks. Vier Modelle bilden die Pareto-Linie, bei der kein…
- LLMEinblick28. Okt
Die Zukunft der Large Language Models
Sehen Sie die Zukunft der Large Language Models, indem Sie Ansätze wie Selbsttraining, Faktenprüfung und spärliche Expertise vergleichen, die LLM-Einschränkungen beheben könnten. LLMs greifen während Gesprächen auf externe Quellen zu, anstatt sich auf Trainingsdaten zu verlassen. Das Model fragt externe Datenbanken ab, ruft aktuelle Informationen ab und liefert Quellenangaben. Einschränkung: Macht weiterhin Fehler. Quellenangaben garantieren…