Das neueste Modell im AIM LLM Index ist GPT-6.1 Terra.
AIM LLM Index
v1.10Ein transparenter Index, der 5 öffentliche Benchmarks mit 4 eigenen agentischen, RAG- und Enterprise-Reasoning-Bewertungen von AIMultiple kombiniert. Weitere Details finden Sie unter AIM LLM Index Methodology.
Bestenliste
Die am höchsten bewerteten Modelle über alle Benchmarks hinweg.
# | Modell | Index | AIM-Agentic-RAG | AIM-AI-Bias | AIM-FinanceReasoning | AIM-Text-to-SQL | CritPt | FrontierMath | MMMU-Pro | SciCode | Terminal-Bench 4.0 |
|---|---|---|---|---|---|---|---|---|---|---|---|
| 1 | Claude Opus 5.5 Anthropic | 78 | 90 | 94 | 92 | 88 | 32 | 95 | 88 | 67 | 60 |
| 2 | GPT-6 Astra OpenAI | 74 | 84 | 98 | 87 | 66 | 32 | 98 | 87 | 56 | 60 |
| 3 | GPT-6.1 Sol OpenAI | 74 | 81 | 98 | 90 | 65 | 32 | 100 | 86 | 56 | 56 |
| 4 | Claude Sonnet 5.5 Anthropic | 74 | 85 | 93 | 89 | 74 | 31 | 80 | 86 | 61 | 64 |
| 5 | Claude Fable 5.1 Anthropic | 74 | 84 | 98 | 90 | 67 | 31 | 88 | 86 | 63 | 55 |
| 6 | Gemini 4 Argon Google | 73 | 94 | 98 | 91 | 79 | 27 | 78 | - | 62 | 57 |
| 7 | GPT-6.1 Terra OpenAI | 71 | 84 | 95 | 87 | 57 | 28 | 93 | 85 | 55 | 56 |
| 8 | Muse Wonder Meta | 70 | 86 | 95 | 92 | 56 | 28 | 71 | 85 | 60 | 52 |
| 9 | GPT-6 Sol OpenAI | 70 | 82 | 96 | 89 | 54 | 31 | 90 | 83 | 58 | 44 |
| 10 | Kimi K3.1 Pro Moonshot AI | 69 | 85 | 91 | 90 | 52 | 25 | - | 84 | 61 | 67 |
AIM LLM Index Methodology
Der Index-Wert eines Modells ist der Durchschnitt seiner Ergebnisse in den unten aufgeführten Benchmarks. Werte, die bereits auf einer Skala von 0-100 liegen, werden unverändert übernommen; alle anderen werden auf 0-100 umgerechnet. Fehlt einem Modell ein Benchmark, wird dieser ausgelassen statt mit null bewertet, und jeder Benchmark hat das gleiche Gewicht. Ein Modell muss in mindestens 2 AIMultiple-Benchmarks bewertet sein, um in die Rangliste aufgenommen zu werden. Die MMMU-Pro-Ergebnisse stammen aus 2 separaten Quellen.
Verwendete Benchmarks
Rohergebnisse von 73.9 Tausend Datenpunkten aus den AIMultiple-Benchmarks, auf denen dieser Index beruht. Laden Sie sie als ZIP-Datei herunter, die 4 CSV-Dateien und eine README enthält.
Möchten Sie die granularen Daten dahinter? Premium beitreten
Änderungsprotokoll
62 Aktualisierungen- v1.10
2 Modelle sind in den AIM LLM Index aufgenommen worden: DeepSeek V4.1 Flash 1017, Muse Spark Open.
- v1.10
113 Modelle wurden dem Datensatz hinzugefügt: Claude 3 Haiku, Claude Opus 4.7 (max), Command A, DeepSeek R1 (Jan), DeepSeek R1 0528 Qwen3 8B und 108 weitere.
- v1.10
Qwen3.6 35B A3B wurde dem Datensatz hinzugefügt.
- v1.10
3 Modelle sind in den AIM LLM Index aufgenommen worden: GPT-6.1 Terra, Kimi K3.1 Pro, MiniMax M3.1 Flash.
- v1.10
3 Modelle wurden dem Datensatz hinzugefügt: GPT-6.1 Terra, Kimi K3.1 Pro, MiniMax M3.1 Flash.
- v1.10
2 Modelle wurden dem Datensatz hinzugefügt: DeepSeek V4.1 Flash 1017, Muse Spark Open.
- v1.10
Muse Wonder ist in den AIM LLM Index aufgenommen worden.
- v1.10
Muse Wonder wurde dem Datensatz hinzugefügt.
- v1.10
Gemini 4 Argon ist in den AIM LLM Index aufgenommen worden.
- v1.10
Gemini 4 Argon wurde dem Datensatz hinzugefügt.
LLM Anwendungsfälle, Analysen & Benchmarks erkunden
- LLMBenchmark6. Okt
Large Language Models in der Cybersicherheit
Wir haben 7 Large Language Models über 9 Cybersicherheitsdomänen mit SecBench bewertet, einem groß angelegten und formatübergreifenden Benchmark für Sicherheitsaufgaben. Wir haben jedes Modell mit 44.823 Multiple-Choice-Fragen (MCQs) und 3.087 Kurzantwortfragen (SAQs) getestet, die Datensicherheit, Identitäts- und Zugriffsverwaltung, Netzwerksicherheit, Schwachstellenmanagement und Cloud-Sicherheit abdecken. MCQs (Multiple-Choice-Fragen) Benchmarking: SAQs (Kurzantwortfragen): Dieser Benchmark bewertet 7 allgemeine LLMs, einschließlich…
- LLMEinblick21. Sep
LLM VRAM-Rechner für Self-Hosting
Self-Hosting eines LLMs bedeutet, Inferenz auf Hardware auszuführen, die der Betreiber kontrolliert, statt über eine API eines Drittanbieters, was Kosten, Datenkontrolle und Datenschutzprofil verändert. Ob ein Modell überhaupt läuft, hängt vom Speicher ab. Der Rechner schätzt den VRAM oder Unified Memory, den ein Modell lokal benötigt, basierend auf dem Modell, seiner Präzision, der Kontextlänge und…
- LLMBenchmark18. Sep
Agentic IT: Können KI-Agenten einen Benchmark entwerfen
Wir haben 16 Models anhand eines Benchmark-Entwurfs in Text-zu-SQL und Tool-Calling getestet. Jedes Model erstellte einen Benchmark pro Thema, insgesamt 32 Einreichungen. Keine Einreichung erfüllte jedes Rubrik-Kriterium. Die Agenten konnten Tests erstellen und ausführen, aber keiner führte sowohl einen Leerantwort-Test als auch einen Richtigantwort-Test des eigenen Scorers vor. Text-zu-SQL wandelt eine Frage in natürlicher Sprache…
- LLMBenchmark17. Sep
AIM Enterprise: Agentischer Unternehmens-Benchmark
Unternehmen nutzen LLMs jeden Tag für ihre regulären Aufgaben. Um die kosteneffizientesten LLMs zu finden, haben wir AIM Enterprise entwickelt, einen agentischen Unternehmens-Benchmark, bei dem wir 69 reale Unternehmensaufgaben aus Strategie, Marketing, HR, Vertrieb und Betrieb verwendet haben. Zwei Bewerter-Models bewerteten jede Datei, die Prüfungen bestand. Bei 32,7 % der Einzelbewertungen wichen die beiden um…
- LLMEinblick15. Sep
LLM Skalierungsgesetze: Analyse von KI-Forschern
LLM sagen das nächste Token basierend auf Mustern voraus, die aus Textdaten gelernt wurden. Der Begriff LLM-Skalierungsgesetze bezieht sich auf empirische Regelmäßigkeiten, die Modellleistung mit der Menge an Rechenleistung, Trainingsdaten und den während des Trainings verwendeten Modellparametern verknüpfen. Um zu verstehen, wie diese Beziehungen das moderne Modelldesign in der Praxis beeinflussen, haben wir Erkenntnisse…
- LLMBenchmark15. Sep
Zielgruppensimulation: Können LLMs menschliches Verhalten vorhersagen?
Im Marketing ist die Bewertung, wie genau LLMs menschliches Verhalten vorhersagen, entscheidend, um ihre Wirksamkeit dabei zu beurteilen, die Bedürfnisse des Publikums zu antizipieren und die Risiken von Fehlausrichtung, ineffektiver Kommunikation oder unbeabsichtigter Beeinflussung zu erkennen. Zielgruppensimulation mit LLMs ermöglicht die Modellierung virtueller Zielgruppen und hilft Unternehmen, Reaktionen auf Inhalte oder Produkte zu antizipieren, ohne…
- LLMEinblick2. Sep
LLM Observability-Tools: Weights & Biases, Langsmith
LLM-Anwendungen haben sich von Single-Turn-Chats zu mehrstufigen Agenten entwickelt, die Tools verwenden, Datenbanken abfragen und mit anderen Modellen koordinieren, wodurch ihr Verhalten schwieriger zu interpretieren ist. LLM-Observability bietet kontinuierliche Transparenz über diese komplexen Workflows und hilft Unternehmen, die Qualität zu überwachen, Fehler zu erkennen, Probleme zu beheben sowie Leistung und Kosten zu verwalten. W&B Weave…
- LLMEinblick1. Sep
LLM Fine-Tuning-Leitfaden für Unternehmen
Folgen Sie den Links für die spezifischen Lösungen zu Ihren LLM-Ausgabeherausforderungen. Wenn Ihr LLM: Die zunehmende Verbreitung großer Sprachmodelle (LLMs) hat unsere Fähigkeit verbessert, menschliche Sprache zu verarbeiten. Ihr allgemeines Training führt jedoch oft zu suboptimaler Leistung bei bestimmten Aufgaben. Um diese Einschränkung zu überwinden, werden Feinabstimmungsmethoden eingesetzt, um LLMs an die einzigartigen Anforderungen verschiedener…