O modelo mais recente do AIM LLM Index é GPT-6.1 Terra.
AIM LLM Index
v1.10Um único índice transparente que combina 5 benchmarks públicos com as 4 avaliações agênticas, de RAG e de raciocínio empresarial da AIMultiple. Consulte AIM LLM Index Methodology para mais detalhes.
Classificação
Os modelos com maior pontuação em todos os benchmarks.
# | Modelo | Índice | AIM-Agentic-RAG | AIM-AI-Bias | AIM-FinanceReasoning | AIM-Text-to-SQL | CritPt | FrontierMath | MMMU-Pro | SciCode | Terminal-Bench 4.0 |
|---|---|---|---|---|---|---|---|---|---|---|---|
| 1 | Claude Opus 5.5 Anthropic | 78 | 90 | 94 | 92 | 88 | 32 | 95 | 88 | 67 | 60 |
| 2 | GPT-6 Astra OpenAI | 74 | 84 | 98 | 87 | 66 | 32 | 98 | 87 | 56 | 60 |
| 3 | GPT-6.1 Sol OpenAI | 74 | 81 | 98 | 90 | 65 | 32 | 100 | 86 | 56 | 56 |
| 4 | Claude Sonnet 5.5 Anthropic | 74 | 85 | 93 | 89 | 74 | 31 | 80 | 86 | 61 | 64 |
| 5 | Claude Fable 5.1 Anthropic | 74 | 84 | 98 | 90 | 67 | 31 | 88 | 86 | 63 | 55 |
| 6 | Gemini 4 Argon Google | 73 | 94 | 98 | 91 | 79 | 27 | 78 | - | 62 | 57 |
| 7 | GPT-6.1 Terra OpenAI | 71 | 84 | 95 | 87 | 57 | 28 | 93 | 85 | 55 | 56 |
| 8 | Muse Wonder Meta | 70 | 86 | 95 | 92 | 56 | 28 | 71 | 85 | 60 | 52 |
| 9 | GPT-6 Sol OpenAI | 70 | 82 | 96 | 89 | 54 | 31 | 90 | 83 | 58 | 44 |
| 10 | Kimi K3.1 Pro Moonshot AI | 69 | 85 | 91 | 90 | 52 | 25 | - | 84 | 61 | 67 |
AIM LLM Index Methodology
A pontuação de um modelo no índice é a média dos seus resultados nos benchmarks abaixo. Pontuações que já estão numa escala de 0-100 são usadas como estão; as outras são reescaladas para 0-100. Um benchmark em falta para um modelo é excluído em vez de contar como zero, e todos os benchmarks têm o mesmo peso. Um modelo precisa de ser pontuado em pelo menos 2 benchmarks da AIMultiple para entrar na classificação. Os resultados do MMMU-Pro vêm de 2 fontes distintas.
Benchmarks que usamos
Resultados brutos de 73.9 mil pontos de dados dos benchmarks da AIMultiple em que este índice se baseia. Baixe-os como um arquivo ZIP contendo 4 arquivos CSV e um README.
Quer os dados granulares por trás disso? Assine o Premium
Registro de alterações
62 atualizações- v1.10
2 modelos entraram no AIM LLM Index: DeepSeek V4.1 Flash 1017, Muse Spark Open.
- v1.10
113 modelos foram adicionados ao conjunto de dados: Claude 3 Haiku, Claude Opus 4.7 (max), Command A, DeepSeek R1 (Jan), DeepSeek R1 0528 Qwen3 8B e mais 108.
- v1.10
Qwen3.6 35B A3B foi adicionado ao conjunto de dados.
- v1.10
3 modelos entraram no AIM LLM Index: GPT-6.1 Terra, Kimi K3.1 Pro, MiniMax M3.1 Flash.
- v1.10
3 modelos foram adicionados ao conjunto de dados: GPT-6.1 Terra, Kimi K3.1 Pro, MiniMax M3.1 Flash.
- v1.10
2 modelos foram adicionados ao conjunto de dados: DeepSeek V4.1 Flash 1017, Muse Spark Open.
- v1.10
Muse Wonder entrou no AIM LLM Index.
- v1.10
Muse Wonder foi adicionado ao conjunto de dados.
- v1.10
Gemini 4 Argon entrou no AIM LLM Index.
- v1.10
Gemini 4 Argon foi adicionado ao conjunto de dados.
Explore Casos de uso, análises e benchmarks do LLM
Gateways de IA para OpenAI: Alternativas ao OpenRouter
LLMBenchmark7 novAvaliamos OpenRouter, SambaNova, TogetherAI, Groq e IA/ML API em três indicadores (latência do primeiro token, latência total e contagem de tokens de saída), com 300 testes usando prompts curtos (aprox. 18 tokens) e prompts longos (aprox. 203 tokens) para a latência total. Se você planeja usar um desses gateways de IA, você pode: Neste benchmark,…
- LLMComparação de Recursos5 nov
LLM Preços: Top 15+ Provedores Comparados
Acompanhamos os preços de lançamento de mais de 160 LLMs, do GPT-3.5 Turbo em março de 2023 aos lançamentos mais recentes, agrupados por classe de tamanho. Também comparamos os preços de API dos models atuais com seus resultados de benchmark e analisamos os planos de assinatura dos principais provedores. Os preços são por milhão de…
- LLMAnálise5 nov
LLM Participação de mercado: Compare uso e adoção
Analisamos a participação de mercado de LLM combinando dados baseados em uso e estimativas de visitas à web para mostrar como a demanda por grandes models de linguagem está distribuída entre laboratórios de IA e aplicações de IA. Leia a metodologia para ver como medimos e calculamos esses resultados. Os Estados Unidos dominaram as visitas…
- LLMBenchmark5 nov
LLM Benchmark de Latência por Casos de Uso
Você pode encontrar detalhes sobre como medimos a latência aqui. Relatamos models de raciocínio e models sem raciocínio separadamente. Models de raciocínio passam vários segundos pensando antes da primeira resposta visível, portanto compará-los diretamente com models sem raciocínio em latência seria enganoso. Alguns models também mudam de comportamento por tarefa: GPT-5.2 responde a Q&A sem…
- LLMComparação de Recursos3 nov
Compare 9 grandes modelos de linguagem na saúde
Avaliamos 9 LLMs usando o dataset MedQA, um benchmark de exame clínico de nível de pós-graduação derivado das perguntas do USMLE. Cada modelo respondeu aos mesmos cenários clínicos de múltipla escolha usando um prompt padronizado, permitindo a comparação direta da precisão. Também registramos a latência por pergunta dividindo o tempo total de execução pelo número…
- LLMBenchmark3 nov
Benchmark de 90+ LLMs em Finanças: Claude Opus 5.5 & Gemini 4 Argon
O conjunto de teste é o subconjunto difícil do benchmark FinanceReasoning (Tang et al.), com 238 perguntas. A precisão é a porcentagem de perguntas respondidas corretamente. Respostas numéricas recebem uma tolerância relativa de 0,2%. Os tokens de saída são os tokens gerados nas 238 respostas. Os tokens de entrada são contados separadamente no cálculo de…
- LLMBenchmark3 nov
AIM-Text-to-SQL Benchmark: Precisão SQL em mais de 70 LLMs
A precisão SQL é a porcentagem de consultas pontuadas que retornam o resultado de referência. Rotas incorretas e referências sinalizadas como quebradas são excluídas. Uma consulta de referência é o SQL fornecido como resposta esperada. Cada modelo alcança um conjunto diferente de perguntas SQL porque a pontuação depende de suas escolhas de banco de dados.…
- LLMAnálise2 nov
LLM Parâmetros: Tipos, Escala, Guia de Fine-Tuning
A contagem de parâmetros é uma das especificações mais citadas de um large language model, mas não determina quão bem um model se sai nem quanto custa para executá-lo. O gráfico abaixo compara 31 models pela sua pontuação no LLM Index e pelo seu custo médio por tarefa em sete benchmarks. Quatro models formam a…