Modelli di IA
I modelli di intelligenza artificiale effettuano previsioni basandosi sui dati di addestramento. Possono funzionare in qualsiasi ambito, come numeri, testo o contenuti multimediali.
Benchmark dei modelli tabulari: prestazioni su 19 dataset
Modelli di IABenchmark16 ottAbbiamo confrontato 13 modelli di apprendimento tabulare su 19 dataset reali per un totale di circa 272.000 campioni, con dimensioni dei dataset da 435 a 48.800 righe. Ogni modello è stato eseguito con convalida incrociata a 5 pieghe su suddivisioni identiche. Ogni dataset è un girone all'italiana di sfide dirette tra modelli, decise dalla metrica…
- System OneBenchmark15 ott
AIM-Decision: Jev contro Clef contro LLMs
I modelli decisionali, chiamati anche modelli System One, valutano un insieme fisso di opzioni invece di generare testo token per token. Abbiamo testato 50 modelli decisionali su 1.655 domande di classificazione, come valutare una falla di sicurezza o un richiamo di prodotto, e ne abbiamo eseguiti 47 su 50 attività browser. Vedi AIM System One…
- LLMBenchmark15 ott
Confronta i modelli di IA multimodali sul ragionamento visivo
Abbiamo valutato tramite benchmark 40 principali modelli di IA multimodali sul ragionamento visivo utilizzando 200 domande basate su elementi visivi. La valutazione era composta da due percorsi: 100 domande di comprensione dei grafici che testano l'interpretazione della visualizzazione dei dati e 100 domande di logica visiva che valutano il riconoscimento di schemi e il ragionamento…
- LLMApprofondimento15 ott
Modelli multimodali di grandi dimensioni (LMM) vs LLM
Valuta i LLM e gli LMM confrontando i loro punteggi benchmark e la latenza nel mondo reale cliccando sul nome del modello nella tabella sottostante. Puoi anche valutare i prezzi di input e output per giudicare l'efficienza e il valore complessivi. *L'audio è nativo solo sui modelli E2B, E4B e 12B. Disponibile in cinque dimensioni:…
- LLMApprofondimento14 ott
10+ Esempi di Large Language Model
Abbiamo raccolto benchmark open-source per confrontare i principali large language models proprietari e open-source. Scegli il tuo caso d'uso per trovare il model giusto. Puoi valutare i large language models esaminando le loro prestazioni nei benchmark e la latenza nel mondo reale (disponibile facendo clic sul nome di ciascun model nella tabella) e analizzando i…
- LLMConfronto delle Funzionalità14 ott
I migliori strumenti LLMOps e confronto con MLOps
Le piattaforme LLMOps gestiscono il lato operativo dell'esecuzione dei modelli linguistici di grandi dimensioni: distribuzione, monitoraggio, valutazione e gestione dei costi. Abbiamo esaminato i migliori strumenti LLMOps, le loro funzionalità principali, i modelli di prezzo e le differenze tra loro per aiutare a identificare la soluzione più adatta a diversi casi d'uso. Di seguito viene…
- LLMBenchmark14 ott
AIM-Text-to-SQL Benchmark: SQL Precisione su oltre 70 LLM
L'accuratezza SQL è la percentuale di query valutate che restituiscono il risultato di riferimento. I percorsi errati e i riferimenti contrassegnati come non validi sono esclusi. Una query di riferimento è il SQL fornito come risposta attesa. Ogni modello raggiunge un diverso insieme di domande SQL perché la valutazione dipende dalle sue scelte di database.…
- LLMBenchmark14 ott
Benchmark di 90+ LLM in Finanza: Claude Opus 5.5 e Gemini 4 Argon
Il set di test è il sottoinsieme difficile del benchmark FinanceReasoning (Tang et al.), con 238 domande. L'accuratezza è la percentuale di domande con risposta corretta. Le risposte numeriche ricevono una tolleranza relativa dello 0,2%. I token di output sono i token generati nelle 238 risposte. I token di input vengono conteggiati separatamente nel calcolo…