Contate-nos
Serviços
Contate-nos
IARAG

Benchmark de Modelos de Embedding de Código Aberto para RAG

Benchmark
14 Ago

NVIDIA Llama-Embed-Nemotron-8B lidera em precisão. Em custo, o EmbeddingGemma-300m do Google roda cerca de 4x mais barato que o Nemotron ao custo de uma pequena perda de precisão. nDCG@3: Ganho cumulativo descontado normalizado no corte 3. Com um documento relevante por consulta, é 1 / log2(posição + 1) quando o documento ouro fica no top…

Leia mais
Benchmark
14 Ago

Modelos de Embedding: OpenAI vs Gemini vs Voyage

Comparamos 15 modelos de embedding de texto em inglês e uma linha de base BM25 em mais de 500 consultas curadas manualmente em três domínios de recuperação: contratos legais (CUAD), suporte ao cliente (IBM TechQA) e saúde (MedRAG PubMed). Voyage-3.5 fica em primeiro lugar no geral. Perplexity Embed V1 0.6b alcança o nível médio-superior ao…