Ekrem Sarı
Ekrem é pesquisador de IA na AIMultiple, com foco em automação inteligente, GPUs, agentes de IA e LLMOps para frameworks RAG.
Experiência profissional
Durante sua atuação como Avaliador na Yandex, ele avaliou resultados de busca utilizando frameworks proprietários e protocolos automatizados. Implementou testes de controle de qualidade por meio de anotação de dados, pontuação de relevância e mapeamento da intenção do usuário em mais de 10.000 consultas mensais, além de conduzir avaliações técnicas, incluindo monitoramento de desempenho e detecção de spam utilizando ciclos de feedback de aprendizado de máquina.Interesse de pesquisa
Na AIMultiple, sua pesquisa se concentra no ciclo de vida de MLOps e no desempenho e benchmarking de sistemas de IA de ponta a ponta. Ele contribui para uma ampla gama de projetos, incluindo otimização de Geração Aumentada por Recuperação (RAG), benchmarking extensivo de Modelos de Linguagem Amplos (LLM) e o design de frameworks de IA para agentes. Ekrem se especializa no desenvolvimento de metodologias orientadas a dados para medir e aprimorar o desempenho da tecnologia de IA em métricas operacionais críticas, como precisão, eficiência, custo de API e escalabilidade. Sua análise abrange toda a pilha de tecnologia, desde componentes fundamentais, como modelos de incorporação e bancos de dados vetoriais, até a infraestrutura de nuvem e GPU de alto desempenho necessária para a implantação de agentes de IA.Educação
Ekrem é bacharel pela Hacettepe Üniversitesi e mestre pela Başkent Üniversitesi.Últimos artigos de Ekrem
Top 10 Modelos de Embedding Multilíngue para RAG
Avaliamos 10 modelos de embedding multilíngue em ~606k avaliações da Amazon em 6 idiomas (alemão, inglês, espanhol, francês, japonês, chinês). Geramos 1.800 consultas (300 por idioma), cada uma referenciando detalhes concretos de sua avaliação de origem. Modelos treinados para busca (separação de consulta vs. documento) superam modelos maiores treinados para similaridade de texto geral: e5_base…
Múltiplo-GPU Benchmark: B200 vs H200 vs H100 vs MI300X
Por mais de duas décadas, otimizar o desempenho de computação tem sido uma pedra angular do meu trabalho. Realizamos benchmark das B200, H200, H100 da NVIDIA e MI300X da AMD para avaliar quão bem elas escalam para inferência de Modelo de Linguagem Grande (LLM). Usando o framework vLLM com o modelo meta-llama/Llama-3.1-8B-Instruct, executamos testes em…
Modelos de Embedding: OpenAI vs Gemini vs Voyage
Avaliamos 15 modelos de embedding de texto em inglês e uma linha de base BM25 em mais de 500 consultas manualmente curadas em três domínios de recuperação: contratos legais (CUAD), suporte ao cliente (IBM TechQA) e saúde (MedRAG PubMed). O Voyage-3.5 ocupa o primeiro lugar no geral. O Perplexity Embed V1 0.6b atinge o nível…
RAG Frameworks: LangChain vs LangGraph vs LlamaIndex
Avaliamos 5 frameworks de RAG: LangChain, LangGraph, LlamaIndex, Haystack e DSPy, construindo o mesmo fluxo de trabalho agênico de RAG com componentes padronizados: modelos idênticos (GPT-4.1-mini), embeddings (BGE-small), retriever (Qdrant) e ferramentas (pesquisa na web Tavily). Isso isola a sobrecarga real e a eficiência de tokens de cada framework. Resultados do benchmark de frameworks de…
Benchmark de Reranker: Top 8 Modelos Comparados
Fizemos benchmark de 8 modelos reranker em ~145k avaliações da Amazon em inglês para medir o quanto uma etapa de reranking melhora a recuperação densa. Recuperamos os 100 principais candidatos com multilingual-e5-base, reordenamos com cada modelo e avaliamos os 10 melhores resultados contra 300 consultas, cada uma referenciando detalhes concretos de sua avaliação de origem.…
Busca Agêntica: Benchmark de 8 APIs de Busca para Agentes
A busca agêntica desempenha um papel crucial na ponte entre os motores de busca tradicionais e as capacidades de busca de IA. Esses sistemas permitem que agentes de IA encontrem, recuperem e estruturem informações relevantes de forma autônoma, alimentando aplicações desde assistência em pesquisa até monitoramento em tempo real e raciocínio em múltiplas etapas. As…
Índice de Preços de Aluguel de GPU em Nuvem
As taxas sob demanda para as GPUs de nuvem da mais nova geração (B200, B300, MI300X, RTX 5090) praticamente dobraram no último ano, enquanto as placas mainstream (H100, H200, A100) mantiveram uma faixa estreita. Compilamos o índice de GPU mensalmente de 63 provedores e 17 modelos de GPU, abrangendo os planos sob demanda, spot e…
Benchmark de Software DLP
Benchmarkizamos o DeviceLock DLP da Acronis e o ManageEngine DLP Plus em VMs idênticas do Windows Server 2022 com 28 cenários: 23 testes de vazamento de dados (incluindo 12 arquivos de evasão adversariais), 3 testes de segurança do agente e 2 testes sob alto consumo de CPU e memória. Para os outros produtos DLP, Netwrix…
LLM Quantização: BF16 vs FP8 vs INT4
Realizamos o benchmark do Qwen3-32B em 4 níveis de precisão (BF16, FP8, GPTQ-Int8, GPTQ-Int4) em uma única NVIDIA H100 80GB GPU. Cada configuração foi avaliada em 2 benchmarks (~12,2 mil perguntas) cobrindo conhecimento e geração de código, além de mais de 2.000 execuções de inferência para medir a vazão. O Int4 é 2,7x mais rápido…
Boletim informativo AIMultiple
Receba um e-mail gratuito por semana com as últimas notícias de tecnologia B2B e insights de especialistas para impulsionar o seu negócio.