Premium
Dienstleistungen
Premium
Ekrem Sarı

Ekrem Sarı

KI-Forscher
37 Artikel
Bleiben Sie über B2B-Technologie auf dem Laufenden

Ekrem ist KI-Forscher und Datenwissenschaftler bei AIMultiple. Er entwirft und führt praxisnahe Benchmarks für KI- und LLM-Systeme durch.

Berufserfahrung

Bei AIMultiple führt Ekrem Benchmarks für End-to-End-KI-Systeme durch und erstellt die Daten-Workflows und Dashboards, die zur Verfolgung von Benchmark- und Produktmetriken verwendet werden. Seine Benchmarks decken Embedding- und Reranker-Models, Vektor- und Graphdatenbanken, Inference-Engines, Quantisierung, GPU-Parallelität und Multi-GPU-Skalierung, Cloud-GPU-Preise und -Anbieter, Text-zu-SQL sowie RAG- und agentische RAG-Frameworks ab.

Vor AIMultiple arbeitete er als Datenwissenschaftler bei Yandex, wo er große Datensätze mit SQL abfragte und analysierte, um die Such- und Rankingqualität anhand detaillierter Richtlinien zu bewerten.

Forschungsinteresse

Ekrems Arbeit konzentriert sich darauf zu messen, wie LLM- und Retrieval-Systeme in der Praxis funktionieren. Er entwirft das Test-Harness, führt die Workloads auf echter Hardware aus und vergleicht Models, Frameworks und Infrastruktur hinsichtlich Genauigkeit, Durchsatz, Latenz, Kosten und Skalierbarkeit – über den gesamten Stack von Embedding-Models und Vektordatenbanken bis hin zu Inference-Engines und GPU-Infrastruktur. Seine MSc-Arbeit automatisiert systematische Literaturrecherchen mit einer auf RAG basierenden Pipeline.

Ausbildung

Ekrem hat einen MSc in Management-Informationssystemen von der Başkent University, wo seine Abschlussarbeit systematische Literaturrecherchen mit einer auf RAG basierenden Pipeline automatisierte, und strebt einen zweiten MSc in Daten- und Wissensengineering an der Hacettepe University an.

Neueste Artikel von Ekrem

KI
Benchmark
17. Sep

DGX Spark Alternativen: RTX, Ryzen KI Halo und Mac Studio

Wir vergleichen veröffentlichte Inference-Benchmarks für DGX Spark, RTX und Ryzen KI Halo, einschließlich Prompt-Verarbeitung, Token-Generierung und längeren Kontexten. Zu den Alternativen gehören Framework Desktop, Mac Studio und GB10-Systeme anderer Hersteller. Die Decode-Geschwindigkeit misst die pro Sekunde generierten Output-Tokens. Höhere Werte bedeuten eine schnellere Antwortgenerierung. Alle sechs Ergebnisse verwenden GPT-OSS 20B MXFP4 in Ollama bei Batchgröße…

KI
Open-World-Bewertung
16. Sep

Kostenlose Cloud-GPUs: Modelle, Limits und Zugriffsanforderungen

Kostenlose Cloud-GPUs sind über Python-Notebooks, KI-Demos und monatliche Compute-Guthaben verfügbar. Vergleichen Sie GPU-Hardware, free-Kontingente und Zugriffsanforderungen oder prüfen Sie, welche Dienste zu Ihrer Arbeitslast passen. Zwei T4s bieten zwei getrennte 16-GB-Speicherzuweisungen. Das Ausführen eines Modells über beide hinweg erfordert Software, die Arbeitslast verteilt. Die kombinierte Kapazität macht aus keiner der beiden GPUs ein 32-GB-Gerät.…

KI
Benchmark
15. Sep

Vergleich relationaler Foundation-Modelle

Wir haben SAP-RPT-1-OSS mit Gradient Boosting (LightGBM, CatBoost) auf 17 tabellarischen Datensätzen verglichen, die das semantisch-numerische Spektrum abdecken: kleine/hochgradig semantische Tabellen, gemischte Geschäftsdatensätze sowie große, wenig semantische numerische Datensätze. Unser Ziel ist es zu messen, wo die durch Vortraining erworbenen semantischen Priors eines relationalen LLM Vorteile gegenüber traditionellen Baummodellen bieten können und wo sie bei…

Cybersicherheit
Open-World-Bewertung
10. Sep

Disaster-Recovery-Benchmark: Acronis vs Comet vs MSP360

Wir haben Acronis Cyber Protect Cloud, Comet Backup und MSP360 Managed Backup im Bereich Disaster Recovery getestet. Jeder Anbieter erstellte ein Image eines laufenden Windows Server 2022 und eines laufenden Ubuntu-24.04-Servers mit derselben deterministischen Workload – einem Webservice, einer Datenbank mit 10.000 Zeilen und 50 Dateien – und stellte anschließend die gesamte Maschine auf einem…

KI
Benchmark
4. Sep

Vektordatenbank-Benchmark: 7 Open-Source-Engines für RAG

Wir haben sieben Open-Source-, selbst gehostete Vektordatenbanken als Retrieval-Schicht einer RAG-Pipeline einem Benchmark unterzogen, wobei jede einzeln auf identischen bge-m3-Embeddings und echten medizinischen und technischen Anfragen lief, sodass der Datenbankindex die einzige Variable war. Die Arbeitslast umfasste MedRAG-50k, TechQA-28k und einen Korpus mit 2.25M Vektoren über acht Dimensionen hinweg, von Genauigkeit und Retrieval-Qualität über Geschwindigkeit,…

KI
Benchmark
31. Aug

Cloud-GPU-Preise, Leistung & Anbietervergleich

Cloud-GPU-Listenpreise für dasselbe Model können sich von Anbieter zu Anbieter um ein Vielfaches unterscheiden. Wir haben den niedrigsten Preis, den Anbieter, die Marktspanne und den Median für 40+ GPU-Konfigurationen über alle drei Preisstufen hinweg zusammengestellt, plus einen Durchsatz-pro-Dollar-Benchmark bei 10 Models. Hier sehen Sie die kosteneffizienteste GPU für Ihre Workload über 13 Hyperscaler- und Neocloud-Anbieter…

KI
Benchmark
31. Aug

RAG-Frameworks: LangChain vs. LangGraph vs. LlamaIndex

Wir haben 5 RAG-Frameworks gebenchmarkt: LangChain, LangGraph, LlamaIndex, Haystack und DSPy, indem wir denselben agentischen RAG-Workflow mit standardisierten Komponenten erstellt haben: identische Modelle (GPT-4.1-mini), Embeddings (BGE-small), Retriever (Qdrant) und Tools (Tavily-Websuche). Dadurch werden der tatsächliche Overhead und die Token-Effizienz jedes Frameworks isoliert. Der Benchmark bestand aus 100 Anfragen, wobei jedes Framework den gesamten Satz 100…

KI
Benchmark
31. Aug

Beste RAG Tools, Frameworks und Bibliotheken

RAG verbessert LLM-Antworten, indem es sie auf externe Daten stützt, statt nur auf das, was das Modell im Training auswendig gelernt hat. Wir haben die Komponenten, aus denen ein RAG-System besteht, einem Benchmark unterzogen und die Ergebnisse an einem Ort zusammengeführt, mit einem praktischen Leitfaden zur Auswahl jedes Teils des Stacks. Siehe unsere Benchmark-Ergebnisse für…

Agentische KI
Benchmark
20. Aug

Agentische Suche: Benchmark von 8 Such-APIs für Agenten

Agentische Suche spielt eine entscheidende Rolle, wenn es darum geht, die Lücke zwischen herkömmlichen Suchmaschinen und KI-Suchfunktionen zu überbrücken. Such-APIs sind die erste Schicht eines agentischen Tools, bei der die Leistung die Qualität von allem nachgelagerten begrenzt. Wir haben 8 Such-APIs über 100 reale KI-/LLM-Anfragen hinweg einem Benchmark unterzogen und 4.000 abgerufene Ergebnisse mit einem…

KI
Benchmark
14. Aug

Multimodale Embedding-Modelle: Apple vs Meta vs OpenAI

Multimodale Embedding-Modelle erkennen Objekte hervorragend, haben aber Schwierigkeiten mit Beziehungen. Aktuelle Modelle tun sich schwer, „Telefon auf einer Karte“ von „Karte auf einem Telefon“ zu unterscheiden. Wir haben 7 führende Modelle über MS-COCO und Winoground einem Benchmark unterzogen, um diese spezifische Einschränkung zu messen. Um einen fairen Vergleich zu gewährleisten, haben wir jedes Modell unter…