Proxys für Scraping: Residential vs. Datacenter vs. Unblocker im Benchmark

Proxy-Anbieter werben mit Erfolgsraten von 95–99 %. Auf Websites, die Bots aktiv blockieren, sehen wir 55–75 %. Wir haben etwa alle 5 Minuten Anfragen über Residential-Proxys, Datacenter-Proxys und Unblocker gesendet, und zwar von Servern in verschiedenen Ländern.

Der Proxy-Typ ist wichtiger als der Anbieter. Bei denselben Zielen liefern Unblocker beispielsweise pro 100 Anfragen ~10–25 echte Seiten mehr als Datacenter-Proxys.

Proxy-Benchmark-Ergebnisse für Web Scraping

Erfolgsrate nach Anbieter

Antwortzeit nach Anbieter

Der Erfolg in der Praxis liegt weit unter den beworbenen Raten:

Auf geschützten Websites liegen Residential- und Datacenter-Proxys an einem gegebenen Tag typischerweise zwischen 55 % und 75 %, nicht bei den 95–99 % auf den Seiten der Anbieter.

Der Unterschied ergibt sich aus drei Messweisen. Erstens bedeutet Erfolg, dass die tatsächliche Antwort der Website eingetroffen ist: Ein CAPTCHA oder eine Login-Sperre, die mit HTTP 200 ausgeliefert wird, zählt als Misserfolg, während viele Anbieterzahlen sie als Erfolg werten. Zweitens testen wir Websites, die Bots aktiv blockieren, und nicht den einfachen Traffic, der die Durchschnittswerte über alle Kunden anhebt. Drittens laufen die Anfragen über etwa 17.000 URLs, statt eine einzelne Seite zu wiederholen, sodass Caching nicht hilft.

Unblocker unterscheiden sich im Erfolg, aber weit mehr in der Geschwindigkeit:

Zwischen dem besten und dem schlechtesten Unblocker liegen 5–20 Punkte, und die Rangfolge war innerhalb jedes Zeitraums stabil. Decodo lag durchgehend an der Spitze oder nahe daran, während Zyte um ~5–10 Punkte dahinter lag.

Bei den Antwortzeiten sind die Unterschiede deutlich größer. Stabilität ist ebenso wichtig wie der Median: Ein knappes Timeout, das zu einem Unblocker mit ~2 Sekunden passt, würde viele erfolgreiche Anfragen eines langsameren Anbieters in Misserfolge verwandeln. Bei Batch-Jobs ist die Erfolgsrate wichtiger als die Zeit. Für alles, worauf ein Nutzer wartet, verhält sich nur ein Unblocker mit ~2 Sekunden wie ein Proxy.

Den Proxy-Typ für Scraping auswählen

Wählen Sie den Proxy-Typ nach Ziel und Workload aus, nicht nach der Marke. Der Proxy-Typ wirkt sich stärker auf Erfolgsrate und Kosten aus als der Anbieter.

1. Wie stark blockiert das Ziel? Senden Sie zunächst 100 Anfragen über einen günstigen Datacenter-Proxy. Wenn mehr als ~60 % echte Seiten liefern, brauchen Sie womöglich nichts Teureres.
2. Wie viel Volumen? Ab ~100 GB pro Monat kostet eine Erfolgslücke von 10 Punkten echtes Geld, daher zählen die Kosten pro erfolgreicher Seite mehr als der Listenpreis.
3. Batch oder Echtzeit? Wenn die Ergebnisse an einen wartenden Nutzer gehen, schließt die Antwortzeit langsame Unblocker aus. Bei nächtlichen Batch-Jobs spielt sie kaum eine Rolle.

Residential-Proxys: Was die Daten zeigen

Residential-Anbieter sind sich ähnlicher, als ihr Marketing vermuten lässt. Ihre Durchschnittswerte unterscheiden sich um etwa 8 Punkte, und der Spitzenreiter wechselt täglich.

In unseren Residential-Daten zeigen sich vier Trends:

• Während die durchschnittliche Leistung stabil bleibt, schwanken die Tageswerte oft. Der Wert eines Anbieters kann sich an einem Tag um 20 Punkte und innerhalb einer Woche um mehr als 40 Punkte ändern.
• Konstanz ist wichtig. Einige Anbieter liefern stabile Ergebnisse, andere erzielen sowohl die höchsten als auch die niedrigsten Benchmark-Werte.
• Die Leistung eines Anbieters kann sinken und niedrig bleiben. Ein Ersatzanbieter kann helfen, dieses Risiko zu verringern. Risikomanagement ist wichtiger als der Fokus auf Erfolgsraten. In unserem Benchmark gehört Oxylabs durchgehend zu den schnellsten Anbietern. Apify dagegen ist der langsamste.

Datacenter-Proxys: Wann sie ausreichen

Auf Google, Instagram, TikTok, Walmart, X, Yandex und YouTube liefern Datacenter-Proxys typischerweise in 55–75 % der Fälle echte Seiten.

Auf Grundlage unserer Benchmark-Daten:

• Datacenter reicht oft aus. Selbst auf diesen stark geschützten Websites lieferten Datacenter-Proxys an den meisten Tagen in mehr als der Hälfte der Fälle echte Seiten. Probieren Sie zuerst Datacenter und wechseln Sie bei den Zielen, an denen es scheitert, zu einer höheren Stufe.
• Der Geschwindigkeitsvorteil ist gering. Die Datacenter-Mediane liegen bei etwa 1.5–2,0 Sekunden, die Residential-Mediane bei ihren eigenen Zielen meist zwischen 2.0 und 2,5 Sekunden. Für sich genommen ist Geschwindigkeit selten ein Grund, Datacenter zu wählen.
• Höhere Erfolgsraten gehen oft mit langsameren Antworten einher. Webshare erzielte in seinem Zeitraum den höchsten Datacenter-Erfolg, war aber auch der langsamste, mit ~1.7–2,4 Sekunden. Apify war der schnellste und der am wenigsten erfolgreiche. Ein Anbieter, der länger braucht, leistet möglicherweise mehr Arbeit pro Anfrage, etwa durch interne Wiederholungsversuche.

Web Unblocker

Unblocker haben bei denselben Zielen von je 100 Anfragen ~10–25 echte Seiten mehr geliefert als Datacenter-Proxys. Welchen Anbieter Sie wählen, entscheidet darüber, wie viel Latenz Sie für den zusätzlichen Erfolg in Kauf nehmen.

• Passen Sie die Verzögerung an die Aufgabe an. Bei Batch-Erfassungen, deren Ergebnisse innerhalb von zehn Sekunden vorliegen müssen, gewinnt der wirksamste Unblocker, auch wenn er langsam ist. Für alles, worauf ein Nutzer wartet, funktioniert ein Unblocker mit etwa 2 Sekunden wie ein Proxy.
• Prüfen Sie, ob Fehlversuche berechnet werden. Viele Unblocker berechnen nur erfolgreiche Anfragen. In diesem Fall kostet eine niedrigere Erfolgsrate Zeit und Wiederholungen, aber kein Geld.

Brauchen Sie überhaupt einen Proxy? Proxy vs. Scraper-API

Für beliebte Websites mit einer speziellen Scraper-API sind reine Proxys meist die teurere Wahl, sobald man den Entwicklungsaufwand einrechnet.

In unserem Web-Scraping-Benchmark kosten Scraper-APIs ungefähr so viel wie Residential-Proxys, liefern aber strukturiertes JSON statt rohem HTML. In mehreren dieser Benchmarks erreichte jeder Anbieter nahezu 100 % Erfolg, deutlich mehr, als Proxys auf ähnlichen Websites erzielen.

Früher haben wir HTML über Unblocker abgerufen und Felder mit CSS-Selektoren geparst, und jeder Relaunch einer Website brachte Arbeit zurück zu unseren Entwicklern. Als wir sahen, dass Scraper-APIs nicht mehr kosten als die Unblocker, die wir nutzten, haben wir den Großteil unserer Datenerfassung dorthin verlagert.

Proxys sind weiterhin sinnvoll, wenn:

• Keine API existiert für die Website oder die API die benötigten Felder nicht liefert.
• Sie viele verschiedene Websites scrapen, jeweils mit moderatem Volumen, sodass die Pflege eines einzigen Proxy-Setups besser ist als der Kauf vieler APIs.
• Sie ein starkes technisches Team haben und die Datenkosten Ihre Margen bestimmen.
• Sie volle Kontrolle benötigen über Header, Sitzungen und Timing.

Verpassen Sie nicht unsere Benchmarks und datengestützten Erkenntnisse. Die Schaltfläche öffnet Google; die Auswahl von AIMultiple bestätigt, dass Sie AIMultiple häufiger in den Google-Suchergebnissen sehen möchten.

Als bevorzugte Quelle hinzufügen

Methodik

Wir senden HTTP-Anfragen über jeden Anbieter an beliebte Websites, die Bots filtern, und prüfen, ob die tatsächliche Seite zurückgegeben wird. Vier Server in Frankreich, den USA, Singapur und Brasilien führen alle 20 Minuten identische Tests aus. Die Tests sind zeitlich versetzt, sodass etwa alle fünf Minuten ein neuer Stapel gesendet wird. Die Ergebnisse werden täglich aggregiert und aus allen vier Standorten zusammengeführt.

Die Websites stammen aus dem Traffic-Ranking von SimilarWeb für den jeweiligen Markt. Wir behalten eine Website nur, wenn unsere Server darauf zugreifen können, sie Produkt-, Listen-, Profil- oder Suchseiten hat, deren Daten sich zu erfassen lohnen, und diese Seiten eindeutig erkennen lassen, dass es echte Seiten sind und keine Sperrseite.

Wenn ein Browser mehr echte Seiten erhält als eine einfache Anfrage, testen wir diese Website für jeden Anbieter mit einem Headless-Browser. Unblocker verwenden keinen Browser, da sie bereits verarbeitete Inhalte zurückgeben.

Eine Anfrage ist erfolgreich, wenn sie HTTP 404 zurückgibt, was bedeutet, dass der Proxy die Website erreicht hat, die Seite aber fehlt, oder HTTP 200–399 mit einem bekannten Inhaltsmarker für diese Website, etwa a-price-whole auf Amazon oder x-item-title__mainTitle auf eBay. Bei Websites, die viel JavaScript nutzen und keinen stabilen Marker haben, zählen Antworten unterhalb einer bestimmten Größe als Misserfolge.

Die Antwortzeit messen wir ab dem Moment, in dem der Proxy die Anfrage erhält, bis er den vollständigen Seiteninhalt liefert. Wir zählen nur erfolgreiche einfache HTTP-Anfragen. Der täglich berichtete Wert ist der Median.

FAQs

Zitieren Sie diesen Benchmark

Wählen Sie das Format, das zu Ihrem Veröffentlichungsort passt. Wenn Sie die Link-Version in Ihr CMS einfügen, bleibt der Backlink erhalten.

@misc{karatas2026,
  author = {Karatas, Gulbahar},
  title  = {{Proxys für Scraping: Residential vs. Datacenter vs. Unblocker im Benchmark}},
  year   = {2026},
  month  = oct,
  howpublished    = {\url{https://aimultiple.com/proxy-for-scraping}},
  note   = {AIMultiple. Abgerufen am 2. Oktober 2026}
}

Gulbahar Karatas

Branchenanalystin

Folgen auf

Gülbahar ist eine AIMultiple-Branchenanalystin, die sich auf Webdatenerfassung, Anwendungen von Webdaten und Anwendungssicherheit konzentriert.

Vollständiges Profil anzeigen

Seien Sie der Erste, der kommentiert

Ihre E-Mail-Adresse wird nicht veröffentlicht. Alle Felder sind erforderlich. Kommentare werden in ihrer Originalsprache belassen.

Name

E-Mail-Adresse

Kommentar

0/450

Kommentar posten