Web Kazıma için Proxy'ler: Residential vs. Datacenter vs. Unblocker Karşılaştırması

Proxy satıcıları 95–%99 başarı oranları reklam eder. Botları aktif olarak engelleyen sitelerde 55–%75 görüyoruz. Farklı ülkelerdeki sunuculardan her ~5 dakikada bir residential, datacenter ve unblocker'lar üzerinden istekler gönderdik.

Proxy türü satıcıdan daha önemlidir. Örneğin aynı hedeflerde, unblocker'lar yaklaşık 10–25 daha fazla gerçek sayfa döndürür; her 100 için datacenter proxy'lere kıyasla.

Web kazıma için proxy benchmark sonuçları

Sağlayıcıya göre başarı oranı

Sağlayıcıya göre yanıt süresi

Gerçek dünyadaki başarı, reklam edilen oranların çok altındadır:

Korunan sitelerde, residential ve datacenter proxy'ler belirli bir günde genellikle %55 ile %75 arasında kalır; satıcı sayfalarında görülen 95–%99 değil.

Fark, üç ölçüm biçiminden gelir.

1. Başarı, sitenin gerçek yanıtının geldiği anlamına gelir: HTTP 200 ile sunulan bir CAPTCHA veya giriş duvarı başarısızlık sayılır; birçok satıcı rakamı bunu başarı sayar. Artık var olmayan sayfalar başarı sayılmak yerine hariç tutulur.
2. Botları aktif olarak engelleyen siteleri test ediyoruz; tüm müşteri ortalamalarını yükselten kolay trafiği değil.
3. İstekler tek bir sayfayı tekrarlamak yerine yaklaşık 17.000 URL üzerinden gider, bu nedenle önbellekleme işe yaramaz.

Unblocker'lar başarıda farklılık gösterir, ancak hızda çok daha fazla:

En iyi ve en kötü unblocker'lar 5–20 puan farkla ayrılır ve sıralama her dönemde istikrarlı olmuştur. Decodo baştan sona en üstte veya yakınında kalırken, Zyte onu ~5–10 puan geriden takip etmiştir.

Yanıt süreleri çok daha fazla farklılık gösterir. Kararlılık medyan kadar önemlidir: ~2 saniyelik bir unblocker'a uygun sıkı bir zaman aşımı, daha yavaş bir satıcının başarılı isteklerinin çoğunu başarısızlığa dönüştürür. Toplu işlerde başarı oranı zamandan daha önemlidir. Kullanıcının beklediği her şeyde yalnızca ~2 saniyelik bir unblocker proxy gibi davranır.

Kazıma için proxy türü seçme

Proxy türü, satıcı seçiminden daha çok başarı oranınızı ve maliyetlerinizi etkiler.

1. Hedef ne kadar güçlü engelliyor? Önce ucuz bir datacenter proxy üzerinden 100 istek gönderin. Yaklaşık %60 üzerinde gerçek sayfa dönerse, daha pahalı bir şeye ihtiyacınız olmayabilir.
2. Ne kadar hacim? Ayda ~100 GB üzerinde, 10 puanlık başarı farkı gerçek paraya mal olur; bu nedenle başarılı sayfa başına maliyet liste fiyatından daha önemlidir.
3. Toplu mu yoksa gerçek zamanlı mı? Sonuçlar bekleyen bir kullanıcıya gidiyorsa, yanıt süresi yavaş unblocker'ları eler. Gece boyu toplu işlerde bu pek önemli değildir.

Residential proxy'ler: verilerin gösterdiği

Residential sağlayıcılar pazarlamalarının önerdiğinden daha benzerdir. Ortalama puanları yaklaşık 8 puan farklılık gösterir ve en iyi sağlayıcı her gün değişir.

• Ortalama performans istikrarlı kalırken günlük sonuçlar sık sık dalgalanır. Bir sağlayıcının puanı bir günde 20 puan, bir haftada 40 puanın üzerinde değişebilir.
• Tutarlılık önemlidir. Bazı sağlayıcılar istikrarlı sonuçlar sunarken, diğerleri hem en yüksek hem de en düşük benchmark puanlarını yaşar.
• Bir sağlayıcının performansı düşebilir ve düşük kalabilir. Yedek bir sağlayıcı kullanmak bu riski azaltmaya yardımcı olabilir. Riski yönetmek, başarı oranlarına odaklanmaktan daha önemlidir. Benchmark'ımızda Oxylabs sürekli en hızlı sağlayıcılar arasındadır. Buna karşın Apify en yavaştır.

Datacenter proxy'ler: ne zaman yeterli oldukları

Google, Instagram, TikTok, Walmart, X, Yandex ve YouTube'da datacenter proxy'ler genellikle zamanın 55–%75 kadarında gerçek sayfa döndürür.

Benchmark verilerimize dayanarak:

• Datacenter çoğu zaman yeterlidir. Bu yoğun korunan sitelerde bile datacenter proxy'ler çoğu gün zamanın yarısından fazlasında gerçek sayfa döndürdü. Önce datacenter deneyin ve başarısız olduğu hedeflerde yükseltin.
• Hız avantajı mütevazıdır. Datacenter medyanları 1.5–2,0 saniye civarındayken, residential medyanları kendi hedeflerinde çoğunlukla 2.0 ile 2,5 saniye arasındadır. Tek başına hız, datacenter seçmek için nadiren bir nedendir.
• Daha yüksek başarı genellikle daha yavaş yanıtlarla gelir. Webshare kendi döneminde en yüksek datacenter başarısını elde etti ancak aynı zamanda ~1.7–2,4 saniye ile en yavaştı. Apify en hızlı ve en az başarılı oldu. Daha uzun süren bir sağlayıcı, istek başına dahili olarak yeniden denemek gibi daha fazla iş yapıyor olabilir.

Web unblocker'lar

Unblocker'lar aynı hedeflerde datacenter proxy'lere kıyasla yaklaşık 10–25 daha fazla gerçek sayfa döndürdü; bu, her 100 içindir. Seçtiğiniz satıcı, ekstra başarı için ne kadar gecikme ödeyeceğinizi belirler.

• Gecikmeyi göreve uydurun. Sonuçların onlarca saniye içinde gelmesi gereken toplu toplama için en etkili unblocker kazanır, yavaş olsa bile. Kullanıcının beklediği her şey için yaklaşık 2 saniye süren bir unblocker proxy gibi çalışır.
• Başarısızlıkların faturalandırılıp faturalandırılmadığını kontrol edin. Birçok unblocker yalnızca başarılı istekler için ücret alır. Böyleyse, düşük başarı oranı size para değil, zaman ve yeniden deneme maliyeti çıkarır.

Bir proxy'ye hiç ihtiyacınız var mı? Proxy vs. scraper API

Özel bir scraper API'si olan popüler siteler için mühendislik süresi hesaba katıldığında ham proxy'ler genellikle daha pahalı seçimdir.

Web kazıma benchmark'ımızda scraper API'leri residential proxy'lerle yaklaşık aynı maliyete sahiptir ancak ham HTML yerine yapılandırılmış JSON döndürür. Bu benchmark'ların birçoğunda her sağlayıcı için %100'e yakın başarı görüldü; bu, proxy'lerin benzer sitelerde elde ettiğinin çok üzerindedir.

Eskiden HTML'i unblocker'lar üzerinden çekip alanları CSS seçicileriyle ayrıştırıyorduk ve her site yeniden tasarımı işi mühendislerimize geri gönderiyordu. Scraper API'lerinin kullandığımız unblocker'lardan daha pahalı olmadığını görünce koleksiyonumuzun çoğunu onlara taşıdık.

Proxy'ler şu durumlarda hâlâ anlamlıdır:

• Site için hiçbir API mevcut değilse veya API ihtiyacınız olan alanları döndürmüyorsa.
• Her birinde mütevazı hacimde birçok farklı siteyi kazıyorsanız ve tek bir proxy kurulumu sürdürmek birçok API satın almaktan iyiyse.
• Güçlü bir teknik ekibiniz varsa ve veri maliyetleri marjlarınızı belirliyorsa.
• Başlıklar, oturumlar ve zamanlama üzerinde tam kontrol istiyorsanız.

Kıyaslamalarımızı ve veri odaklı içgörülerimizi kaçırmayın. Düğme Google'ı açar; AIMultiple'ı seçmeniz, Google arama sonuçlarında AIMultiple'ı daha sık görmek istediğinizi onaylar.

Tercih edilen kaynak olarak ekle

Metodoloji

Gerçek sayfanın dönüp dönmediğini doğrulamak için botları filtreleyen popüler sitelere her sağlayıcı üzerinden HTTP istekleri gönderiyoruz. Fransa, ABD, Singapur ve Brezilya'daki dört sunucu her 20 dakikada bir aynı testleri çalıştırır. Testler, yaklaşık her beş dakikada bir yeni parti gönderilecek şekilde kademelendirilir. Sonuçlar günlük olarak toplanır ve dört konumun tümünden birleştirilir.

Siteler, her pazar için SimilarWeb'in trafik sıralamasından gelir. Bir siteyi yalnızca sunucularımız erişebiliyorsa, veri toplamaya değer ürün, liste, profil veya arama sayfaları varsa ve bu sayfalar bir engel ekranı değil gerçek sayfa olduğunu açıkça gösteriyorsa tutarız.

Bir tarayıcı basit bir istekten daha fazla gerçek sayfa alırsa, o web sitesini her sağlayıcı için headless bir tarayıcı ile test ederiz. Unblocker'lar tarayıcı kullanmaz çünkü zaten işlenmiş içerik döndürürler.

Başarılı bir isteği nasıl tanımlıyoruz

Bir istek yalnızca aşağıdakilerin tümü doğruysa başarılı sayılır:

1. Yönlendirmeleri izledikten sonra nihai yanıt, HTTP durum kodu 200 ile 299 arasındadır.
2. Yanıt gövdesi, o sitede istenen sayfa türü için bilinen bir içerik işaretçisi içerir; örneğin bir Amazon ürün sayfasındaki fiyat öğesi gibi.
3. Yanıt CAPTCHA, engel sayfası veya giriş duvarı içermez.

Zaman aşımları, boş sayfalar ve diğer tüm durum kodları başarısızlık sayılır.

Artık var olmayan sayfalar ayrı ele alınır. Bir 404, sitenin kendi 404-sayfa işaretçisiyle eşleşiyorsa ve diğer sağlayıcılar o URL için aynı sonucu döndürüyorsa gerçek kabul edilir. Bu tür URL'leri başarı veya başarısızlık saymak yerine her sağlayıcının sonuçlarından hariç tutarız.

Bu tanımı tüm AIMultiple proxy benchmark'larında uyguluyoruz; böylece başarı oranları sayfalar arasında karşılaştırılabilir.

SSS'ler

Bu benchmarkı kaynak gösterin

Yayınlayacağınız yere uygun formatı seçin. Bağlantılı sürümü CMS'inize yapıştırmak, geri bağlantıyı korur.

@misc{karatas2026,
  author = {Karatas, Gulbahar},
  title  = {{Web Kazıma için Proxy'ler: Residential vs. Datacenter vs. Unblocker Karşılaştırması}},
  year   = {2026},
  month  = oct,
  howpublished    = {\url{https://aimultiple.com/proxy-for-scraping}},
  note   = {AIMultiple. Erişim tarihi: 27 Ekim 2026}
}

Gulbahar Karatas

Sektör Analisti

Takip Et

Gülbahar, web verisi toplama, web verisinin uygulamaları ve uygulama güvenliğine odaklanmış bir AIMultiple sektör analistidir.

Tam Profili Görüntüle

Yorum yapan ilk kişi olun

E-posta adresiniz yayınlanmayacak. Tüm alanlar gereklidir. Yorumlar orijinal dilinde bırakılır.

Ad

E-posta Adresi

Yorum

0/450

Yorumu Gönder