Web Kazıma için Proxy'ler: Residential, Datacenter ve Unblocker Karşılaştırması

Proxy sağlayıcıları 95–%99 başarı oranı vaat ediyor. Botları aktif olarak engelleyen sitelerde ise 55–%75 görüyoruz. Farklı ülkelerdeki sunuculardan, yaklaşık her 5 dakikada bir residential, datacenter ve unblocker'lar üzerinden istek gönderdik.

Proxy türü, sağlayıcıdan daha önemlidir. Örneğin aynı hedeflerde unblocker'lar, datacenter proxy'lere göre her 100 istekte yaklaşık 10–25 daha fazla gerçek sayfa döndürüyor.

Web kazıma için proxy karşılaştırma sonuçları

Sağlayıcıya göre başarı oranı

Sağlayıcıya göre yanıt süresi

Gerçek dünyadaki başarı, vaat edilen oranların çok altında:

Korumalı sitelerde residential ve datacenter proxy'ler belirli bir günde genellikle %55 ile %75 arasında kalıyor; sağlayıcı sayfalarında görülen 95–%99 değerlerine ulaşmıyor.

Aradaki fark, üç farklı ölçüm yönteminden kaynaklanıyor. Birincisi, başarı sitenin gerçek yanıtının ulaşması demektir: HTTP 200 ile sunulan bir CAPTCHA veya giriş duvarı başarısızlık sayılır; birçok sağlayıcı rakamı ise bunu başarı olarak sayar. İkincisi, tüm müşteri ortalamalarını yükselten kolay trafiği değil, botları aktif olarak engelleyen siteleri test ediyoruz. Üçüncüsü, istekler tek bir sayfayı tekrarlamak yerine yaklaşık 17.000 URL üzerinden gidiyor; bu yüzden önbellek bir fayda sağlamıyor.

Unblocker'lar başarıda farklılaşıyor, hızda ise çok daha fazla:

En iyi ve en kötü unblocker'lar arasında 5–20 puan fark var ve sıralama her dönem içinde istikrarlı kaldı. Decodo boyunca zirvede veya zirveye yakın kaldı; Zyte ise onun yaklaşık 5–10 puan gerisinde kaldı.

Yanıt süreleri çok daha fazla farklılaşıyor. İstikrar, medyan kadar önemlidir: yaklaşık 2 saniyelik bir unblocker'a uygun sıkı bir zaman aşımı, daha yavaş bir sağlayıcının başarılı isteklerinin çoğunu başarısızlığa çevirir. Toplu işlerde başarı oranı süreden daha önemlidir. Bir kullanıcının beklediği her işlem için ise yalnızca yaklaşık 2 saniyelik bir unblocker proxy gibi davranır.

Kazıma için proxy türü seçmek

Proxy türünü markaya göre değil, hedefinize ve iş yükünüze göre seçin. Proxy türü, başarı oranınızı ve maliyetlerinizi sağlayıcıdan daha fazla etkiler.

1. Hedef ne kadar sert engelliyor? Önce ucuz bir datacenter proxy üzerinden 100 istek gönderin. İsteklerin yaklaşık %60'ından fazlası gerçek sayfa döndürüyorsa, daha pahalı bir şeye ihtiyacınız olmayabilir.
2. Hacim ne kadar? Ayda yaklaşık 100 GB'ın üzerinde, 10 puanlık bir başarı farkı ciddi bir maliyet yaratır; bu yüzden liste fiyatından çok başarılı sayfa başına maliyet önemlidir.
3. Toplu mu, gerçek zamanlı mı? Sonuçlar bekleyen bir kullanıcıya gidiyorsa, yanıt süresi yavaş unblocker'ları eler. Gece çalışan toplu işlerde ise neredeyse hiç önemi yoktur.

Residential proxy'ler: verilerin gösterdikleri

Residential sağlayıcılar, pazarlamalarının ima ettiğinden daha birbirine benziyor. Ortalama puanları yaklaşık 8 puan farklılaşıyor ve en iyi sağlayıcı her gün değişiyor.

Residential verilerimizde dört eğilim ortaya çıktı:

• Ortalama performans istikrarlı kalsa da günlük sonuçlar sık sık dalgalanıyor. Bir sağlayıcının puanı bir günde 20 puan, bir haftada ise 40 puandan fazla değişebiliyor.
• Tutarlılık önemlidir. Bazı sağlayıcılar istikrarlı sonuçlar sunarken, bazıları hem en yüksek hem de en düşük karşılaştırma puanlarını yaşıyor.
• Bir sağlayıcının performansı düşebilir ve düşük kalabilir. Yedek bir sağlayıcı kullanmak bu riski azaltmaya yardımcı olabilir. Riski yönetmek, başarı oranlarına odaklanmaktan daha önemlidir. Karşılaştırmamızda Oxylabs sürekli olarak en hızlı sağlayıcılar arasında yer alıyor. Buna karşılık Apify en yavaşı.

Datacenter proxy'ler: ne zaman yeterli olurlar

Google, Instagram, TikTok, Walmart, X, Yandex ve YouTube'da datacenter proxy'ler genellikle zamanın 55–%75'inde gerçek sayfa döndürüyor.

Karşılaştırma verilerimize göre:

• Datacenter çoğu zaman yeterlidir. Bu yoğun korumalı sitelerde bile datacenter proxy'ler çoğu günde zamanın yarısından fazlasında gerçek sayfa döndürdü. Önce datacenter'ı deneyin, başarısız olduğu hedeflerde bir üst seviyeye geçin.
• Hız avantajı sınırlıdır. Datacenter medyanları yaklaşık 1.5–2,0 saniye civarındadır; residential medyanları ise kendi hedeflerinde çoğunlukla 2.0 ile 2,5 saniye arasındadır. Tek başına hız, datacenter seçmek için nadiren bir gerekçedir.
• Daha yüksek başarı çoğu zaman daha yavaş yanıtlarla gelir. Webshare, döneminde en yüksek datacenter başarısını elde etti ancak yaklaşık 1.7–2,4 saniye ile en yavaşı da oldu. Apify en hızlı ve en az başarılı olandı. Daha uzun süren bir sağlayıcı, dahili olarak yeniden deneme gibi istek başına daha fazla iş yapıyor olabilir.

Web unblocker'lar

Unblocker'lar, aynı hedeflerde datacenter proxy'lere göre her 100 istekte yaklaşık 10–25 daha fazla gerçek sayfa döndürdü. Ekstra başarı için ne kadar gecikme ödeyeceğinizi seçtiğiniz sağlayıcı belirler.

• Gecikmeyi göreve uygun seçin. Sonuçların onlarca saniye içinde gelmesi gereken toplu veri toplamada, yavaş olsa bile en etkili unblocker kazanır. Bir kullanıcının beklediği her işlem için, yaklaşık 2 saniye süren bir unblocker proxy gibi çalışır.
• Başarısız isteklerin faturalandırılıp faturalandırılmadığını kontrol edin. Birçok unblocker yalnızca başarılı istekler için ücret alır. Öyleyse düşük bir başarı oranı size para değil, zaman ve yeniden deneme maliyeti getirir.

Proxy'ye gerçekten ihtiyacınız var mı? Proxy ve kazıyıcı API

Özel bir kazıyıcı API'si bulunan popüler sitelerde, mühendislik süresi hesaba katıldığında ham proxy'ler genellikle daha pahalı seçenektir.

Web kazıma karşılaştırmamızda kazıyıcı API'ler residential proxy'lerle yaklaşık aynı maliyete geliyor, ancak ham HTML yerine yapılandırılmış JSON döndürüyor. Bu karşılaştırmaların birkaçında her sağlayıcı için %100'e yakın başarı görüldü; bu, proxy'lerin benzer sitelerde elde ettiğinin çok üzerinde.

Eskiden HTML'yi unblocker'lar üzerinden çekip alanları CSS seçicileriyle ayrıştırıyorduk ve her site yeniden tasarımı mühendislerimize yeniden iş çıkarıyordu. Kazıyıcı API'lerin kullandığımız unblocker'lardan daha pahalı olmadığını görünce veri toplamamızın çoğunu onlara taşıdık.

Proxy'ler şu durumlarda hâlâ mantıklıdır:

• Site için API yoksa veya API ihtiyacınız olan alanları döndürmüyorsa.
• Her biri orta hacimde olan birçok farklı siteyi kazıyorsanız; tek bir proxy kurulumunu sürdürmek, birçok API satın almaktan daha avantajlıdır.
• Güçlü bir teknik ekibiniz varsa ve veri maliyetleri marjınızı belirliyorsa.
• Başlıklar, oturumlar ve zamanlama üzerinde tam kontrole ihtiyacınız varsa.

Kıyaslamalarımızı ve veri odaklı içgörülerimizi kaçırmayın. Düğme Google'ı açar; AIMultiple'ı seçmeniz, Google arama sonuçlarında AIMultiple'ı daha sık görmek istediğinizi onaylar.

Tercih edilen kaynak olarak ekle

Yöntem

Gerçek sayfanın döndürülüp döndürülmediğini doğrulamak için her sağlayıcı üzerinden botları filtreleyen popüler sitelere HTTP istekleri gönderiyoruz. Fransa, ABD, Singapur ve Brezilya'daki dört sunucu her 20 dakikada bir aynı testleri çalıştırıyor. Testler kademelendirilmiştir; böylece yaklaşık her beş dakikada bir yeni bir toplu istek gönderilir. Sonuçlar günlük olarak toplanır ve dört konumdan birleştirilir.

Siteler, her pazar için SimilarWeb'in trafik sıralamasından alınıyor. Bir siteyi yalnızca sunucularımız ona erişebiliyorsa, veri toplamaya değer ürün, liste, profil veya arama sayfaları varsa ve bu sayfalar engelleme ekranı değil gerçek sayfa olduklarını açıkça gösteriyorsa tutuyoruz.

Bir tarayıcı basit bir istekten daha fazla gerçek sayfa getiriyorsa, o web sitesini her sağlayıcı için başsız tarayıcıyla test ediyoruz. Unblocker'lar zaten işlenmiş içerik döndürdüğü için tarayıcı kullanmaz.

Bir istek, proxy'nin siteye ulaştığı ancak sayfanın bulunmadığı anlamına gelen HTTP 404 döndürürse veya o web sitesi için bilinen bir içerik işaretiyle birlikte HTTP 200–399 döndürürse başarılıdır; örneğin Amazon'da a-price-whole veya eBay'de x-item-title__mainTitle. Çok fazla JavaScript kullanan ve sabit bir işareti olmayan sitelerde, belirli bir boyutun altındaki yanıtlar başarısız sayılır.

Yanıt süresini, proxy isteği aldığı andan tam sayfa içeriğini teslim ettiği ana kadar ölçüyoruz. Yalnızca başarılı düz HTTP isteklerini sayıyoruz. Günlük raporlanan değer medyandır.

SSS'ler

Bu benchmarkı kaynak gösterin

Yayınlayacağınız yere uygun formatı seçin. Bağlantılı sürümü CMS'inize yapıştırmak, geri bağlantıyı korur.

@misc{karatas2026,
  author = {Karatas, Gulbahar},
  title  = {{Web Kazıma için Proxy'ler: Residential, Datacenter ve Unblocker Karşılaştırması}},
  year   = {2026},
  month  = oct,
  howpublished    = {\url{https://aimultiple.com/proxy-for-scraping}},
  note   = {AIMultiple. Erişim tarihi: 2 Ekim 2026}
}

Gulbahar Karatas

Sektör Analisti

Takip Et

Gülbahar, web verisi toplama, web verisinin uygulamaları ve uygulama güvenliğine odaklanmış bir AIMultiple sektör analistidir.

Tam Profili Görüntüle

Yorum yapan ilk kişi olun

E-posta adresiniz yayınlanmayacak. Tüm alanlar gereklidir. Yorumlar orijinal dilinde bırakılır.

Ad

E-posta Adresi

Yorum

0/450

Yorumu Gönder