Rilevamento bot: 9 fornitori anti-bot messi a confronto

Abbiamo misurato il recupero dei contenuti su oltre 3.800 domini etichettati utilizzando tre servizi commerciali di scraping. Abbiamo raggruppato i risultati in base alle aziende anti-bot identificate su quei domini.

Quota di mercato anti-bot e tasso di blocco

Cloudflare è stato identificato nel 73,3% dei 3.859 domini etichettati. Il tasso di blocco per questo gruppo è stato del 6,7%. Imperva è stato identificato sul 3,7% dei domini, con un tasso di blocco del 46,6%. Le due misure classificano le nove aziende in ordini quasi opposti.

Metriche spiegate: Utilizziamo il tasso di blocco per la percentuale di tentativi che non hanno restituito il contenuto previsto, calcolata come media tra Bright Data, Zyte e Nimble a livelli di concorrenza di 5 e 100, con ogni dominio ponderato in modo uguale. Include errori come errori del parser, pagine mancanti e restrizioni geografiche, oltre alle sfide anti-bot. Le cifre relative alla quota descrivono i 3.859 domini etichettati in questo campione.

Entrambi i benchmark di origine sono pubblicati integralmente, il benchmark dello scraper e-commerce su 100 domini e-commerce e il benchmark del website unblocker sui primi 10.000 della classifica Tranco.

Fornitori anti-bot sui domini testati

Nove aziende sono state identificate su almeno 20 dei domini testati. Together rappresentano 3.829 dei 3.859 che siamo riusciti a etichettare.

Cloudflare distribuisce nel piano gratuito il rilevamento dei bot abilitato per impostazione predefinita. Una misurazione indipendente della classifica Tranco ha rilevato Cloudflare sul 14,5% dei primi 1.000 domini e sul 37,6% sull'intero milione, una diffusione che gli autori attribuiscono ai piani gratuito e a basso costo accessibili.¹ Il nostro campione web generale si colloca in quella lunga coda, quindi presenta la stessa concentrazione.

Altre dieci aziende sono comparse al di sotto della soglia dei 20 domini e non sono rappresentate nei grafici. Si tratta di Radware (9 domini), Sucuri (6), Queue-it (4), Kasada (3), Azion (2), Cequence Security (2) e di singoli domini che eseguono le difese interne di Google Cloud Armor, Naver, MercadoLibre e Instacart. Tre domini non hanno potuto essere etichettati e sono stati esclusi dall'analisi.

Block rate per fornitore anti-bot

I domini etichettati Imperva hanno registrato il tasso di blocco più elevato, pari al 46,6%, con un intervallo di confidenza al 95% compreso tra il 40,6% e il 52,6%. Anubis segue con il 35,7%, su un campione di 28 domini il cui intervallo va dal 22,6% al 49,4%. Questi intervalli si sovrappongono.

Block rate e intervalli di confidenza al 95%

Le quattro aziende in cima a questa tabella rappresentano il 7,8% del campione etichettato. Cloudflare e Akamai rappresentano insieme l'87,6% e hanno registrato tassi di blocco del 6,7% e del 10,7%.

Questi tassi riflettono la combinazione di impostazioni del sito, tipi di pagina e servizi di scraping presenti nel campione. Le scelte di implementazione non sono state controllate, quindi le differenze tra i gruppi di fornitori non possono essere attribuite esclusivamente ai prodotti.

Metriche spiegate: L'asse orizzontale rappresenta il tasso di blocco come definito sopra. L'asse verticale rappresenta la quota dei 3.859 domini etichettati attribuita a ciascuna azienda, su scala logaritmica perché l'intervallo va dallo 0,6% al 73,3%. Le bande ombreggiate indicano gli estremi superiore e inferiore dell'intervallo misurato del tasso di blocco.

Anubis è l'unica voce senza un fornitore alle spalle. È un reverse proxy open source che antepone a un sito una sfida proof-of-work, adottato in gran parte dall'infrastruttura open source sottoposta al carico dei crawler IA.² Le analisi pubblicate sostengono che l'approccio dovrebbe essere debole contro gli scraper determinati, perché la sfida viene calcolata in meno di due secondi e rimane valida per una settimana.³ Contro i tre unblocker commerciali di questo benchmark ha registrato il 35,7%.

L'ampiezza degli intervalli di confidenza riflette la dimensione del campione e la variazione dei risultati. Gli intervalli di Cloudflare sono ampi 1.1 punti su 2.829 domini. Quelli di Alibaba sono ampi 18.3 punti su 23. Le separazioni nella parte centrale della tabella non sono dimostrate.

Block rate sui domini e-commerce e web generali

I domini etichettati Akamai hanno registrato un tasso di blocco del 33,1% nel campione e-commerce e del 8,9% nel campione web generale, con un fattore di 3.7. I due campioni contenevano 42 e 503 domini. I domini etichettati Cloudflare hanno registrato il 30,0% e il 6,6% su 16 e 2.779 domini.

I due dati di HUMAN distano 2.9 punti. Tutte le altre aziende in questa tabella si sono spostate di almeno 8 punti tra i due insiemi. Imperva va nella direzione opposta, con il 47,1% sul web generale contro il 13,5% su due domini e-commerce, un campione troppo piccolo per un confronto.

Le colonne e-commerce e web generale derivano da tipi di pagina diversi. Il benchmark e-commerce ha richiesto pagine di prodotto e di ricerca sui siti retail. Il benchmark web generale ha richiesto una pagina per dominio da un ampio pool di URL.

Analisi dei fornitori anti-bot

1. Cloudflare

Cloudflare assegna un punteggio a ogni richiesta su una scala da 1 a 99, con punteggi inferiori a 30 documentati come soglia bot, ed espone tale punteggio come campo su cui i clienti scrivono regole firewall.⁴ Il punteggio completo, le impronte JA3 e JA4 e gli ID di rilevamento sono inclusi nel componente aggiuntivo Enterprise Bot Management. I piani inferiori dispongono della Bot Fight Mode, che la documentazione di Cloudflare descrive come dotata di un controllo limitato e senza alcun modo di saltarla tramite regole firewall personalizzate.⁵

Misurato:

• 6,7% tasso di blocco su 2.829 domini
• 73,3% dei domini testati, la base installata più ampia del set

2. Akamai

Akamai vende Bot Manager nei livelli Standard e Premier e include Premier in Account Protector, il suo prodotto contro gli abusi sugli account.⁶ Le sue pagine di blocco non presentano alcuna firma del fornitore, motivo per cui le indagini basate sulle firme lo sottostimano e per cui la nostra etichettatura ha collocato Akamai in un livello di evidenza più debole rispetto ai fornitori che si identificano. I recensori su due siti segnalano lo stesso onere di messa a punto con parole quasi identiche, descrivendo molti falsi positivi senza un'attenta calibrazione e un lungo elenco di eccezioni tra i team.⁷

Misurato:

• 10,7% tasso di blocco su 552 domini
• 33,1% sull'e-commerce contro il 8,9% sulle pagine web generali

3. Imperva

Imperva vende Advanced Bot Protection come modulo della sua piattaforma di sicurezza applicativa, basato sulla tecnologia Distil Networks acquisita nel giugno 2019.⁸ Thales ha completato l'acquisizione di Imperva per circa $3,6 miliardi nel dicembre 2023 e la documentazione del prodotto è ora ospitata sui domini Thales.⁹ Imperva inoltra il proprio rilevamento tramite proxy su domini di prima parte o lo esegue lato server, quindi non lascia alcuno script di proprietà del fornitore che un'indagine possa contare.

Misurato:

• 46,6% tasso di blocco su 142 domini
• 95% CI di 40,6% a 52,6%, sovrapposto all'intervallo di Anubis

4. DataDome

DataDome si implementa davanti al traffico web, mobile e API indipendentemente dalla CDN del cliente, con integrazioni predefinite per Cloudflare, Akamai, Fastly e AWS CloudFront, tra gli altri. Pubblica un tasso di falsi positivi inferiore allo 0,01%, descritto come meno di un essere umano che vede una sfida ogni 10.000 richieste servite.¹⁰ Forrester l'ha nominata Leader nel Bot and Agent Trust Management Software Wave nel giugno 2026.¹¹

Misurato:

• 16,0% tasso di blocco su 92 domini
• 23,6% su 6 domini e-commerce contro il 15,5% su 85 domini web generali

5. AWS WAF Bot Control

AWS WAF Bot Control viene eseguito come gruppo di regole gestite all'interno di AWS WAF, suddiviso in Common Bot Control per i bot che si autoidentificano e Targeted Bot Control per l'automazione evasiva.¹² È facoltativo e a pagamento. I suoi 10 domini e-commerce sono tutte versioni locali di Amazon, quindi quella colonna rappresenta l'implementazione di un singolo rivenditore sui siti regionali.

Misurato:

• 11,2% tasso di blocco su 69 domini
• 28,9% su 10 domini e-commerce, tutte versioni locali di Amazon, contro il 8,2% su 59 domini web generali

6. F5

F5 vende Distributed Cloud Bot Defense, basato su Shape Security, che F5 ha acquisito per circa 1 miliardo di dollari in contanti nel dicembre 2019.¹³ Forrester l'ha valutato come Strong Performer nell'edizione 2024 della stessa Wave.¹⁴ Il nostro ciclo di etichettatura ha declassato il marker più comune di F5, un cookie TS seguito da esadecimale, a livello periferico dopo la verifica, poiché il bilanciamento del carico BIG-IP lascia lo stesso cookie senza alcun prodotto bot in uso. Nessuno dei 100 domini e-commerce aveva F5 come difesa principale, quindi il suo dato si basa esclusivamente sulle pagine web generali.

Misurato:

• 7,4% tasso di blocco su 54 domini, tutti web generale

7. HUMAN

HUMAN vende Bot Defender all'interno della Human Defense Platform e serve i propri script di rilevamento da domini PerimeterX, l'azienda con cui si è fusa nel 2022. Forrester l'ha nominata Leader nella stessa Wave di giugno 2026.¹⁵

Misurato:

• 15,6% tasso di blocco su 40 domini
• 18,0% sull'e-commerce contro il 15,1% sul web generale, un divario di 2.9 punti

8. Anubis

Anubis è un software open source di Techaro che aggiunge una sfida proof-of-work davanti a un sito. Non ha alcun rapporto con fornitori, contratti di telemetria né costi per richiesta, e il suo file di policy definisce regole di allow, deny e challenge per ciascuna route.¹⁶ Un manutentore di Forgejo segnala che il costo di verifica lato server è minimo.¹⁷

Misurato:

• 35,7% tasso di blocco su 28 domini
• 95% CI di 22,6% a 49,4%, ampio 26.8 punti

9. Alibaba Cloud Anti-Bot Service

Alibaba Cloud Anti-Bot Service offre protezione bot tramite reverse proxy per il traffico web, H5 e mobile attraverso Alibaba Cloud WAF e DCDN, con un SDK JavaScript per i target browser.¹⁸ È commercializzato per operatori di e-commerce e annunci classificati, e i tre domini e-commerce che lo utilizzano hanno restituito il dato e-commerce più elevato del set, pari al 44,2%, su un campione troppo piccolo per un confronto con gli altri.

Misurato:

• 12,5% tasso di blocco su 23 domini
• 44,2% su 3 domini e-commerce contro il 6,9% su 17 domini web generali
• 95% CI di 4,2% a 22,5%, ampio 18.3 punti

Metodologia del benchmark anti-bot

Selezione dei domini

Il set unisce due benchmark di AIMultiple. Il benchmark dello scraper e-commerce ha contribuito con 100 domini recuperati su pagine di prodotto e di ricerca, mentre il benchmark del website unblocker ha contribuito con circa 10.000 URL web generali. Cinquanta domini compaiono in entrambi. L'unione è indicizzata per dominio, ottenendo 3.859 domini etichettati, di cui 3.812 sono stati misurati con il pannello completo di provider.

Rilevamento anti-bot

Abbiamo etichettato i domini e-commerce utilizzando tre canali di sonda. Due hanno utilizzato uno script Python personalizzato che chiamava curl. Uno utilizzava gli header predefiniti di curl. L'altro forniva uno User-Agent Chrome 138/macOS e header HTTP come Accept, Accept-Language, client hint e Sec-Fetch. Questa seconda modalità è stata descritta come simile a un browser. Salvava gli header di risposta e l'HTML senza avviare un browser né eseguire JavaScript. Abbiamo ispezionato gli header Set-Cookie e l'HTML alla ricerca di firme dei fornitori e riferimenti a script, compresi quelli presenti nelle risposte HTTP 200. Bright Data Web Unlocker ha fornito un terzo canale per i domini non accessibili localmente. I target includevano URL di prodotto e di ricerca campionati dal benchmark, più le homepage per il confronto. Queste sonde hanno identificato i fornitori. I dati sulle prestazioni provenivano dai benchmark di scraping separati.

Le etichette utilizzavano cookie, header, firme HTML e pagine di sfida specifiche del fornitore, con prove classificate per forza. I marker CDN generici da soli non erano sufficienti. Le pagine di diniego generiche del fornitore supportavano l'attribuzione aziendale ma non distinguevano i prodotti di gestione dei bot da altre regole di sicurezza. La verifica dei marker ambigui ha portato a correzioni, inclusa la riassegnazione della famiglia di cookie __uzm da Imperva a Radware su sette domini eBay.

Le etichette web generali sono arrivate con il dataset del benchmark come un elenco semplice di aziende per dominio, senza gradi di evidenza. Quando le due fonti divergevano, cosa avvenuta su 13 dei 50 domini condivisi, ha prevalso l'etichetta e-commerce con grado di evidenza. L'applicazione della regola opposta non sposta la quota di alcuna azienda di più di 0.1 punti.

I widget CAPTCHA sono stati esclusi, poiché reCAPTCHA e hCaptcha non dicono nulla su quale stack decida di bloccare. Le CDN pure sono state escluse per lo stesso motivo, poiché un 403 dietro CloudFront può essere una regola del sito stesso.

Block rate: misurazione

Block rate è 100 meno il tasso di successo medio di Bright Data, Zyte e Nimble, i tre provider comuni a entrambi i benchmark. Per successo si intende il recupero del contenuto previsto. Il tasso per dominio di ciascun provider è la media delle sue due esecuzioni di concorrenza, a 5 e 100. Ogni dominio riceve lo stesso peso, quindi un dominio recuperato 50 volte conta quanto uno recuperato una volta. Gli errori includono cause diverse dal blocco anti-bot confermato.

Oxylabs compare in entrambi i benchmark di origine ma è escluso qui, avendo abbandonato il set e-commerce pubblicato con un parser di prodotto rotto che ha restituito lo 0% sulle pagine di prodotto e il 100% sulla ricerca.

Intervalli di confidenza

Gli intervalli sono bootstrap a cluster di domini al 95% con 10.000 ricampionamenti. Ricampioniamo i domini all'interno di ciascun gruppo di fornitori perché le pagine di uno stesso dominio sono correlate. Questi intervalli descrivono la variazione tra i domini campionati. Non tengono conto degli errori sistematici di etichettatura né delle differenze nella configurazione dei siti.

Limiti

Le etichette dei fornitori identificano le aziende in base a firme osservabili. Non stabiliscono l'esatto livello di prodotto, la configurazione o la regola responsabile di una richiesta non riuscita. I gradi di evidenza erano disponibili per le etichette e-commerce. Le etichette web generali non disponevano di tali gradi, quindi la confidenza dell'attribuzione differisce tra le due fonti.

I siti differivano per contenuti e impostazioni di sicurezza, e ogni fornitore è stato osservato sui siti che lo utilizzavano. I risultati descrivono gli esiti del recupero per i servizi e i siti testati. Non isolano l'accuratezza del rilevamento dei bot a livello di prodotto né stabiliscono una classifica in configurazioni corrispondenti.

Non perderti i nostri benchmark e approfondimenti basati sui dati. Il pulsante apre Google; selezionare AIMultiple conferma che desideri vedere AIMultiple più spesso nei risultati di ricerca di Google.

Aggiungi come fonte preferita

FAQ

Ulteriori letture

• Scraper e-commerce: 5 provider messi a confronto
• I 5 migliori website unblocker messi a confronto e comparati
• Le sfide più comuni del web scraping nel 2026
• Soluzioni WAF: confronto basato su benchmark
• I migliori servizi di risoluzione CAPTCHA nel 2026
• Web scraping su larga scala: 7 provider messi a confronto

Cita questo benchmark

Scegli il formato adatto a dove pubblicherai. Incollare la versione con link nel tuo CMS preserva il backlink.

@misc{sari2026,
  author = {Sarı, Ekrem},
  title  = {{Rilevamento bot: 9 fornitori anti-bot messi a confronto}},
  year   = {2026},
  month  = aug,
  howpublished    = {\url{https://aimultiple.com/bot-detection-software}},
  note   = {AIMultiple. Consultato il 12 agosto 2026}
}

Collegamenti di riferimento

1.

Detecting Bot Detection: Prevalence, Techniques, and Implications for Web Measurement Research

2.

GitHub - TecharoHQ/anubis: Weighs the soul of incoming HTTP requests to stop AI crawlers · GitHub

3.

Ξ - Should Proof-of-Work be standardized for HTTP?

4.

Bot scores · Cloudflare bot solutions docs

Cloudflare

5.

Handle False Positives from Bot Fight Mode or Super Bot Fight Mode · Cloudflare bot solutions docs

Cloudflare

6.

Prevent account abuse

7.

Akamai Bot Manager Reviews from Real Users | TrustRadius

TrustRadius

8.

Imperva to Acquire Distil Networks, the Industry-Recognized Leader in Bot Management - Company

9.

Thales completes the acquisition of Imperva, creating a global leader in cybersecurity

Thales Group

10.

datadome.co

11.

DataDome Named a Leader in Top Analyst Report for Bot and Agent Trust Management, a New Category Defined by the Rise of AI Agents

Business Wire

12.

Optimizing costs for your bot control strategy - AWS Prescriptive Guidance

13.

F5 to Acquire Shape Security | F5

14.

F5 Named a Strong Performer in the Forrester Wave™: Bot Management Software, Q3 2024 Report | F5

15.

HUMAN recognized as a Leader in The Forrester Wave™ for Bot and Agent Trust Management Software - HUMAN Security

HUMAN Security

16.

Making sure you're not a bot!

17.

#319 - Anubis - using proof-of-work to stop excessive crawling - forgejo/discussions - Codeberg.org

18.

Create Web Protection Templates for Bot Management - Web Application Firewall - Alibaba Cloud

19.

Secure The Future Of Internet Traffic As Agents Take Over

Forrester

Ekrem Sarı

Ricercatore IA

Segui

Ekrem è un Ricercatore IA e Data Scientist presso AIMultiple. Progetta ed esegue benchmark pratici per sistemi di IA e LLM.

Visualizza il profilo completo

Sii il primo a commentare

Il tuo indirizzo email non verrà pubblicato. Tutti i campi sono obbligatori. I commenti vengono lasciati nella loro lingua originale.

Nome

Indirizzo e-mail

Commento

0/450

Pubblica un commento