Verifica se un IP e un User-Agent appartengono davvero a Googlebot, Bingbot, OpenAI SearchBot, Yahoo, Seznam, Meta (Facebook), Qwant, DuckDuckGo e altri crawler principali.
I feed JSON dei fornitori vengono memorizzati in cache per 12 ore; Yandex e Seznam utilizzano CIDR ufficiali statici.
La vera prova è l'indirizzo IP: un crawler è considerato affidabile solo quando il suo IP rientra nei range CIDR ufficiali pubblicati dal fornitore. Lo User-Agent può aiutare, ma è facile da falsificare; gli scraper spesso copiano le stringhe UA provenendo da reti casuali. Se l'IP non è nel range del fornitore, contrassegniamo la richiesta indipendentemente da ciò che dice lo UA.
Sì, le reti IPv4 e IPv6 sono completamente supportate.
Ogni richiesta dall'interfaccia demo dal vivo consuma lo stesso numero di crediti di una chiamata API diretta.