Zum Inhalt springen
ResearchResearchCrawler Profile

BUbiNG — What It Is and How to Handle It

BUbiNG is a high-performance open-source web crawler developed by the Laboratory for Web Algorithmics at the University of Milan, capable of crawling 10,000+ pages per second.

Type
Research
Centinel Analytica · 10. April 2026

BUbiNG is a high-performance open-source web crawler developed by the Laboratory for Web Algorithmics at the University of Milan, capable of crawling 10,000+ pages per second.

Operator: BUbiNG | Type: Research | Category: Research

BUbiNG is classified as research. Use Centinel to monitor its behavior and decide whether to allow, block, challenge, or monetize its access to your content.

Centinel automatically detects BUbiNG using behavioral fingerprinting. When detected, you can allow it, block it, challenge it with an interstitial page, or set a per-request licensing fee — all enforced in real-time with under 2ms latency.

Finden Sie heraus, was gerade auf Ihre Website zugreift

Buchen Sie eine 30-minütige Demo und wir führen ein Live-Audit Ihres Traffics durch, bevor Sie sich festlegen.

Keine Kreditkarte. Keine Verpflichtung. Nur ein klares Bild Ihres Traffics.

"Wir hatten keine Ahnung, dass 40 % unseres Traffics von KI-Crawlern stammte, bis Centinel es uns zeigte. Die Einrichtung dauerte fünfzehn Minuten und wir blockierten noch am selben Tag unautorisierte Scraper."

Head of Engineering

Series-B-SaaS-Unternehmen