Blog

Neueste Artikel und Einblicke über Proxies, Web Scraping und Internetinfrastruktur

Am 21. August 2026 berichtete DataDome: Bots generieren 91% des Traffics auf DDR5-Karten bei einem großen Einzelhändler – etwa zehn automatisierte Anfragen pro echtem Besuch, im Vergleich zu 6:1 im Frühling. Wir analysieren die Zahlen zusammen mit Vorbehalten, zeigen, warum die Verhaltenssignatur eines Scalper-Bots mit der Signatur einer normalen Preisüberwachung übereinstimmt und was sich bei der Datensammlung ändern sollte.

📅 24. August 2026
Artikel lesen

Firecrawl, Crawl4AI und Crawlee verwenden standardmäßig die IP Ihres Servers und laden die gesamte Seite herunter – mit Bildern, die in Markdown sowieso nicht angezeigt werden. Wir erklären, wo in jedem Tool der Proxy eingestellt wird, wie man die mehrstufige Eskalation (direkte Anfrage → Rechenzentrum → Wohnsitz) aktiviert und wie man den Mediendatenverkehr abschneidet, damit das Sammeln des Korpus für RAG nicht zu einer Rechnung für Gigabytes wird.

📅 22. August 2026
Artikel lesen