← Zurück zum Blog

Parsing von öffentlichen Aufträgen und Ausschreibungen weltweit: Warum Proxys notwendig sind und wie man einen Bann vermeidet

Detaillierte Analyse, warum staatliche Beschaffungsportale die automatische Datensammlung blockieren und welche Proxys für die Überwachung von Ausschreibungen in verschiedenen Ländern benötigt werden.

📅1. November 2026

Unternehmen, die Ausschreibungen in Russland, Kasachstan, den EU-Ländern und den USA überwachen, stehen früher oder später vor dem gleichen Problem: Das öffentliche Auftragsportal gibt plötzlich keine Daten mehr aus, es erscheint ein Captcha oder die IP-Adresse wird gesperrt. Dies geschieht, weil staatliche Plattformen aktiv gegen das automatisierte Sammeln von Informationen geschützt werden. Lassen Sie uns untersuchen, warum dies geschieht, welche Länder den Datenverkehr besonders streng filtern und welchen Proxy-Typ Sie für eine stabile Überwachung von Ausschreibungen wählen sollten.

Warum öffentliche Auftragsportale das Sammeln von Daten blockieren

Formell sind Informationen über öffentliche Aufträge in den meisten Ländern öffentlich — dies ist eine Anforderung des Gesetzes zur Transparenz der Haushaltsausgaben. Aber „öffentlich“ bedeutet nicht „für automatisiertes Sammeln in großem Maßstab zugänglich“. Plattformen wie das russische EIS (zakupki.gov.ru), das kasachische Portal goszakup.gov.kz, das europäische TED (Tenders Electronic Daily) oder das amerikanische SAM.gov sind für die manuelle Ansicht über einen Browser ausgelegt und nicht für Tausende von Anfragen pro Minute von Skripten.

Wenn von einer IP-Adresse anomale Aktivitäten ausgehen — Dutzende von Anfragen pro Sekunde, identischer User-Agent, keine Pausen zwischen den Klicks — erkennt das Schutzsystem (häufig Cloudflare, DataDome oder eine eigene Entwicklung der Behörde) dies als Bot. Danach sind drei Szenarien möglich: Anzeige eines Captchas, vorübergehende Sperrung der IP für 15-60 Minuten oder vollständiger Bann auf Subnetzebene. Für ein Unternehmen, das sein Geschäft auf der Überwachung von Ausschreibungen aufbaut, bedeutet jedes dieser Szenarien verpasste Aufträge und verlorenes Geld.

Eine zusätzliche Schwierigkeit besteht darin, dass viele Ausschreibungsplattformen eine Authentifizierung über eine elektronische Signatur (E-Signatur) erfordern oder Daten nur nach Bestehen einer JavaScript-Überprüfung des Browsers bereitstellen. Das bedeutet, dass es nicht ausreicht, einfach die IP zu wechseln — es ist notwendig, das Verhalten eines echten Nutzers mit einer echten Browserumgebung zu simulieren.

Offene Daten nach Ländern: Wo das Sammeln am schwierigsten ist

Das Schutzniveau und die Verfügbarkeit von APIs variieren stark je nach Land. Lassen Sie uns die wichtigsten Jurisdiktionen untersuchen, mit denen Analysten für öffentliche Aufträge und Ausschreibungsspezialisten am häufigsten arbeiten.

Land / Region Portal Schutzniveau Besonderheiten
Russland zakupki.gov.ru, B2B-Center Mittel-Hoch Es gibt eine offizielle API, aber mit Limits und Registrierung
Kasachstan goszakup.gov.kz Mittel Häufige Timeouts bei hohem Anfragevolumen
Europäische Union TED (ted.europa.eu) Niedrig-Mittel Offener Export in XML/CSV, aber Geo-Beschränkungen für einige Daten
USA SAM.gov Hoch Strenge Browserprüfung, Registrierung und API-Schlüssel erforderlich
Ukraine Prozorro Niedrig Vollständig offenes API, Proxys werden selten benötigt
Vereinigtes Königreich Contracts Finder, Find a Tender Mittel Geo-Blockierung von Anfragen außerhalb des Vereinigten Königreichs

Die wichtigste Erkenntnis aus der Tabelle: Selbst dort, wo es formal eine offene API gibt, gelten häufig Geo-Beschränkungen oder strenge Limits für die Anzahl der Anfragen von einer IP. Wenn Sie Daten aus dem Vereinigten Königreich sammeln, während Sie sich physisch in einem anderen Land befinden, kann die Anfrage bereits vor der Bot-Prüfung abgelehnt werden — einfach weil die IP nicht britisch ist. Hier beginnt die Rolle der Proxys: Sie ermöglichen es, Daten aus der gewünschten Geolokation abzufragen und die Last auf Dutzende von Adressen zu verteilen.

Welcher Proxy-Typ für Ausschreibungsplattformen benötigt wird

Für die Überwachung öffentlicher Aufträge gibt es keine universelle Lösung „ein Proxy-Typ für alle Fälle“. Die Wahl hängt davon ab, mit welcher Plattform Sie arbeiten und wie aggressiv deren Schutz ist.

Proxy-Typ Wann verwenden Blockierungsrisiko
Rechenzentrums-Proxys Portale mit offener API und schwachem Schutz (Prozorro, teilweise TED) Mittel — Rechenzentrums-IP sind manchmal bereits auf schwarzen Listen
Residential Proxys Plattformen mit Cloudflare/DataDome, Geo-Beschränkungen (SAM.gov, Contracts Finder) Niedrig — IP sehen aus wie normale Heimnutzer
Mobile Proxys Punktuelle Prüfung spezifischer Ausschreibungen, niedrige Anfragefrequenz Minimal, aber die Kosten für den Datenverkehr sind höher

In der Praxis verwenden die meisten Unternehmen, die Ausschreibungen gleichzeitig in mehreren Ländern überwachen, eine Kombination: Rechenzentrums-IP für Plattformen mit offener API und Residential Proxys dort, wo ernsthafter Schutz besteht oder eine genaue Geolokation erforderlich ist (zum Beispiel muss die Anfrage genau aus London und nicht aus einem beliebigen Punkt in Europa kommen). Residential Proxys sind besonders nützlich, wenn das Portal nicht nur die IP, sondern auch die Übereinstimmung mit der Zeitzone, der Sprache des Browsers und der Geolokation der Anfrage überprüft — eine Nichtübereinstimmung dieser Parameter zeigt sofort automatisierten Datenverkehr an.

Einrichtung des Datensammelns: Praktisches Schema

Für Analysten im Bereich öffentliche Aufträge, die keinen Code schreiben, aber den Prozess des Datensammelns über Auftragnehmer oder fertige Dienste steuern, ist es wichtig, die Logik der Einrichtung zu verstehen, auch ohne direkt mit Programmierung in Berührung zu kommen. Hier ist ein schrittweises Schema, das von Ausschreibungsabteilungen verwendet wird:

  1. Bestimmen Sie die Zielportale. Erstellen Sie eine Liste der Plattformen nach Ländern, die überwacht werden müssen, und überprüfen Sie, ob sie eine offizielle API haben — dies reduziert die Belastung der Proxys.
  2. Überprüfen Sie die Geo-Anforderungen. Wenn die Plattform Anfragen aus anderen Ländern blockiert (wie der britische Contracts Finder), berücksichtigen Sie im Budget Residential Proxys mit der erforderlichen Geolokation.
  3. Richten Sie die IP-Rotation ein. Für regelmäßiges Datensammeln (mehrmals täglich) ist ein automatischer IP-Wechsel alle 5-15 Minuten erforderlich, um die Anfrage-Limits von einer Adresse nicht zu überschreiten.
  4. Fügen Sie Pausen zwischen den Anfragen hinzu. Die Simulation menschlichen Verhaltens — Verzögerungen von 3-10 Sekunden zwischen den Seitenaufrufen — verringert die Wahrscheinlichkeit, dass Anti-Bot-Systeme ausgelöst werden.
  5. Überwachen Sie Captchas und Sperren. Richten Sie Benachrichtigungen über einen Anstieg der Captchas ein — dies ist ein Signal, dass der aktuelle IP-Pool „aufgewärmt“ ist und eine Rotation auf neue Adressen erforderlich ist.
  6. Speichern Sie die Anfragehistorie. Führen Sie ein Protokoll erfolgreicher und blockierter Anfragen für jedes Portal — dies hilft zu verstehen, welcher Proxy-Typ für eine bestimmte Plattform am besten funktioniert.

Praktischer Tipp:

Wenn Sie Ausschreibungen aus 3-4 Ländern gleichzeitig überwachen, versuchen Sie nicht, denselben IP-Pool für alle Plattformen zu verwenden. Teilen Sie die Proxys im Voraus nach Ländern auf — dies verringert das Risiko, dass eine Sperre auf einer Plattform die Reputation der IP für eine andere beeinträchtigt.

Werkzeuge zur Überwachung von Ausschreibungen

Unternehmen schreiben selten Parser von Grund auf neu — sie verwenden häufiger fertige Lösungen oder kombinieren mehrere Werkzeuge. Hier sind die Hauptkategorien, die für das Sammeln von Daten über öffentliche Aufträge verwendet werden:

  • Fertige Ausschreibungsparser — Dienste wie Tenderplan, Kontur.Öffentliche Aufträge, B2B-Center Monitoring — die Logik zum Umgehen von Captchas ist bereits integriert, aber die Anpassung an ein bestimmtes Portal kann Proxys für die Skalierung erfordern.
  • No-Code Parsing-Plattformen — Octoparse, ParseHub ermöglichen die Einrichtung des Datensammelns über eine visuelle Schnittstelle ohne Programmierung, mit Unterstützung für die Verbindung externer Proxys.
  • Anti-Detect-Browser — wenn das Datensammeln eine Authentifizierung auf der Plattform erfordert (z. B. ein persönliches Konto auf zakupki.gov.ru), helfen Tools wie Dolphin Anty oder AdsPower dabei, mehrere Konten parallel zu führen, jedes mit seinem eigenen Proxy und einem einzigartigen Browser-Fingerabdruck.
  • RSS- und E-Mail-Benachrichtigungen von den Portalen selbst — wo verfügbar (wie in Prozorro), verringert dies die Notwendigkeit für aktives Scraping und Proxys insgesamt.

Die Wahl des Werkzeugs hängt vom Umfang ab: Für die Überwachung von 1-2 Kategorien von Aufträgen in einem Land kann eine kostenlose RSS-Benachrichtigung ausreichen. Wenn es jedoch um die umfassende Überwachung von Ausschreibungen in 5-10 Ländern mit täglichen Aktualisierungen geht, kommt man ohne die Kombination von Parser + Proxy-Pool + IP-Rotation nicht aus.

Häufige Fehler beim Scraping von öffentlichen Aufträgen

Die meisten Blockierungen bei der Überwachung von Ausschreibungen erfolgen nicht aufgrund des Faktums des Datensammelns selbst, sondern aufgrund technischer Fehler in der Einrichtung. Hier sind die häufigsten Ursachen für einen Bann:

  • Zu hohe Anfragefrequenz. Der Versuch, das gesamte Register öffentlicher Aufträge in einer Sitzung mit maximaler Geschwindigkeit zu sammeln, endet fast immer mit einem Captcha oder einer vorübergehenden Sperrung der IP.
  • Verwendung derselben IP für mehrere Länder. Wenn eine Adresse sowohl auf das russische als auch auf das kasachische Portal in kurzer Zeit zugreift, sieht dies für beide Schutzsysteme verdächtig aus.
  • Ignorieren von User-Agent und Browser-Headern. Selbst mit einem guten Proxy kann eine Anfrage mit „leeren“ oder veralteten Browser-Headern als Bot erkannt werden.
  • Fehlende Rotation bei langfristiger Überwachung. Wenn das Datensammeln mehrere Stunden lang kontinuierlich von einer IP erfolgt, steigt die Wahrscheinlichkeit, in einen Bann zu geraten, exponentiell nach der ersten Stunde.
  • Missachtung der Geo-Übereinstimmung. Eine Anfrage an das britische Portal von einer IP aus den Niederlanden kann einmal durchgehen, aber bei regelmäßigen Zugriffen wird das System die Nichtübereinstimmung bemerken und eine Bestätigung verlangen.

Es ist wichtig, zwei Konzepte zu unterscheiden: die Rechtmäßigkeit des Zugangs zu Daten und die Einhaltung der technischen Nutzungsbedingungen des Portals (ToS). Informationen über öffentliche Aufträge sind in der überwiegenden Mehrheit der Länder gesetzlich öffentlich — dies ist eine Anforderung zur Transparenz der Verwendung öffentlicher Mittel. Ein bestimmtes Portal kann jedoch seine eigenen Regeln für den automatisierten Zugang festlegen: Anfrage-Limits, Registrierungspflicht für die API, Verbot des massenhaften Scraping ohne Genehmigung.

In der Praxis arbeiten die meisten Unternehmen, die sich mit Ausschreibungsanalysen beschäftigen, in einer Grauzone: Die Daten sind öffentlich und deren Sammlung verstößt nicht gegen das Gesetz über den Zugang zu Informationen, könnte jedoch formal den Nutzungsbedingungen des Portals widersprechen. Dies ist kein strafrechtlicher Verstoß, aber bei systematischem, aggressivem Scraping ohne Einhaltung angemessener Limits besteht das Risiko, dass IP-Adressen blockiert werden und sogar rechtliche Auseinandersetzungen mit der Portalverwaltung entstehen. Daher ist eine angemessene Rotation von IPs über Residential oder Rechenzentrums-Proxys nicht nur eine technische, sondern auch eine reputationsbezogene Entscheidung: Sie reduziert die Belastung der Portal-Infrastruktur und minimiert Konflikte.

Fazit

Die Überwachung öffentlicher Aufträge und Ausschreibungen in verschiedenen Ländern erfordert unterschiedliche Ansätze zum Schutz vor Blockierungen. Dort, wo eine offene API ohne strenge Limits existiert (Prozorro, teilweise TED), reicht eine grundlegende IP-Rotation aus. Für Plattformen mit ernsthaftem Schutz und Geo-Beschränkungen — SAM.gov, Contracts Finder, bestimmte Abschnitte des EIS — ist eine ernsthaftere Infrastruktur erforderlich: Residential Proxys mit der benötigten Geolokation, Pausen zwischen Anfragen und eine sorgfältige Simulation des Verhaltens eines echten Nutzers.

Wenn Sie gerade erst beginnen, ein System zur Überwachung von Ausschreibungen aufzubauen und planen, gleichzeitig mit mehreren Ländern zu arbeiten, ist es sinnvoll, mit Residential Proxys zu beginnen — sie bieten ein hohes Maß an Vertrauen seitens der Schutzsysteme der Portale und ermöglichen es, die benötigte Geolokation genau auszuwählen. Für weniger geschützte Plattformen mit offener API können Sie sparen, indem Sie Rechenzentrums-Proxys verwenden — sie sind schneller und günstiger, wo aggressive Schutzmaßnahmen fehlen.