Automatisierte Preisüberwachung von Wettbewerbern auf Wildberries, Ozon und anderen Websites ohne Sperren: Ultimativer Proxy-Leitfaden

Wenn Sie auf Marktplätzen verkaufen oder einen Online-Shop betreiben, wissen Sie: Die Preise der Wettbewerber ändern sich mehrmals am Tag. Manuelle Überwachung bedeutet verlorene Stunden und entgangenen Gewinn. Die automatische Datensammlung löst das Problem, aber Websites und Marktplätze blockieren aktiv Parser. In diesem Artikel erklären wir, wie Sie die Preisüberwachung so einrichten, dass Ihre Anfragen niemals entdeckt und blockiert werden.

Warum Websites die Preisüberwachung blockieren und wie sie Sie entdecken

Bevor Sie die Überwachung einrichten, ist es wichtig, die Logik des Schutzes seitens der Websites zu verstehen. Marktplätze und Online-Shops wissen genau, dass Wettbewerber ihre Preise überwachen wollen – und sie setzen aktiv Maßnahmen dagegen ein. Der Schutz funktioniert gleichzeitig auf mehreren Ebenen.

Analyse der Anfragerate

Ein normaler Käufer besucht die Produktseite alle paar Minuten oder Stunden. Ein Parser sendet Hunderte von Anfragen pro Minute von einer IP-Adresse. Antibot-Systeme (Cloudflare, Imperva, DataDome) bemerken sofort eine solche Anomalie und blockieren die IP. Aus diesem Grund ist es praktisch unmöglich, mit einer einzigen Adresse bei der automatischen Datensammlung zu arbeiten.

Überprüfung der IP-Zugehörigkeit

Jede IP-Adresse hat ihre eigene Geschichte und Zugehörigkeit. Adressen von Rechenzentren (AWS, Google Cloud, Hetzner) lassen sich leicht anhand von Datenbanken identifizieren – Websites wissen, dass von solchen Adressen Bots und Parser arbeiten, und blockieren sie sofort. Wohn-IP-Adressen – die von echten Heimnutzern stammen – erregen deutlich weniger Verdacht.

Verhaltensanalyse

Moderne Schutzsysteme analysieren nicht nur die IP, sondern auch das Verhalten: Scrollgeschwindigkeit, Mausbewegungen, Pausen zwischen Aktionen, Reihenfolge des Ladens von Seitenressourcen. Wenn die Anfragen strikt nach Zeitplan erfolgen, ohne zufällige Pausen – ist das ein Signal zur Blockierung.

Geolokationsbeschränkungen

Einige Plattformen zeigen unterschiedliche Preise je nach Region an. Wildberries kann beispielsweise unterschiedliche Preise für Moskau und Nowosibirsk anzeigen. Wenn Sie Preise für eine bestimmte Region überwachen, sollte Ihr Proxy eine IP genau dieser Region haben – andernfalls erhalten Sie irrelevante Daten.

Welche Proxys für die Preisüberwachung geeignet sind: Vergleich der Typen

Nicht alle Proxys sind gleich nützlich für die Preisüberwachung. Die Wahl hängt davon ab, welche Websites Sie überwachen, wie oft Sie Datenaktualisierungen benötigen und welches Budget Sie bereit sind auszugeben. Lassen Sie uns jeden Typ im Detail betrachten.

Residential Proxys – die optimale Wahl für die meisten Aufgaben

Residential Proxys verwenden IP-Adressen von echten Heimnutzern des Internets. Aus Sicht der Website wird sie von einem normalen Käufer aus einer Wohnung oder einem Büro angesprochen – keine Verdachtsmomente. Das macht sie ideal für die Überwachung auf Wildberries, Ozon, Avito und den meisten anderen Plattformen. Ein entscheidender Vorteil ist die Möglichkeit, die Geolokation auszuwählen: Sie können eine IP aus einer bestimmten Stadt oder Region Russlands erhalten, was für die genaue Überwachung regionaler Preise entscheidend ist.

Rotierende Residential Proxys ändern automatisch die IP-Adresse bei jeder Anfrage oder in festgelegten Intervallen. Das bedeutet, dass selbst wenn eine Adresse vorübergehend eingeschränkt wird, die nächste Anfrage von einer anderen IP gesendet wird – die Überwachung wird nicht unterbrochen.

Mobile Proxys – für die am stärksten geschützten Plattformen

Mobile IPs sind Adressen von Mobilfunkanbietern (MTS, Beeline, Megafon). Sie haben eine einzigartige Eigenschaft: Hinter einer mobilen IP können Tausende von echten Nutzern stehen (über NAT des Anbieters). Daher blockieren Websites mobile Adressen äußerst selten – das Risiko, echte Käufer zu treffen, ist zu hoch. Wenn Sie eine Plattform mit aggressivem Antibot-Schutz überwachen und Residential Proxys gelegentlich blockiert werden – wechseln Sie zu mobilen Proxys.

Rechenzentrums-Proxys – nur für einfache Aufgaben

Rechenzentrums-Proxys arbeiten schnell und sind günstig, aber sie lassen sich leicht erkennen. Die meisten ernsthaften Marktplätze blockieren sie innerhalb weniger Minuten intensiver Nutzung. Sie eignen sich für die Überwachung kleiner Online-Shops ohne ernsthaften Schutz oder für die vorläufige Testung von Parsing-Schemata.

Besonderheiten der Datensammlung auf Wildberries, Ozon, Avito und anderen Plattformen

Jede große Plattform hat ihre eigenen Schutzmerkmale. Das Verständnis dieser Merkmale ermöglicht es, die Überwachung richtig einzurichten und Ressourcen nicht umsonst zu verschwenden.

Wildberries

Wildberries ist einer der schwierigsten Marktplätze zum Parsen in Russland. Die Plattform verwendet aktiv dynamisches Laden von Inhalten über JavaScript, was bedeutet: Eine einfache HTTP-Anfrage gibt Ihnen keinen Preis – die Seite muss vollständig im Browser gerendert werden. Darüber hinaus ändert WB aktiv die Struktur der Seiten und API-Endpunkte, was die Parser bricht.

Für Wildberries sind rotierende Residential Proxys mit russischen IPs optimal. Die Anfragerate sollte nicht mehr als eine Anfrage alle 3–5 Sekunden pro IP betragen. Es ist auch wichtig, das Verhalten eines echten Nutzers zu imitieren: zufällige Pausen, korrekte Browser-Header (User-Agent, Accept-Language).

Ozon

Ozon verwendet ein Schutzsystem auf Basis von Cloudflare und eigene Antibot-Lösungen. Die Plattform analysiert den TLS-Fingerprint (digitale Fingerabdruck der Verbindung) – das bedeutet, dass selbst mit einem guten Proxy die Anfrage blockiert werden kann, wenn sie nicht wie eine Anfrage von einem echten Browser aussieht. Für Ozon wird empfohlen, Tools zu verwenden, die den Browser vollständig emulieren (headless Chrome, Playwright) und nicht einfache HTTP-Clients.

Avito

Avito hat einen moderaten Schutz, blockiert jedoch aktiv IPs von Rechenzentren. Residential Proxys mit russischen Adressen funktionieren stabil. Ein Merkmal von Avito ist die Regionalität: Preise und Anzeigen variieren stark zwischen den Städten. Wenn Sie Wettbewerber in einer bestimmten Region überwachen, verwenden Sie unbedingt Proxys mit IPs dieser Region, andernfalls sind die Daten irrelevant.

Yandex.Market und andere Aggregatoren

Yandex.Market verwendet ein fortschrittliches Bot-Erkennungssystem – kein Wunder, wenn man die Ressourcen des Unternehmens bedenkt. Die Plattform analysiert Verhalten, Anfragerate und Verbindungsmerkmale. Für eine stabile Überwachung sind rotierende Residential Proxys mit Pausen zwischen den Anfragen von mindestens 5–10 Sekunden erforderlich.

Fertige Tools zur Preisüberwachung ohne Code

Gute Nachrichten für diejenigen, die keinen Code schreiben: Es gibt fertige Dienste und Tools, die es ermöglichen, die Preisüberwachung von Wettbewerbern buchstäblich in wenigen Stunden einzurichten. Sie müssen nur Proxys anschließen und angeben, was genau überwacht werden soll.

Spezialisierte Preisüberwachungsdienste

Plattformen wie Priceva, Competera und ähnliche russische Dienste bieten eine fertige Lösung: Sie fügen die URLs der Seiten der Wettbewerber hinzu, legen den Prüfungszeitplan fest und erhalten Berichte im praktischen Format. Viele von ihnen unterstützen die Verbindung eigener Proxys – das ist wichtig, wenn Sie die Geolokation und die Qualität der IP-Adressen kontrollieren möchten.

No-Code-Parser: Octoparse, ParseHub, Apify

Octoparse und ParseHub sind visuelle Parser mit einer Drag-and-Drop-Oberfläche. Sie "klicken" buchstäblich auf die Elemente der Seite (Preis, Produktname, Verfügbarkeit), und das Tool versteht von selbst, wie sie extrahiert werden. Beide unterstützen die Verbindung von Proxys über das Standardformat host:port:login:password. Apify ist eine leistungsstärkere Plattform mit fertigen "Schauspielern" (Vorlagen) zum Parsen beliebter Websites, einschließlich Marktplätzen.

Google Tabellen + IMPORTXML/IMPORTHTML

Für einfache Aufgaben – die Überwachung von 10–20 Seiten ohne ernsthaften Schutz – können die integrierten Funktionen von Google Tabellen verwendet werden. IMPORTXML und IMPORTHTML ermöglichen es, Daten von Webseiten direkt in die Tabelle zu ziehen. Nachteil: Unterstützt keine Proxys und funktioniert nur mit einfachen statischen Seiten. Für Marktplätze ist diese Methode nicht geeignet.

Antidetect-Browser für manuelle Überwachung

Wenn Sie die Preise gelegentlich manuell aus verschiedenen Regionen überprüfen müssen – zum Beispiel sehen, wie Ihr Produkt für einen Käufer aus Jekaterinburg aussieht – werden Antidetect-Browser wie Dolphin Anty, AdsPower oder GoLogin ein praktisches Tool sein. Sie erstellen ein separates Browserprofil mit der gewünschten Geolokation, verbinden Proxys mit der IP der gewünschten Stadt und öffnen die Seite des Wettbewerbers. Jedes Profil sieht aus wie ein einzelner einzigartiger Benutzer.

Wie man Proxys für die Überwachung einrichtet: Schritt-für-Schritt-Anleitung

Lassen Sie uns die praktische Einrichtung am Beispiel der Verbindung von Proxys zu einem beliebten Überwachungstool durchgehen. Das Prinzip ist für die meisten No-Code-Lösungen gleich.

Schritt 1: Erhalten Sie die Proxy-Daten

Nach dem Kauf von Proxys erhalten Sie die Verbindungsdaten im Format: Host (IP oder Domain), Port, Benutzername und Passwort. Für rotierende Residential Proxys wird normalerweise ein Endpunkt bereitgestellt – die Adresse des Gateways, über das die IP bei jeder Anfrage automatisch gewechselt wird. Notieren Sie sich diese Daten – sie werden im nächsten Schritt benötigt.

Schritt 2: Wählen Sie das Protokoll – HTTP oder SOCKS5

Die meisten Parsing-Tools unterstützen beide Protokolle. HTTP-Proxys sind eine universelle Option, die mit jedem Tool funktioniert. SOCKS5 ist ein flexibleres Protokoll, das alle Arten von Datenverkehr unterstützt und die Verwendung von Proxys besser verbirgt. Für die Preisüberwachung empfehlen wir SOCKS5, wenn Ihr Tool es unterstützt.

Schritt 3: Einrichtung in Octoparse (Beispiel)

In Octoparse gehen Sie zu Settings → Proxy Settings. Wählen Sie den Modus Custom Proxy. Geben Sie die Daten Ihres Proxys ein: Host, Port, Benutzername, Passwort. Klicken Sie auf Test Connection – das Tool überprüft die Funktionsfähigkeit des Proxys und zeigt Ihre neue IP-Adresse an. Wenn der Test erfolgreich war – ist der Proxy verbunden. Jetzt werden alle Anfragen des Parsers über ihn gesendet.

Schritt 4: Richten Sie Rotation und Verzögerungen ein

Dies ist ein kritischer Schritt, den viele überspringen. Selbst mit einem guten Proxy wird aggressives Parsen entdeckt. Richten Sie die folgenden Parameter ein:

• Verzögerung zwischen Anfragen: mindestens 3–5 Sekunden für Wildberries und Ozon, 1–2 Sekunden für weniger geschützte Websites
• IP-Rotation: ändern Sie die IP alle 10–20 Anfragen oder alle 5–10 Minuten
• Zufällige Pausen: Verwenden Sie anstelle einer festen Verzögerung einen zufälligen Intervall (z. B. von 3 bis 8 Sekunden)
• User-Agent: Verwenden Sie aktuelle User-Agent-Strings von echten Browsern (Chrome, Firefox)

Schritt 5: Testen vor dem Start

Führen Sie vor dem Start der vollständigen Überwachung einen Test durch: Starten Sie das Parsen von 10–20 Seiten und überprüfen Sie, ob alle Daten korrekt gesammelt werden und ob es keine Blockierungen gibt. Wenn ein Teil der Anfragen den Fehler 403 (Zugriff verweigert) oder CAPTCHA zurückgibt – erhöhen Sie die Verzögerungen und überprüfen Sie die Rotationskonfiguration.

Häufige Fehler beim Parsen von Preisen und wie man sie vermeidet

Die meisten Probleme mit der Preisüberwachung entstehen durch dieselben Fehler. Lassen Sie uns die häufigsten davon betrachten.

Fehler 1: Verwendung einer einzigen IP für alle Anfragen

Selbst wenn Sie eine gute Residential IP haben – verwenden Sie sie nicht für Hunderte von Anfragen hintereinander. Jede IP, die zu viele Anfragen in kurzer Zeit sendet, wird blockiert. Verwenden Sie rotierende Proxys oder einen Pool aus mehreren IP-Adressen, um die Last zu verteilen.

Fehler 2: Ignorieren der Geolokation

Wenn Sie die Preise eines Wettbewerbers in Moskau überwachen und Proxys mit IPs aus Nowosibirsk oder sogar aus Deutschland verwenden – erhalten Sie falsche Daten. Auf Wildberries, Ozon und Avito hängen die Preise und Lieferbedingungen von der Region ab. Wählen Sie immer Proxys mit einer Geolokation, die Ihrer Aufgabe entspricht.

Fehler 3: Zu hohe Anfragerate

Der Wunsch, Daten so schnell wie möglich zu erhalten, führt dazu, dass der Parser Anfragen alle 0,1–0,5 Sekunden sendet. Eine solche Aktivität wird sofort entdeckt. Die Preise ändern sich nicht jede Sekunde – es reicht normalerweise aus, sie einmal pro Stunde oder sogar alle paar Stunden zu überprüfen. Reduzieren Sie die Frequenz – und die Stabilität der Überwachung wird erheblich steigen.

Fehler 4: Günstige Rechenzentrums-Proxys für komplexe Plattformen

Viele beginnen mit den billigsten Rechenzentrums-Proxys und wundern sich, warum Wildberries sie innerhalb von 5 Minuten blockiert. Für ernsthafte Marktplätze sind Residential oder mobile Proxys erforderlich. Das Sparen bei Proxys führt zu einem Verlust von Zeit im Kampf gegen Blockierungen.

Fehler 5: Fehlende Überwachung der Proxy-Funktionalität

Proxys können vorübergehend nicht funktionieren, hohe Latenzen haben oder Fehler zurückgeben. Wenn Sie dies nicht überwachen, kann die Überwachung stillschweigend "brechen" – die Daten hören auf, sich zu aktualisieren, und Sie erfahren erst nach mehreren Tagen davon. Richten Sie Alarme für Fehler in Ihrem Tool ein oder überprüfen Sie regelmäßig manuell die Aktualität der Daten.

Funktionierende Überwachungsschemata für verschiedene Aufgaben

Um das Rad nicht neu zu erfinden, lassen Sie uns spezifische Schemata für typische Aufgaben von Verkäufern und Marketern betrachten.

Schema 1: Überwachung der Wettbewerberpreise auf Wildberries – für Verkäufer

Aufgabe: Preise von 50–100 konkurrierenden Produkten auf Wildberries überwachen, Aktualisierung alle 2–4 Stunden.

Tools: Spezialisierter Dienst (Priceva oder ähnlich) oder Apify mit einem fertigen Schauspieler für WB.

Proxys: Rotierende Residential Proxys mit russischen IPs. Pool von 50 Adressen zur Lastverteilung.

Einstellungen: Verzögerung von 5–8 Sekunden zwischen Anfragen, zufälliger Intervall, IP-Rotation alle 15 Anfragen.

Ergebnis: Aktuelle Daten zu Wettbewerberpreisen alle 2–4 Stunden, automatische Alarme bei Preisänderungen von mehr als 5%.

Schema 2: Regionale Preisüberwachung auf Avito – für lokale Unternehmen

Aufgabe: Preise von Wettbewerbern auf Avito in einer bestimmten Stadt (z. B. Krasnodar) überwachen, Aktualisierung einmal täglich.

Tools: Octoparse oder ParseHub mit einem eingerichteten Template für Avito.

Proxys: Residential Proxys mit IPs einer bestimmten Stadt oder Region. Wichtig: Die IP muss der gewünschten Stadt entsprechen, um lokale Preise zu erhalten.

Einstellungen: Einmal täglich starten, Verzögerung von 3–5 Sekunden, statische IP (keine aggressive Rotation bei niedriger Frequenz erforderlich).

Ergebnis: Täglicher Bericht über Wettbewerberpreise in Ihrer Region, Export nach Excel oder Google Tabellen.

Schema 3: Überwachung von Werbeangeboten der Wettbewerber – für Marketer

Aufgabe: Aktionen, Rabatte und Sonderangebote der Wettbewerber auf ihren Websites und in Werbeanzeigen überwachen.

Tools: Kombination aus Parser (Apify) für Websites + Werbeüberwachungs-Tools zur Verfolgung von Anzeigen.

Proxys: Residential Proxys mit Geolokation des Zielmarktes. Wenn Sie Werbung für verschiedene Regionen überwachen – benötigen Sie Proxys aus mehreren Regionen gleichzeitig.

Einstellungen: Überprüfung 2–3 Mal täglich, IP-Rotation bei jeder neuen Sitzung.

Ergebnis: Aktuelle Informationen über die Marketingaktivitäten der Wettbewerber, Möglichkeit, schnell auf deren Aktionen zu reagieren.

Schema 4: Preisüberwachung auf ausländischen Marktplätzen – für Importeure

Aufgabe: Preise von Lieferanten und Wettbewerbern auf AliExpress, Amazon, eBay überwachen.

Tools: Apify mit fertigen Schauspielern für Amazon und AliExpress oder spezialisierte Überwachungsdienste.

Proxys: Residential Proxys mit IPs aus dem Land des Zielmarktplatzes (USA für Amazon, China oder USA für AliExpress). Das ist wichtig, da die Preise je nach Land des Besuchers variieren können.

Einstellungen: Aktualisierung alle 6–12 Stunden, Verzögerung von 5–10 Sekunden, IP-Rotation alle 20 Anfragen.

Fazit

Die automatische Überwachung der Wettbewerberpreise ist nicht nur eine Bequemlichkeit, sondern ein Wettbewerbsvorteil. Wenn Sie wissen, wie sich die Preise auf Wildberries, Ozon, Avito und anderen Plattformen ändern, können Sie schnell reagieren: den Preis bei Preisdumping senken, ihn in Zeiten hoher Nachfrage erhöhen, Aktionen zum richtigen Zeitpunkt starten. All dies hat direkten Einfluss auf den Umsatz und die Marge.

Der Schlüssel zur stabilen Überwachung sind die richtig ausgewählten Proxys und die durchdachte Konfiguration der Tools. Für die meisten russischen Marktplätze ist die optimale Wahl – rotierende Residential Proxys mit russischen IPs: Sie wirken wie echte Nutzer, unterstützen die Auswahl der Geolokation und werden nicht von aggressiven Antibot-Systemen blockiert.

Wenn Sie mit Plattformen arbeiten, die Parser besonders streng blockieren, oder maximale Stabilität benötigen – ziehen Sie mobile Proxys in Betracht: Sie werden extrem selten blockiert, da hinter einer mobilen IP Tausende von echten Nutzern stehen können.

Beginnen Sie klein: Richten Sie die Überwachung von 20–30 Schlüsselpositionen der Wettbewerber ein, testen Sie das Schema, stellen Sie die Stabilität der Daten sicher – und skalieren Sie dann. Eine richtig eingerichtete Preisüberwachung amortisiert sich bereits im ersten Monat der Arbeit.