Proxys zum Scraping von Bewertungen von Amazon, Google Reviews und Yelp: Ultimativer Leitfaden ohne Sperren

Sie starten die automatische Sammlung von Bewertungen von Amazon oder Google – und bereits nach 10-20 Anfragen erhalten Sie ein Captcha oder eine IP-Sperre. Kommt Ihnen das bekannt vor? Marktplätze und Bewertungsplattformen schützen sich aktiv gegen das Parsen: Sie erkennen Bots, sperren IP-Adressbereiche von Rechenzentren und verlangen die Lösung von Captchas. Aber mit den richtigen Proxys kann dieses Problem ein für alle Mal gelöst werden.

In diesem Leitfaden werden wir untersuchen, welcher Proxy-Typ für jede Plattform geeignet ist, wie man die IP-Rotation einrichtet, welche Tools ohne Programmierung verwendet werden können – und wie man letztendlich täglich Tausende von Bewertungen ohne Sperren sammeln kann.

Warum Amazon, Google und Yelp das Parsen von Bewertungen blockieren

Bevor Sie Proxys auswählen, ist es wichtig zu verstehen: Warum gibt es überhaupt Sperren? Es liegt nicht nur daran, dass die Plattformen „nicht bereit sind, Daten zu teilen“. Sie haben spezifische technische Schutzmechanismen, die es zu umgehen gilt.

Zu viele Anfragen von einer IP. Wenn eine normale Person Bewertungen auf Amazon durchblättert, macht sie 2-5 Anfragen pro Minute. Ein Parser – Hunderte. Das System erkennt anomale Aktivitäten und sperrt die IP. Das ist der häufigste Grund für Sperren bei der Datensammlung.

IP-Adressen von Rechenzentren auf schwarzen Listen. Amazon, Google und Yelp haben schon lange IP-Bereiche großer Cloud-Anbieter wie AWS, Google Cloud, DigitalOcean und Hetzner auf ihre Sperrliste gesetzt. Wenn Sie billige Rechenzentrums-Proxys mit „sichtbaren“ Adressen verwenden, werden Sie noch vor der ersten Anfrage gesperrt.

Fingerprint-Analyse von Browsern und Headern. Moderne Schutzsysteme (Cloudflare, PerimeterX, DataDome) analysieren nicht nur die IP, sondern auch die HTTP-Header, User-Agent, Mausverhalten und die Reihenfolge der Anfragen. Wenn die Header einen Bot verraten, ist eine Sperre unvermeidlich.

Geolokalisierungsbeschränkungen. Einige Bewertungen auf Amazon sind nur für Benutzer aus bestimmten Ländern sichtbar. Zum Beispiel sind Bewertungen auf amazon.de aus Deutschland anders sichtbar als aus Russland. Für eine korrekte Datensammlung sind Proxys mit der richtigen Geolokalisierung erforderlich.

Captcha und JS-Herausforderungen. Google verwendet besonders aktiv reCAPTCHA. Yelp verwendet JS-Überprüfungen, die einfache HTTP-Anfragen nicht bestehen. Diese Mechanismen erfordern entweder die Verwendung von Browser-Tools oder speziellen Diensten zur Lösung von Captchas.

Welche Proxy-Typen gibt es und was ist für das Parsen von Bewertungen geeignet

Nicht alle Proxys sind gleich nützlich für die Sammlung von Bewertungen. Lassen Sie uns drei Haupttypen und ihre Anwendbarkeit für diese Aufgabe untersuchen.

Rechenzentrums-Proxys (Datacenter Proxies)

Dies sind IP-Adressen, die Serverunternehmen gehören. Sie sind schnell, günstig und eignen sich gut für Aufgaben, bei denen Geschwindigkeit wichtiger ist als Anonymität. Für das Parsen von Bewertungen auf Amazon oder Google funktionieren sie jedoch schlecht: Die meisten dieser IPs sind bereits auf schwarzen Listen. Sie können einige Seiten sammeln, aber schnell eine Sperre oder ein Captcha erhalten.

Rechenzentrums-Proxys sind nur für das Testen des Parsers oder für Plattformen mit minimalem Schutz gerechtfertigt – zum Beispiel für kleine regionale Bewertungsseiten.

Residential Proxys (Residential Proxies)

Dies sind IP-Adressen von echten Haushaltsbenutzern. Aus Sicht von Amazon oder Google ist dies eine normale Person mit einem Heim-Internetanschluss. Solche Proxys gelangen praktisch nie auf schwarze Listen, da ihre IPs ständig wechseln und zu echten Geräten gehören.

Residential Proxys sind die optimale Wahl für das Parsen von Bewertungen auf Amazon, Yelp und den meisten Plattformen mit moderatem Schutz. Sie ermöglichen Anfragen mit der benötigten Geolokalisierung (Land, Stadt), was entscheidend für den Erhalt lokaler Bewertungen ist.

Mobile Proxys (Mobile Proxies)

IP-Adressen von Mobilfunkanbietern (4G/5G). Dies ist der „vertrauenswürdigste“ Traffic-Typ für jede Plattform: Mobile IPs werden selten blockiert, da hinter einer IP Hunderte von echten Benutzern (NAT von Mobilfunkanbietern) stehen können. Google ist besonders wohlwollend gegenüber mobilen Adressen.

Mobile Proxys sind unverzichtbar für das Parsen von Google Reviews und Yelp, wo der Schutz vor Bots besonders aggressiv ist. Sie sind teurer als Residential Proxys, bieten jedoch den höchsten Prozentsatz erfolgreicher Anfragen ohne Captcha.

Parsen von Amazon-Bewertungen: Besonderheiten und Proxy-Einstellungen

Amazon ist eine der schwierigsten Websites zum Parsen. Das Unternehmen verwendet mehrere Schutzebenen gleichzeitig: Verhaltensanalyse, Header-Überprüfung, Geolokalisierung und ein aggressives Captcha-System. Dennoch sammeln täglich Tausende von Marketers und Analysten Bewertungen von Amazon – sie tun es einfach richtig.

Was für erfolgreiches Parsen von Amazon Reviews benötigt wird

Hier sind die minimalen Bedingungen, unter denen das Parsen stabil funktioniert:

• Residential oder Mobile Proxys mit der Geolokalisierung des benötigten Landes (US für amazon.com, DE für amazon.de)
• IP-Rotation – mindestens alle 10-30 Anfragen
• Richtiger User-Agent – Nachahmung eines echten Browsers (Chrome, Firefox)
• Verzögerungen zwischen Anfragen – 2-5 Sekunden, um nicht wie ein Bot auszusehen
• Cookies-Sitzung – Amazon reagiert besser auf Anfragen mit gespeicherten Cookies

Schritt-für-Schritt-Einrichtung für Amazon

Schritt 1. Wählen Sie Residential Proxys mit der Geolokalisierung des benötigten Landes. Für amazon.com – USA, für amazon.co.uk – Großbritannien. Das ist wichtig: Amazon zeigt unterschiedliche Bewertungen für Benutzer aus verschiedenen Ländern an.

Schritt 2. Richten Sie die Rotation ein. Wenn Sie einen fertigen Parser verwenden (z. B. Octoparse oder ParseHub), geben Sie die Proxys in den Verbindungseinstellungen an. Die meisten dieser Tools unterstützen eine Liste von Proxys mit automatischer Rotation.

Schritt 3. Stellen Sie Verzögerungen zwischen den Anfragen ein. In Octoparse geschieht dies im Abschnitt „Delay Settings“ – stellen Sie einen zufälligen Zeitraum von 2 bis 6 Sekunden ein.

Schritt 4. Führen Sie einen Test auf 50-100 Seiten durch. Wenn das Captcha häufiger als in 5% der Fälle erscheint, erhöhen Sie die Verzögerung oder wechseln Sie den Proxy-Pool.

Schritt 5. Skalieren Sie. Nach einem erfolgreichen Test können Sie mit der Sammlung von Tausenden von Bewertungen beginnen. Ein guter Pool von Residential Proxys ermöglicht es, 5000-10000 Bewertungen pro Tag ohne Sperren zu sammeln.

Sammlung von Google Reviews: Was wichtig ist zu wissen

Google Reviews – Bewertungen in Google Maps und Google Business Profile – sind eine wertvolle Datenquelle für Marketer, SEO-Spezialisten und Analysten. Aber Google schützt seine Daten besonders aggressiv: reCAPTCHA v3, Verhaltensanalyse, Überprüfung des Browser-Fingerprints.

Die größte Schwierigkeit: Google Reviews werden nicht über einfache HTTP-Anfragen geladen. Die Bewertungen werden dynamisch über JavaScript geladen. Das bedeutet, dass ein einfacher HTTP-Parser nicht funktioniert – es wird ein Tool benötigt, das JavaScript rendern kann (Browser-Parser).

Wie man Google Reviews richtig sammelt

Option 1: Fertige Dienste. Tools wie Outscraper, Apify (Google Maps Scraper Actor) oder PhantomBuster können Google Reviews über die Browser-Engine sammeln. Sie müssen nur die URL oder den Namen des Unternehmens angeben und die Proxys anschließen.

Option 2: Octoparse im Browser-Modus. Octoparse unterstützt den Browser-Rendering-Modus. Geben Sie in den Einstellungen Residential oder Mobile Proxys an – und das Tool wird die Bewertungen wie ein echter Benutzer sammeln.

Option 3: Google Places API. Der offizielle Weg ist die Verwendung der Google Places API. Sie bietet bis zu 5 Bewertungen pro Unternehmen kostenlos, aber für größere Mengen ist eine Bezahlung erforderlich. Dafür gibt es keine Sperren und Proxys sind nicht nötig.

Warum für Google mobile Proxys benötigt werden

Google ist der Schöpfer von reCAPTCHA und einer der führenden Anbieter im Bereich Bot-Erkennung. Residential Proxys funktionieren, aber mobile IPs liefern deutlich bessere Ergebnisse. Der Grund ist einfach: Google selbst ist eine mobile Plattform und vertraut dem mobilen Traffic. Anfragen von mobilen IPs lösen seltener Captchas aus und unterliegen seltener der Verhaltensanalyse.

Für die großflächige Sammlung von Google Reviews (Tausende von Unternehmen pro Tag) wird empfohlen, rotierende mobile Proxys mit der Geolokalisierung der benötigten Stadt oder Region zu verwenden. So werden die Bewertungen maximal relevant für die lokale Suche sein.

Parsen von Yelp ohne Sperren: Schritt-für-Schritt-Anleitung

Yelp ist die größte Bewertungsplattform in den USA. Für Marketer, die auf dem amerikanischen Markt tätig sind, ist dies eine unverzichtbare Datenquelle über Wettbewerber, Kundenstimmungen und Trends in der Nische. Yelp zu parsen ist schwieriger, als es auf den ersten Blick scheint: Die Plattform verwendet Cloudflare und ein eigenes Bot-Schutzsystem.

Besonderheiten des Yelp-Schutzes

• Cloudflare Bot Management – analysiert Verhalten und Fingerprints
• Anfragebeschränkung: mehr als 30-50 Anfragen pro Minute von einer IP – Sperre
• JavaScript-Überprüfungen beim ersten Besuch
• Einige Bewertungen sind verborgen („filtered reviews“) und nur für angemeldete Benutzer zugänglich

Schritt-für-Schritt-Anleitung für Yelp

Schritt 1. Wählen Sie ein Tool mit Cloudflare-Unterstützung. Normale Parser kommen nicht durch Cloudflare. Verwenden Sie Apify (Yelp Scraper Actor), Bright Data Scraping Browser oder PhantomBuster – sie können JS-Überprüfungen umgehen.

Schritt 2. Schließen Sie Residential Proxys mit Geolokalisierung in den USA an. Yelp ist auf den amerikanischen Markt ausgerichtet. Proxys mit amerikanischen IPs bieten maximalen Zugang zu Daten und minimieren die Anzahl der Sperren.

Schritt 3. Richten Sie die Rotation alle 5-10 Anfragen ein. Yelp ist sehr empfindlich gegenüber der Anfragefrequenz. Die Rotation der IPs alle 5-10 Seiten ist eine Voraussetzung für eine stabile Funktion.

Schritt 4. Fügen Sie Verzögerungen von 3-8 Sekunden zwischen den Anfragen hinzu. Zufällige Verzögerungen ahmen das Verhalten eines echten Benutzers nach und verringern erheblich das Risiko einer Sperre.

Schritt 5. Verwenden Sie die Yelp Fusion API für einen Teil der Daten. Yelp bietet eine offizielle API mit Zugang zu grundlegenden Geschäftsdaten und Bewertungen. Für kleine Mengen ist dies der einfachste Weg ohne Risiko von Sperren.

Tools zur Sammlung von Bewertungen ohne Programmierung

Gute Nachrichten: Für das Parsen von Bewertungen müssen Sie kein Programmierer sein. Es gibt fertige Tools mit einer visuellen Oberfläche, die die Verbindung von Proxys und die automatische Rotation von IPs unterstützen. Lassen Sie uns die beliebtesten von ihnen untersuchen.

Wie man Proxys in Octoparse anschließt (Schritt-für-Schritt)

Octoparse ist eines der beliebtesten Tools unter Marketers ohne technischen Hintergrund. So schließen Sie Proxys an:

1. Öffnen Sie Octoparse → gehen Sie zu Settings → Proxy Settings
2. Wählen Sie „Use custom proxy“
3. Fügen Sie die Proxy-Liste im Format ip:port:login:password ein
4. Aktivieren Sie „Auto rotate proxy“ – das Tool wird die IP automatisch wechseln
5. Klicken Sie auf „Test proxy“ – stellen Sie sicher, dass alle Proxys funktionieren
6. Starten Sie die Aufgabe im normalen Modus

Wie man Proxys in Apify anschließt

1. Gehen Sie zu apify.com → wählen Sie den benötigten Akteur (z. B. „Amazon Reviews Scraper“)
2. Im Abschnitt „Input“ finden Sie das Feld „Proxy configuration“
3. Wählen Sie „Custom proxies“ und fügen Sie die Daten Ihrer Proxys ein
4. Geben Sie die URLs der Bewertungsseiten oder ASIN-Codes der Produkte (für Amazon) an
5. Klicken Sie auf „Start“ – die Ergebnisse sind im JSON- oder Excel-Format verfügbar

Proxy-Rotation und Regeln für sicheres Parsen von Bewertungen

Selbst die besten Proxys helfen nicht, wenn die Regeln für sicheres Parsen nicht beachtet werden. Plattformen analysieren Verhaltensmuster, und ein falsches Anfrage-Muster kann zur Sperre des gesamten IP-Pools führen.

Regel 1: Rotieren Sie IPs regelmäßig

Für Amazon wird empfohlen, die IP alle 10-20 Anfragen zu wechseln. Für Google – alle 5-10. Für Yelp – alle 5-8. Wenn Sie sessionale Proxys (sticky sessions) verwenden, stellen Sie sicher, dass die Sitzung 10-15 Minuten nicht überschreitet – danach sollten Sie eine neue IP anfordern.

Regel 2: Imitieren Sie reales Verhalten

Ein echter Benutzer macht keine Anfragen mit perfekten Intervallen von 2 Sekunden. Fügen Sie zufällige Verzögerungen hinzu: von 1 bis 8 Sekunden. Machen Sie manchmal Pausen von 30-60 Sekunden – als ob eine Person die Seite liest. Dies verringert erheblich die Wahrscheinlichkeit der Erkennung.

Regel 3: Verwenden Sie aktuelle User-Agents

Der User-Agent sollte einem echten Browser entsprechen. Veraltete Versionen von Chrome oder Firefox erwecken sofort Verdacht. Aktualisieren Sie den User-Agent mindestens einmal im Monat. Gute Parser (Octoparse, Apify) tun dies automatisch.

Regel 4: Parsen Sie nicht nachts (nach der lokalen Zeit der Plattform)

Schutzsysteme sind empfindlicher gegenüber verdächtigem Traffic in der Nacht. Wenn Sie Amazon US parsen, ist es besser, dies tagsüber nach amerikanischer Zeit (EST/PST) zu tun – wenn auf der Plattform viele echte Benutzer sind und Ihre Anfragen im allgemeinen Traffic „untergehen“.

Regel 5: Überwachen Sie den Prozentsatz erfolgreicher Anfragen

Ein guter Wert ist mehr als 95% erfolgreiche Anfragen ohne Captcha. Wenn der Prozentsatz unter 85% fällt – stimmt etwas nicht. Überprüfen Sie: Sind die Proxys veraltet, hat sich der Schutzalgorithmus geändert, muss der User-Agent aktualisiert oder die Verzögerungen erhöht werden?

Vergleich von Proxy-Typen für verschiedene Bewertungsplattformen

Unten finden Sie eine Zusammenfassungstabelle, die Ihnen hilft, den richtigen Proxy-Typ für eine bestimmte Aufgabe schnell auszuwählen. Orientieren Sie sich daran, wenn Sie das Parsen einrichten.

Warum Bewertungen gesammelt werden sollten: Anwendungsszenarien

Die automatische Sammlung von Bewertungen löst mehrere Geschäftsprobleme:

• Wettbewerbsanalyse. Sie sammeln Bewertungen zu Produkten von Wettbewerbern auf Amazon → finden Schwächen → nutzen sie in Ihrem Marketing
• Reputationsüberwachung. Sie verfolgen automatisch neue Bewertungen über Ihre Marke auf allen Plattformen
• Publikumsforschung. Sie analysieren Tausende von Bewertungen → identifizieren Muster → verbessern das Produkt
• SEO und Content. Sie sammeln Bewertungen für die semantische Analyse und identifizieren Schlüsselwörter, die echte Käufer verwenden
• Bewertungsaggregatoren. Sie erstellen Dienste, die Bewertungen von mehreren Plattformen für Unternehmen aggregieren

Parsen von Bewertungen auf russischen Marktplätzen

Wenn Ihr Geschäft auf den russischen Markt ausgerichtet ist, ist die Sammlung von Bewertungen von Wildberries, Ozon und Yandex.Market ebenfalls relevant. Diese Plattformen haben einen milderen Schutz im Vergleich zu Amazon, blockieren jedoch auch massenhaftes Parsen. Für sie sind Residential Proxys mit russischen IPs ausreichend – sie ermöglichen eine stabile Datensammlung ohne Captchas und Sperren.

Beliebte Tools für das Parsen von russischen Marktplätzen: Screaming Frog (mit Proxys), Octoparse sowie spezialisierte Dienste wie Moneyplace oder MPStats, die bereits Proxys in ihre Infrastruktur integriert haben.

Fazit: Wie man sofort mit dem Sammeln von Bewertungen ohne Sperren beginnt

Die automatische Sammlung von Bewertungen von Amazon, Google Reviews und Yelp ist ein leistungsstarkes Werkzeug für Marketer, Analysten und E-Commerce-Spezialisten. Das Hauptproblem sind die Sperren. Und die Hauptlösung ist der richtige Proxy-Typ in Kombination mit einer klugen Einrichtung der Rotation und Verzögerungen.

Kurz gesagt: Verwenden Sie für Amazon und Yelp Residential Proxys mit der Geolokalisierung des benötigten Landes. Für Google Reviews – mobile Proxys, sie bieten den höchsten Prozentsatz erfolgreicher Anfragen. Datacenter-Proxys sind für diese Aufgaben praktisch nutzlos – ihre IPs sind längst auf schwarzen Listen.

Von den No-Code-Tools sind Octoparse und Apify am besten geeignet – beide unterstützen die Verbindung externer Proxys und die automatische Rotation. Für Google Reviews sollten Sie auch Outscraper in Betracht ziehen – dies ist ein spezialisierter Dienst, der bereits für die Datensammlung von Google Maps optimiert ist.

Wenn Sie planen, regelmäßig Bewertungen von mehreren Plattformen zu sammeln, empfehlen wir, mit Residential Proxys zu beginnen – sie bieten das optimale Gleichgewicht zwischen Geschwindigkeit, Anonymität und Kosten und sind für die meisten Monitoring-Aufgaben geeignet. Für die Arbeit mit Google Reviews, wo der Schutz besonders aggressiv ist, sollten Sie mobile Proxys in Betracht ziehen – sie bieten den höchsten Prozentsatz erfolgreicher Anfragen ohne Captcha.