Come monitorare il pricing dinamico dei concorrenti tramite proxy senza blocchi

La formazione dei prezzi dinamici è diventata uno standard sui marketplace: i prezzi cambiano 10-20 volte al giorno a seconda della domanda, delle scorte e delle azioni dei concorrenti. Se sei un venditore su Wildberries, Ozon o Avito, lo sai: chi per primo scopre una riduzione del prezzo di un concorrente mantiene la posizione nei risultati di ricerca. Ma tutti i marketplace bloccano severamente il parsing massivo da un singolo IP. In questo articolo vedremo come impostare il monitoraggio automatico dei prezzi tramite proxy, per raccogliere dati 24/7 senza rischiare il blocco dell'account o dell'indirizzo IP.

Perché i marketplace bloccano il parsing dei prezzi e come funziona

Tutti i grandi marketplace utilizzano una protezione multilivello contro la raccolta automatica dei dati. La ragione è semplice: il parsing massivo crea un carico sui server e offre un vantaggio competitivo a chi sa raccogliere dati. Wildberries, ad esempio, registra fino a 300.000 cambiamenti di prezzo al giorno — e non vuole che questi dati vengano forniti gratuitamente ai concorrenti.

Ecco come funziona un tipico sistema di protezione contro il parsing:

• Monitoraggio della frequenza delle richieste da un singolo IP — se apri 50+ schede di prodotti in un minuto, il sistema capisce che non sei un umano. Un normale acquirente visualizza 3-5 prodotti al minuto, un parser — 100-500.
• Analisi dell'User-Agent e delle intestazioni — le richieste senza intestazioni corrette del browser finiscono subito nella blacklist. Molti principianti utilizzano le librerie standard di Python requests senza impostare le intestazioni — questo è il primo elemento che i sistemi di protezione rilevano.
• Controllo di JavaScript e dei cookie — i moderni marketplace utilizzano Cloudflare, DataDome e i propri sistemi anti-bot. Controllano l'esecuzione di JavaScript, la presenza di cookie di sessione, il comportamento del mouse e lo scrolling.
• Geolocalizzazione dell'IP — se stai facendo parsing di Ozon russo con un IP dalla Germania o dagli Stati Uniti, appare sospetto. Il sistema può mostrarti prezzi obsoleti o addirittura bloccarti l'accesso.
• Blocco dei data center — la maggior parte dei marketplace mantiene database di indirizzi IP di fornitori di cloud (AWS, Google Cloud, Hetzner) e limita automaticamente le richieste provenienti da essi.

Il risultato del blocco può variare: da un limite di velocità temporaneo (rate limit) a un ban completo dell'IP per diverse settimane. Se stai facendo parsing tramite un account venditore — rischi di ricevere un blocco del tuo pannello personale, il che è critico per il business.

Quali tipi di proxy sono adatti per il monitoraggio dei prezzi: confronto

Per il monitoraggio della formazione dei prezzi dinamici sono adatti tre tipi di proxy, ognuno con i propri vantaggi e svantaggi. La scelta dipende dal budget, dal volume di parsing e dai requisiti geografici.

Raccomandazione pratica per la scelta:

• Per Wildberries e Ozon — solo proxy residenziali o mobili. Queste piattaforme utilizzano Cloudflare e i propri sistemi anti-bot, i data center vengono bloccati nel 90% dei casi.
• Per Yandex.Market — proxy residenziali con geografia russa, il sistema verifica la corrispondenza tra IP e regione di ricerca.
• Per Avito — è possibile utilizzare i data center, ma con rotazione e ritardi tra le richieste. La protezione è più debole rispetto ai marketplace.
• Per AliExpress e piattaforme internazionali — proxy residenziali del paese richiesto, molti mostrano prezzi diversi per diverse regioni.

Se il budget è limitato — inizia con un pool di 20-30 proxy residenziali con rotazione. Questo sarà sufficiente per monitorare 500-1000 prodotti al giorno senza blocchi.

Caratteristiche della protezione di Wildberries, Ozon, Yandex.Market e Avito

Ogni piattaforma utilizza la propria combinazione di meccanismi di protezione. Comprendere queste caratteristiche aiuta a configurare correttamente il parser fin dal primo tentativo.

Wildberries

La protezione più severa tra i marketplace russi. Utilizzano Cloudflare con la modalità "I'm Under Attack" attivata, che verifica la sfida JavaScript prima di accedere ai contenuti. Monitorano anche:

• Fingerprint del browser — canvas, WebGL, fonts, risoluzione dello schermo
• Fingerprint TLS — versione del protocollo e set di cipher suites
• Fattori comportamentali — velocità di scrolling, movimenti del mouse, tempo sulla pagina
• Storia della sessione — se inizi subito ad aprire schede di prodotti senza visualizzare la homepage e le categorie, appare sospetto

Cosa funziona: Browser headless (Puppeteer, Playwright) con proxy residenziali, emulazione del comportamento reale dell'utente, ritardi di 5-15 secondi tra le richieste, rotazione di User-Agent e proxy dopo ogni 20-30 richieste.

Ozon

Utilizzano un proprio sistema anti-bot più DataDome. Caratteristica: i prezzi possono variare a seconda della città di consegna — il sistema determina la regione dall'IP e mostra i prezzi corrispondenti tenendo conto della logistica.

Ozon blocca attivamente le gamme di IP dei data center noti. Durante il parsing tramite un normale VPS, nel 80% dei casi riceverai un captcha o un errore 403. Monitorano anche i cookie — se fai richieste senza mantenere la sessione tra le richieste, questo viene rilevato.

Cosa funziona: Proxy residenziali con geografia russa, obbligo di mantenere i cookie tra le richieste, simulazione dell'aggiunta di prodotti ai preferiti (questo crea una "storia" dell'utente), ritardi di 3-10 secondi.

Yandex.Market

Livello medio di protezione. La caratteristica principale è la severa geolocalizzazione. Se stai facendo parsing dei prezzi per Mosca con un IP da Vladivostok, il sistema mostrerà i prezzi per Vladivostok o bloccherà completamente l'accesso. Per un monitoraggio corretto sono necessari proxy proprio dalla regione i cui prezzi stai monitorando.

Yandex utilizza anche un proprio sistema anti-frode, che analizza la sequenza delle azioni. Appare sospetto: aprire schede di prodotti tramite link diretti senza ricerca, intervalli identici tra le richieste (ad esempio, rigorosamente ogni 5 secondi), assenza di richieste alla statica (immagini, stili).

Cosa funziona: Proxy residenziali della regione richiesta, emulazione dell'intero ciclo: ricerca → elenco di prodotti → scheda del prodotto, ritardi casuali di 4-12 secondi, rotazione periodica dei proxy.

Avito

La protezione più permissiva tra le piattaforme menzionate. La protezione principale è un limite sul numero di visualizzazioni degli annunci da un singolo IP (circa 100-150 annunci all'ora). Dopo aver superato il limite, viene mostrato un captcha o un blocco temporaneo di 1-2 ore.

Avito controlla anche la presenza di cookie e intestazioni di base, ma non utilizza sfide JavaScript complesse. I data center funzionano, ma con limitazioni — è necessaria la rotazione e una frequenza moderata delle richieste.

Cosa funziona: Anche i data center con rotazione, ritardi di 2-5 secondi tra gli annunci, intestazioni corrette del browser, mantenimento dei cookie. Per grandi volumi — proxy residenziali.

Impostazione della rotazione dei proxy per il parsing 24 ore su 24

La corretta rotazione dei proxy è un fattore chiave per un parsing stabile senza blocchi. Esistono tre strategie principali di rotazione, ognuna adatta a diversi scenari.

Strategia 1: Rotazione in base al numero di richieste

La sostanza: cambi proxy dopo un certo numero di richieste (ad esempio, dopo ogni 20-50 richieste). Questo è il metodo più semplice ed efficace per la maggior parte delle attività.

Valori raccomandati per diverse piattaforme:

• Wildberries: 15-25 richieste per un proxy, poi cambio
• Ozon: 20-30 richieste
• Yandex.Market: 30-50 richieste
• Avito: 50-100 richieste

Un'importante sfumatura: aggiungi randomizzazione. Non cambiare proxy rigorosamente dopo 20 richieste — fallo dopo 18-23 richieste in modo casuale. Questo rende il pattern meno prevedibile per i sistemi di protezione.

Strategia 2: Rotazione temporale

Cambi proxy ogni N minuti indipendentemente dal numero di richieste. Adatta per attività con carico imprevedibile — ad esempio, monitoraggio dei prezzi in tempo reale, quando il numero di aggiornamenti può variare drasticamente.

Intervalli raccomandati: 5-15 minuti per piattaforme rigide (Wildberries, Ozon), 15-30 minuti per piattaforme più permissive (Avito, piccoli negozi).

Strategia 3: Sticky sessions (sessioni sticky)

Utilizzi lo stesso proxy per tutte le richieste all'interno di una "sessione utente". Ad esempio: emuli un acquirente che è entrato in Ozon, ha cercato "laptop", ha aperto 5 schede di prodotti, ha aggiunto uno al carrello. Tutte queste azioni passano attraverso un proxy con mantenimento dei cookie.

Dopo il completamento della sessione (dopo 3-10 minuti) — cambi proxy e inizi una nuova sessione. Questo è il pattern più "umano", ma richiede più proxy ed è più difficile da implementare.

Quando utilizzare: Parsing di piattaforme con protezione molto severa, quando la semplice rotazione non funziona. Adatta anche per la raccolta di dati tramite pannelli personali di venditori.

Strumenti pronti per il monitoraggio dei prezzi con supporto proxy

Se non vuoi scrivere un parser da zero, ci sono soluzioni pronte con supporto proxy integrato. Esaminiamo gli strumenti più popolari per il monitoraggio dei prezzi sui marketplace russi e internazionali.

Per i marketplace russi

1. Mpstats (mpstats.io)
Servizio specializzato per l'analisi di Wildberries e Ozon. Raccoglie dati sulle vendite, scorte, prezzi dei concorrenti. Ha un'API per l'integrazione con sistemi propri. Il servizio funziona tramite la propria infrastruttura proxy, non è necessario configurare nulla di aggiuntivo.

Svantaggio: costo elevato (da 15.000 rubli/mese per accesso completo), non è possibile utilizzare i propri proxy. Adatto per grandi venditori con un fatturato di 1-2 milioni di rubli/mese.

2. Sellego
Servizio simile con focus sull'automazione della formazione dei prezzi. Monitora i prezzi dei concorrenti e regola automaticamente i tuoi prezzi secondo regole stabilite (ad esempio, "essere il 5% più economico del concorrente"). Funziona anche tramite proxy propri.

3. Parsehub
Costruttore visivo di parser senza codice. Clicchi sugli elementi della pagina che desideri raccogliere e il servizio crea automaticamente il parser. Supporta i proxy — puoi aggiungere la tua lista nelle impostazioni del progetto. Adatto per chi non sa programmare affatto.

Costo: piano gratuito — 200 pagine al mese, piani a pagamento — da $149/mese per 10.000 pagine. Per monitorare 100-200 prodotti, il piano gratuito è sufficiente.

Per sviluppo autonomo

Se sei pronto a configurare il parser autonomamente o hai un programmatore nel team:

1. Scrapy (Python)
Potente framework per il parsing con supporto proxy integrato, rotazione, gestione degli errori. Ha middleware per il cambio automatico dei proxy da una lista. Richiede conoscenza di Python, ma la documentazione è eccellente.

Adatto per il parsing di siti semplici senza JavaScript. Per Wildberries e Ozon è necessario combinare con Splash o Selenium per la gestione di JavaScript.

2. Puppeteer / Playwright (JavaScript)
Browser headless che emulano completamente un utente reale — eseguono JavaScript, mantengono i cookie, possono emulare i movimenti del mouse. Ideale per piattaforme con protezione severa.

La configurazione del proxy è semplice — un parametro all'avvio del browser. Playwright è considerato più moderno e stabile, ma Puppeteer ha più esempi e librerie pronte.

3. Octoparse
Applicazione desktop per Windows con costruttore visivo di parser. Non richiede programmazione — basta cliccare sugli elementi da raccogliere. Supporto proxy integrato, pianificatore di esecuzioni, esportazione in Excel/CSV.

Costo: versione gratuita con limitazioni (10.000 record al mese), piani a pagamento a partire da $75/mese. Buona opzione per piccole e medie imprese.

Impostazione passo-passo del parser dei prezzi con proxy in 15 minuti

Mostrerò il modo più semplice per impostare il monitoraggio dei prezzi utilizzando Parsehub — uno strumento senza codice. Questo metodo è adatto anche se non hai mai lavorato con i parser.

Passo 1: Registrazione e installazione

• Registrati su parsehub.com (c'è un piano gratuito)
• Scarica e installa l'app desktop per Windows o Mac
• Avvia l'app e accedi al tuo account

Passo 2: Creazione del progetto e selezione degli elementi

• Clicca su "Nuovo Progetto" e incolla l'URL della pagina con i prodotti (ad esempio, una categoria su Ozon o i risultati di ricerca)
• Parsehub caricherà la pagina nel browser integrato
• Clicca sul nome del primo prodotto — Parsehub evidenzierà automaticamente tutti gli elementi simili sulla pagina
• Clicca sul prezzo del prodotto — verrà aggiunto all'elenco dei dati da raccogliere
• Aggiungi altri campi necessari: link al prodotto, valutazione, numero di recensioni

Passo 3: Impostazione dei proxy

• Apri le impostazioni del progetto (icona dell'ingranaggio)
• Trova la sezione "Impostazioni Proxy"
• Seleziona "Usa proxy" e incolla i dati dei tuoi proxy nel formato: IP:PORT:USERNAME:PASSWORD
• Se hai una lista di proxy, attiva l'opzione "Ruota proxy" — Parsehub cambierà automaticamente i proxy tra le richieste

Passo 4: Impostazione del programma

• Nelle impostazioni del progetto trova "Programma"
• Seleziona la frequenza di esecuzione: ogni ora, ogni 6 ore, una volta al giorno, ecc.
• Per la formazione dei prezzi dinamici, è ottimale — ogni 2-4 ore

Passo 5: Esportazione dei dati

• Dopo il primo avvio del parser, i dati appariranno nella scheda "Dati"
• Clicca su "Esporta" e seleziona il formato: CSV, Excel, JSON
• Puoi impostare l'invio automatico dei dati a Google Sheets o via email dopo ogni esecuzione

L'intera configurazione richiede 10-15 minuti. Dopo di che, il parser funziona automaticamente secondo il programma, raccoglie i prezzi dei concorrenti e ti invia i dati.

5 errori che portano al blocco durante il parsing

Anche con i proxy giusti, puoi ricevere un ban se commetti errori tipici. Ecco i problemi più comuni dalla pratica.

Errore 1: Velocità delle richieste troppo alta

Molti cercano di raccogliere dati il più velocemente possibile e fanno 10-20 richieste al secondo. Questo viene immediatamente rilevato dai sistemi di protezione. Un reale essere umano non può fisicamente aprire 20 schede di prodotti al secondo.

Soluzione: Aggiungi ritardi tra le richieste. Minimo 2-3 secondi per siti semplici, 5-10 secondi per marketplace con protezione. Fai in modo che i ritardi siano casuali — non rigorosamente 5 secondi, ma da 4 a 8 secondi in modo casuale.

Errore 2: Utilizzo di un solo proxy per tutte le richieste

Anche se hai acquistato un proxy residenziale, utilizzare un solo IP per centinaia di richieste al giorno porterà a un blocco. I sistemi di protezione monitorano l'attività di ogni IP.

Soluzione: Minimo 10-20 proxy in pool con rotazione. Per grandi volumi (1000+ prodotti al giorno) — 50-100 proxy.

Errore 3: Assenza o intestazioni delle richieste errate

Le richieste senza User-Agent o con l'User-Agent predefinito della libreria (ad esempio, "Python-requests/2.28.1") vengono immediatamente rilevate come bot.

Soluzione: Indica sempre un User-Agent di un browser reale. Aggiungi anche le intestazioni Accept, Accept-Language, Accept-Encoding. Cambia l'User-Agent quando cambi proxy.

Errore 4: Ignorare i cookie e le sessioni

Molti marketplace utilizzano i cookie per monitorare la sessione dell'utente. Se fai ogni richiesta "da un foglio bianco" senza cookie, questo appare sospetto.

Soluzione: Mantieni i cookie tra le richieste all'interno di una sessione. Quando cambi proxy — cancella i cookie e inizia una nuova sessione. Utilizza librerie con gestione automatica dei cookie (requests.Session in Python, puppeteer in JavaScript).

Errore 5: Parsing solo delle schede dei prodotti senza simulazione della navigazione

Se apri subito link diretti alle schede dei prodotti, saltando la homepage, la ricerca e le categorie, questo non assomiglia al comportamento di un reale utente.

Soluzione: Per piattaforme con protezione severa (Wildberries, Ozon) simula il percorso completo dell'utente: homepage → ricerca o categoria → elenco di prodotti → scheda del prodotto. Questo aumenta il tempo di parsing, ma riduce drasticamente il rischio di ban.

Conclusione

Il monitoraggio della formazione dei prezzi dinamici è un compito critico per qualsiasi venditore sui marketplace. I prezzi dei concorrenti cambiano più volte al giorno, e chi per primo reagisce ai cambiamenti mantiene posizioni nei risultati e profitti. Ma tutti i grandi marketplace bloccano severamente il parsing, quindi senza proxy configurati correttamente raccogliere dati è impossibile.

Le conclusioni chiave dell'articolo: per Wildberries e Ozon utilizza solo proxy residenziali o mobili — i data center vengono bloccati nel 90% dei casi. Assicurati di impostare la rotazione dei proxy — cambia IP dopo ogni 20-30 richieste. Aggiungi ritardi tra le richieste (5-10 secondi) e randomizzali. Utilizza browser headless per piattaforme con protezione JavaScript. Simula il comportamento di un reale utente — non aprire direttamente le schede dei prodotti, emula il percorso completo tramite ricerca e categorie.

Se non vuoi occuparti dei dettagli tecnici, utilizza strumenti pronti come Parsehub o Octoparse — non richiedono programmazione e hanno supporto proxy integrato. Per grandi volumi e compiti specifici, è meglio sviluppare un parser personalizzato su Scrapy o Puppeteer.

Se intendi impostare un monitoraggio automatico dei prezzi sui marketplace russi, ti consigliamo di iniziare con proxy residenziali — forniscono accesso stabile a Wildberries, Ozon e altri marketplace con rischio minimo di blocchi. Per casi particolarmente complessi o per lavorare con applicazioni mobili dei marketplace, sono adatti proxy mobili con IP di operatori russi.