Monitoramento de preços para a Black Friday 2026: como preparar o parser e o proxy para o pico

A Black Friday em 2026 será no 27 de novembro, e a Cyber Monday será no 30 de novembro. Faltam cerca de sete semanas para o pico, o que é tempo suficiente para preparar o parser de preços. Se você começar em novembro, descobrirá as fraquezas do sistema no próprio dia da promoção: os concorrentes mudam os preços a cada hora, enquanto seu painel mostra dados de ontem ou células vazias.

Este guia contém um plano passo a passo de seis semanas: como recalcular o orçamento de tráfego para a frequência de pico, quais proxies usar para quais sites, como identificar preços "envenenados" que o site fornece aos bots, e o que fazer no próprio dia da promoção.

Por que o parser falha mais frequentemente na Black Friday

Resumindo: nesses dias, os sites experimentam um aumento tanto no tráfego humano quanto no tráfego de bots, portanto, as proteções são configuradas de forma mais rigorosa do que em outras épocas do ano. Aqui estão os números da temporada passada.

• Dinheiro em jogo. De acordo com a Adobe Analytics, na semana do Dia de Ação de Graças até a Cyber Monday de 2025, os americanos gastaram online $44,2 bilhões (+7,7% em relação ao ano anterior). Apenas na Black Friday, um recorde de $11,8 bilhões, e na Cyber Monday, $14,25 bilhões. Os descontos em eletrônicos chegaram a 31% do preço.
• O número de bots quase igualou o de pessoas. A Radware, em seu relatório de 2026, afirma que na "Cyber Five" de 2025, bots maliciosos representaram cerca de 43% do tráfego nos e-commerces protegidos, enquanto humanos representaram cerca de 46%. No ano anterior, a participação de bots ruins era de 31%.
• Mais ataques ocorrem exatamente nos dias das promoções. A Imperva registrou um aumento de 50% nos ataques de bots ao varejo na Black Friday de 2025 em relação à média de novembro, enquanto o tráfego total foi 37% maior. Entre as ameaças típicas, a Imperva destaca a coleta automática de preços e estoques, bem como a rotação de IPs através de proxies anônimos e VPNs.

O que isso significa na prática. O varejista vê uma onda de bots, ativa o modo rigoroso de anti-bots, implementa uma fila virtual para produtos quentes e limita mais severamente a frequência de solicitações de um único IP. Seu parser, que funcionou sem erros durante todo o mês de outubro, enfrenta um captcha ou recebe um 403. É preciso se preparar para esse modo rigoroso, e não para um dia normal.

Passo a passo: plano de seis semanas

Semanas 1–2 (meados de outubro): inventário e prioridades

1. Classifique os produtos em níveis. Itens "quentes", para os quais você realmente muda seus preços (geralmente 5–15% do catálogo), "mornos" — para análise, e "frios" — para fundo. No pico, alta frequência é necessária apenas para os quentes.
2. Liste os sites concorrentes e suas proteções. Visite cada um e anote quem está na frente do site: Cloudflare, Akamai, DataDome, seu próprio WAF. Isso determina o tipo de proxy (mais detalhes abaixo).
3. Encontre APIs internas. Abra a página do produto, vá para a aba Network no DevTools e procure uma solicitação JSON com o preço. Se existir, a solicitação será muito mais leve do que a página completa, o que significa que consome menos tráfego e menos sobrecarrega o site.
4. Registre uma referência. Capture as métricas atuais: taxa de respostas bem-sucedidas, tamanho médio da resposta, tempo por item. Sem isso, em novembro você não terá com o que comparar.

Semanas 3–4: recalculando o orçamento e teste de carga

1. Calcule o tráfego para a frequência de pico. A fórmula é simples: número de produtos × verificações por dia × tamanho médio da resposta × número de dias de pico. Exemplo: 2.000 itens quentes × 24 verificações × 0,4 MB ≈ 19 GB por dia. Se o pico durar cinco dias (de sexta a segunda, mais o aquecimento), isso resulta em cerca de 95 GB — apenas para o nível quente. Detalhes sobre o cálculo foram discutidos na análise do orçamento para monitoramento de 10.000 produtos.
2. Reserve um espaço para repetições. No modo rigoroso de anti-bots, parte das solicitações precisará ser repetida. Se em dias normais a taxa de repetições é de 5%, no pico considere 20–30%. É importante calcular não o "custo por gigabyte", mas o custo por registro bem-sucedido: um pool barato que gera metade de captchas, no final, acaba custando mais.
3. Realize um teste de carga. Ative a frequência de pico por 2–3 horas em sites reais. Observe três coisas: onde começam os 403/429, após quantas solicitações de um único IP aparece o captcha, como o tempo de resposta aumenta.
4. Defina pausas e sessões. Com base nos resultados do teste, estabeleça um limite de solicitações por domínio e o tempo de vida da sessão. Geralmente, mais IPs paralelos com menor carga em cada um funcionam melhor do que alguns IPs "no máximo".

Semana 5: proteção contra erros silenciosos

A falha mais perigosa é aquela que não é visível. O site não bloqueia o bot, mas fornece uma página em cache, um preço sem desconto ou uma mensagem de "produto indisponível". O que implementar:

• Verificação de intervalo. Se o preço caiu mais de 60–70% em relação ao dia anterior ou à mediana dos concorrentes — a entrada é marcada para rechecagem de outro IP, e não vai direto para o repricer.
• Produtos de controle. 10–20 itens, cujo preço você conhece antecipadamente (ou verifica manualmente). Se o parser começar a falhar neles, o problema está em todo o fluxo.
• Verificação de moeda e região. O site determina o país pelo IP. Se o proxy forneceu um IP de um país diferente, você verá o preço em uma moeda estrangeira ou outra promoção. Verifique a geolocalização do IP de saída e a moeda na página.
• Alerta para taxa de erros. Não para uma falha isolada, mas para uma tendência: por exemplo, "respostas bem-sucedidas abaixo de 85% por mais de 15 minutos".

Semana 6 (semana antes do pico): congelamento e reserva

1. Congele o código. Nenhum novo recurso no parser na semana anterior à Black Friday — apenas correção de erros.
2. Reabasteça o saldo com antecedência. O tráfego do provedor de proxy deve estar disponível com uma margem até a Cyber Monday inclusiva. Reabastecer a conta às 23:00 de sexta-feira é uma má ideia.
3. Prepare um plano B para cada site. Se o método principal falhar: que tipo de proxy conectar, que frequência reduzir, quais produtos desativar primeiro.
4. Designe um responsável. Uma pessoa que monitora o painel durante os horários de pico e sabe qual botão girar.

Quais proxies usar para quais tarefas

Não há uma resposta universal; depende da proteção do site específico. Um esquema funcional para a temporada de promoções:

• Data center — para sites sem proteção anti-bot séria, APIs internas sem proteção e nível "frio". Rápido e barato, mas em sites com Akamai ou DataDome, em dias de pico, esses IPs são bloqueados primeiro: seus intervalos são conhecidos.
• Proxies residenciais — a ferramenta principal para o nível quente em sites protegidos. IPs de provedores domésticos mais segmentação por país e cidade, para ver o mesmo preço que o comprador na região desejada. A rotação a cada solicitação é adequada para itens individuais; uma sessão fixa de 5–10 minutos é para cenários onde é necessário passar por várias páginas consecutivas (catálogo → item → carrinho para verificar o preço final).
• Proxies móveis — reserva para os objetivos mais rigorosos e versões móveis de sites e aplicativos. Um IP de operador é compartilhado por milhares de assinantes reais, portanto, bloqueá-lo não é vantajoso para o site. Mais caro, então use-os pontualmente — onde os residenciais não funcionam.

Uma dica para economizar: desative o carregamento de imagens, fontes e vídeos se estiver trabalhando através do navegador. Na página do produto, eles facilmente representam a maior parte do peso da página, e não são necessários para o preço.

No dia da promoção: o que fazer por horas

• Na noite anterior ao início. Muitas lojas iniciam promoções à meia-noite, no seu horário local. Aumente a frequência para os produtos quentes uma hora antes do início, para registrar o preço "antes".
• As primeiras horas. O momento mais rigoroso para o anti-bot. Se a taxa de erros aumentar, primeiro reduza a frequência no nível "morno", em vez de mudar tudo de uma vez.
• Fila virtual. Se o site implementou uma sala de espera, não tente atacá-la — isso apenas queimará tráfego e IP. Adie os itens na fila e verifique-os com menos frequência, até que a fila seja removida.
• Pico da noite. De acordo com a Adobe, na Cyber Monday de 2025, as compras mais intensas ocorreram entre 20:00 e 22:00 (horário dos EUA) — nesse período, os americanos gastavam $16 milhões por minuto. Para o mercado dos EUA, essas são as horas em que os preços e estoques mudam especialmente ativamente.
• Após o pico. Os descontos não desaparecem imediatamente: a Adobe registrou descontos significativos ainda na primeira semana de dezembro. Não desative o monitoramento na terça-feira — reduza a frequência gradualmente.

Erros típicos

• Frequência igual para todo o catálogo. O orçamento é desperdiçado em produtos para os quais você não muda o preço.
• Teste em um único IP. O teste "tudo funciona" de um único endereço não diz nada sobre o comportamento em milhares de solicitações.
• Confiança no código 200. Uma resposta sem erro não significa que o preço está correto.
• Ignorar as regras do site. Colete apenas preços públicos, não mexa em contas pessoais e não crie uma carga no site que atrapalhe os compradores reais. Isso é tanto ético quanto reduz os riscos legais.

Conclusão

A Black Friday é um teste não da velocidade do parser, mas da preparação. Classifique o catálogo por prioridades, recalibre o tráfego com uma margem para repetições, realize um teste de carga um mês antes do pico, implemente verificações contra "lixo silencioso" e distribua as tarefas por tipos de proxy: data center para objetivos simples, residenciais para o fluxo principal, móveis para os sites mais protegidos. Assim, no dia 27 de novembro, você estará observando os preços dos concorrentes, e não os logs com erros.