2026년 블랙 프라이데이는 11월 27일에, 사이버 먼데이는 11월 30일에 해당합니다. 정점까지 약 7주가 남았으며, 이는 가격 파서를 준비하기에 충분한 시간입니다. 11월에 시작하면 세일 당일 시스템의 약점을 알 수 있습니다: 경쟁자들은 매시간 가격을 변경하고, 귀하의 대시보드는 어제의 데이터나 빈 셀을 보여줍니다.
이 가이드에서는 6주 동안의 단계별 계획을 제시합니다: 피크 빈도에 맞춰 트래픽 예산을 재조정하는 방법, 어떤 프록시를 어떤 사이트에 설정해야 하는지, 사이트가 봇에게 제공하는 "오염된" 가격을 감지하는 방법, 그리고 세일 당일에 해야 할 일입니다.
블랙 프라이데이에 파서가 더 자주 고장나는 이유
간단히 말해, 이 시기에 사이트의 실시간 트래픽과 봇 트래픽이 증가하기 때문에 보안을 평소보다 더 엄격하게 설정합니다. 지난 시즌의 수치는 다음과 같습니다.
- 돈이 걸려 있습니다. Adobe Analytics에 따르면, 2025년 추수감사절 주간부터 사이버 먼데이까지 미국인들은 온라인에서 $44.2억을 지출했습니다 (+7.7% 전년 대비). 블랙 프라이데이에는 기록적인 $11.8억, 사이버 먼데이에는 $14.25억이었습니다. 전자제품 할인율은 가격의 31%에 달했습니다.
- 봇의 수가 거의 사람 수와 같아졌습니다. Radware의 2026년 보고서에 따르면, 2025년 "사이버 5"에서 악성 봇은 보호하는 인터넷 상점의 트래픽의 약 43%를 차지했고, 사람은 약 46%를 차지했습니다. 이전 해에는 나쁜 봇의 비율이 31%였습니다.
- 세일 당일에 공격이 증가합니다. Imperva는 2025년 블랙 프라이데이에 소매업체에 대한 봇 공격이 11월 평균 대비 50% 증가했으며, 전체 트래픽은 37% 증가했다고 보고했습니다. Imperva는 일반적인 위협으로 가격 및 재고 자동 수집, 익명 프록시 및 VPN을 통한 IP 회전을 별도로 언급합니다.
이로 인해 실제로 무엇을 해야 할까요. 소매업체는 봇의 물결을 보고, 엄격한 안티봇 모드를 활성화하고, 인기 상품에 대한 가상 대기를 설정하며, 하나의 IP에서 요청 빈도를 더 엄격하게 제한합니다. 10월 내내 오류 없이 작동했던 귀하의 파서는 CAPTCHA에 부딪히거나 403 오류를 받습니다. 이러한 엄격한 모드에 대비해야 하며, 평범한 날에 대비할 필요는 없습니다.
단계별: 6주 계획
1–2주차 (10월 중순): 재고 조사 및 우선순위 설정
- 상품을 수준별로 나누세요. 실제로 가격을 변경하는 "핫" 포지션(보통 카탈로그의 5–15%), 분석용 "웜", 그리고 배경용 "콜드"로 나누세요. 피크 시에는 높은 빈도가 필요한 것은 오직 핫 상품뿐입니다.
- 경쟁자의 웹사이트와 그들의 보안을 기록하세요. 각 사이트를 살펴보고, 사이트 앞에 어떤 것이 있는지 기록하세요: Cloudflare, Akamai, DataDome, 자체 WAF. 이것이 프록시의 종류에 영향을 미칩니다(자세한 내용은 아래 참조).
- 내부 API를 찾으세요. 상품 카드에서 DevTools의 Network 탭을 열고 가격이 포함된 JSON 요청을 찾아보세요. 만약 있다면, 그것에 대한 요청은 전체 페이지보다 훨씬 쉬우며, 따라서 트래픽 비용이 저렴하고 사이트에 대한 부담이 적습니다.
- 기준을 설정하세요. 현재 지표를 기록하세요: 성공적인 응답 비율, 평균 응답 크기, 하나의 카드에 소요된 시간. 이들 없이는 11월에 비교할 것이 없습니다.
3–4주차: 예산 재조정 및 부하 테스트
- 피크 빈도에 맞춰 트래픽을 계산하세요. 공식은 간단합니다: 상품 수 × 하루 확인 횟수 × 평균 응답 크기 × 피크 기간. 예를 들어: 2,000개의 핫 카드 × 24회 확인 × 0.4MB ≈ 하루에 19GB. 피크가 5일간 지속된다면(금요일부터 월요일까지, 그리고 예열 포함), 약 95GB가 필요합니다 — 오직 핫 수준에 대해서만. 계산에 대한 자세한 내용은 10,000개 상품 모니터링 예산 분석에서 다루었습니다.
- 재시도를 위한 여유를 두세요. 엄격한 안티봇 모드에서는 일부 요청을 반복해야 할 수 있습니다. 일반적인 날에 재시도 비율이 5%라면, 피크 시에는 20–30%를 고려하세요. "기가바이트 가격"이 아니라 하나의 성공적인 기록 가격을 계산하는 것이 중요합니다: 절반의 CAPTCHA를 반환하는 저렴한 풀은 결국 더 비쌉니다.
- 부하 테스트를 실행하세요. 실제 사이트에서 2–3시간 동안 피크 빈도를 활성화하세요. 세 가지를 주의 깊게 살펴보세요: 403/429가 발생하는 지점, 하나의 IP에서 몇 번의 요청 후 CAPTCHA가 나타나는지, 응답 시간이 어떻게 증가하는지.
- 휴식 시간과 세션을 조정하세요. 테스트 결과에 따라 도메인에 대한 요청 한도와 세션 지속 시간을 설정하세요. 일반적으로는 각 IP에 대한 부하가 적은 더 많은 병렬 IP가 더 잘 작동합니다.
5주차: 조용한 오류에 대한 방어
가장 위험한 고장은 보이지 않는 것입니다. 사이트가 봇을 차단하지 않고 캐시된 페이지, 할인 없는 가격 또는 "상품이 없습니다"라는 메시지를 반환합니다. 파서는 200 코드를 받고 데이터베이스에 쓰레기를 기록합니다. 무엇을 설정해야 할까요:
- 범위 확인. 가격이 어제의 가격이나 경쟁자의 중앙값에서 60–70% 이상 떨어지면, 해당 기록은 다른 IP에서 재확인을 위해 표시되며, 즉시 재작성기로 보내지지 않습니다.
- 검증 상품. 가격을 미리 알고 있는 10–20개의 항목(또는 수동으로 확인하는 항목). 이들에 대해 파서가 오류를 발생시키기 시작하면, 전체 흐름에 문제가 있습니다.
- 통화 및 지역 확인. 사이트는 IP를 통해 국가를 결정합니다. 프록시가 잘못된 국가의 IP를 제공하면, 다른 통화의 가격이나 다른 프로모션을 보게 됩니다. 아웃바운드 IP의 지리적 위치와 페이지의 통화를 확인하세요.
- 오류 비율 경고. 개별 오류가 아니라 추세에 대해: 예를 들어, "15분 이상 성공적인 응답이 85% 미만"과 같은 것입니다.
6주차 (피크 전 주): 코드 동결 및 예비
- 코드를 동결하세요. 블랙 프라이데이 전 주에는 파서에 새로운 기능을 추가하지 마세요 — 오류 수정만 하세요.
- 미리 잔액을 충전하세요. 프록시 제공업체의 트래픽은 사이버 먼데이까지 여유를 두고 있어야 합니다. 금요일 23:00에 계좌를 충전하는 것은 나쁜 아이디어입니다.
- 각 사이트에 대한 계획 B를 준비하세요. 기본 방법이 고장났을 때: 어떤 유형의 프록시를 연결할지, 어떤 빈도를 낮출지, 어떤 상품을 가장 먼저 비활성화할지.
- 대기자를 지정하세요. 피크 시간에 대시보드를 모니터링하고 어떤 조치를 취해야 할지 아는 사람.
어떤 프록시를 어떤 작업에 사용할지
보편적인 답은 없으며, 특정 사이트의 보호가 결정합니다. 세일 시즌을 위한 작업 схема는 다음과 같습니다:
- 데이터 센터 — 심각한 안티봇이 없는 사이트, 보호되지 않은 내부 API 및 "콜드" 수준에 적합합니다. 빠르고 저렴하지만, Akamai 또는 DataDome이 있는 사이트에서는 피크 날에 이러한 IP가 가장 먼저 차단됩니다: 그 범위가 알려져 있습니다.
- 주거용 프록시 — 보호된 사이트의 핫 수준을 위한 주요 도구입니다. 가정용 제공업체의 IP와 국가 및 도시별 타겟팅을 통해 필요한 지역에서 구매자가 보는 것과 동일한 가격을 확인할 수 있습니다. 각 요청에 대한 회전은 개별 카드에 적합하며, 5–10분 동안 고정된 세션은 여러 페이지를 연속으로 통과해야 하는 시나리오에 적합합니다 (카탈로그 → 카드 → 최종 가격 확인을 위한 장바구니).
- 모바일 프록시 — 가장 엄격한 목적과 모바일 웹사이트 및 애플리케이션의 예비입니다. 하나의 제공업체 IP는 수천 명의 실제 사용자와 공유되므로, 사이트가 이를 차단하는 것은 경제적이지 않습니다. 더 비싸므로, 주거용 프록시가 통과하지 못하는 곳에만 선택적으로 사용하세요.
절약을 위한 한 가지 조언: 브라우저를 통해 작업할 경우 이미지, 글꼴 및 비디오 로드를 비활성화하세요. 상품 카드에서는 이들이 페이지의 대부분의 무게를 차지할 수 있지만, 가격 확인에는 필요하지 않습니다.
세일 당일: 시간별로 해야 할 일
- 시작 전 밤. 많은 상점들이 자정에 프로모션을 시작합니다. 시작 1시간 전에 핫 상품의 빈도를 높여 "이전" 가격을 기록하세요.
- 첫 몇 시간. 안티봇에 가장 엄격한 시간입니다. 오류 비율이 증가하면, 먼저 "웜" 수준의 빈도를 낮추고 모든 것을 한 번에 변경하지 마세요.
- 가상 대기. 사이트가 대기실을 설정했다면, 이를 무리하게 시도하지 마세요 — 이는 트래픽과 IP를 소모할 뿐입니다. 대기 중인 카드를 보류하고 대기실이 해제될 때까지 덜 자주 확인하세요.
- 저녁 피크. Adobe에 따르면, 2025년 사이버 먼데이에는 오후 8시부터 10시까지 가장 많은 구매가 이루어졌습니다 (미국 시간 기준) — 이 시간 동안 미국인들은 분당 $1600만을 지출했습니다. 미국 시장에서는 가격과 재고가 특히 활발하게 변동하는 시간입니다.
- 피크 이후. 할인은 즉시 사라지지 않습니다: Adobe는 12월 첫 주에도 여전히 눈에 띄는 할인이 있었다고 기록했습니다. 화요일에는 모니터링을 끄지 말고, 빈도를 점진적으로 낮추세요.
일반적인 오류
- 전체 카탈로그에 동일한 빈도. 예산이 가격을 변경하지 않는 상품에 소모됩니다.
- 하나의 IP에서 테스트. 하나의 주소에서 "모두 작동"하는 테스트는 수천 개의 요청에서의 행동에 대해 아무것도 말하지 않습니다.
- 200 코드에 대한 신뢰. 오류 없는 응답이 반드시 올바른 가격을 의미하는 것은 아닙니다.
- 사이트 규칙 무시. 공개 가격만 수집하고, 개인 계정을 건드리지 않으며, 실제 구매자에게 방해가 되는 부하를 사이트에 주지 마세요. 이는 공정할 뿐만 아니라 법적 위험을 줄입니다.
결론
블랙 프라이데이는 파서의 속도가 아닌 준비 상태를 시험하는 것입니다. 카탈로그를 우선순위에 따라 나누고, 재시도를 위한 여유를 두고 트래픽을 재계산하며, 피크 한 달 전에 부하 테스트를 실행하고, "조용한 쓰레기"에 대한 검사를 설정하고, 작업을 프록시 유형에 따라 분산시켜야 합니다: 간단한 목적을 위한 데이터 센터, 주요 흐름을 위한 주거용, 가장 보호된 사이트를 위한 모바일. 그러면 11월 27일에는 경쟁자의 가격을 보고, 오류 로그를 보지 않게 될 것입니다.