Temu용 프록시: 차단 없이 중국 마켓플레이스의 가격 모니터링 및 스크래핑 설정하는 방법

```html

Temu는 세계에서 가장 공격적으로 성장하는 마켓플레이스 중 하나이며, 경쟁은 매달 심화되고 있습니다. Wildberries와 Ozon의 판매자들은 Temu의 가격을 모니터링하고, 아비트라지 거래자들은 드롭쉬핑을 위한 트렌드 상품을 찾고, 분석가들은 카테고리별 데이터를 수집합니다. 문제는 하나입니다: Temu는 자동 요청을 강력하게 차단하며, 올바르게 설정된 프록시 없이는 몇 분 만에 차단될 수 있습니다.

이 가이드에서는 Temu와 함께 실제로 작동하는 프록시, 그들의 안티봇 보호를 우회하는 방법, 가격 모니터링 및 카탈로그 파싱을 위한 안정적인 도구를 사용하는 방법을 설명합니다.

왜 Temu는 가격 파싱 및 모니터링을 차단하는가

Temu는 PDD Holdings의 자회사입니다 (Pinduoduo를 소유한 동일한 홀딩). 이 플랫폼은 2022년에 서구 시장에 진출했으며, 이후 데이터 보호에 적극적으로 투자하고 있습니다. 강력한 안티봇 정책의 이유는 분명합니다: 마켓플레이스는 경쟁자와 가격 집계기가 그들의 데이터를 무료로 얻는 것을 원하지 않습니다.

Temu가 자동 요청을 차단하기 위해 사용하는 구체적인 방법은 다음과 같습니다:

• 요청 속도 제한 — 하나의 IP 주소에서 요청 수를 제한합니다. 이미 30–50 요청이 분당 발생하면 의심을 받습니다.
• 브라우저 지문 인식 — Temu는 요청 헤더, User-Agent, TLS 매개변수 및 페이지에서의 행동을 분석합니다. JavaScript 렌더링이 없는 요청은 즉시 봇으로 표시됩니다.
• 지리적 차단 — 일부 데이터는 특정 지역에서만 접근할 수 있습니다. 미국, 독일 및 러시아의 가격은 상당히 다를 수 있으며, 로컬 IP 없이는 актуальные 데이터를 볼 수 없습니다.
• CAPTCHA 및 Cloudflare — 의심스러운 활동이 있을 경우 Temu는 Cloudflare 검증을 활성화하여 브라우저의 행동, 마우스 이동 속도 및 기타 매개변수를 분석합니다.
• 데이터 센터 차단 — AWS, Google Cloud, Hetzner 및 기타 클라우드 제공자의 IP 주소는 자동으로 차단됩니다. 그래서 저렴한 데이터 센터 프록시는 여기서 잘 작동하지 않습니다.

결론: 일반 데이터 센터 프록시로 간단한 스크립트를 실행하면 Temu에서 최대 5–10분 동안만 유지됩니다. 안정적인 모니터링을 위해서는 다른 접근 방식과 올바른 유형의 프록시가 필요합니다.

Temu에 프록시가 필요한 사람: 실제 시나리오

프록시 유형을 선택하기 전에 귀하의 작업을 정의하십시오. 다양한 시나리오는 다양한 솔루션을 요구합니다.

시나리오 1: Wildberries 및 Ozon 판매자를 위한 가격 모니터링

많은 러시아 판매자들이 Wildberries와 Ozon에서 중국 공급업체로부터 상품을 구매하거나 Temu에서 이미 판매되고 있는 상품과 경쟁하고 있습니다. 그들은 특정 SKU의 가격 동향을 추적하고, 프로모션 및 세일을 확인하며, 경쟁자의 가격 포지셔닝을 이해하는 것이 중요합니다. 이를 위해서는 500–5000개의 상품 항목에 대한 24/7 안정적인 모니터링이 필요합니다.

시나리오 2: 드롭쉬핑을 위한 트렌드 상품 검색

아비트라지 거래자와 드롭쉬퍼들은 Temu를 트렌드 상품의 출처로 사용합니다. 그들은 "베스트셀러" 카테고리를 파싱하고, 새로운 상품의 출현을 추적하며, 주문 수와 리뷰를 분석합니다. 목표는 다른 사람들이 알아차리기 전에 높은 수요와 낮은 경쟁을 가진 상품을 빠르게 찾는 것입니다.

시나리오 3: 지역별 가격 비교

Temu는 국가에 따라 다른 가격을 표시합니다. 동일한 상품이 미국에서는 $5, 독일에서는 $8일 수 있습니다. 가격 집계기 및 분석 서비스에겐 동시에 다양한 지역에서 데이터를 수집하는 것이 중요하며, 이를 위해서는 특정 국가의 프록시가 필요합니다.

시나리오 4: 브랜드를 위한 경쟁자 분석

제조업체와 수입업체는 Temu에 그들의 상품 복제품이 나타나지 않았는지 추적하고, 직접 경쟁자의 가격 정책을 모니터링하며, 상품 카드의 설명 및 사진을 분석하여 자신의 리스팅을 개선합니다.

Temu에 어떤 유형의 프록시를 선택해야 하는가

이것은 핵심 질문입니다. 잘못된 유형의 프록시를 선택하는 것은 Temu 모니터링이 안정적으로 작동하지 않는 주된 이유입니다. 모든 옵션을 살펴보겠습니다:

왜 데이터 센터 프록시는 Temu와 작동하지 않는가

Temu는 대부분의 대형 마켓플레이스와 마찬가지로 클라우드 제공업체의 ASN(자율 시스템) 데이터베이스를 운영합니다. Amazon AWS, DigitalOcean, OVH, Hetzner의 서브넷에서 오는 IP 주소는 인프라 수준에서 차단됩니다. "깨끗한" 데이터 센터 프록시를 방금 구매했더라도 몇 시간의 활발한 사용 후에는 블랙리스트에 올라갈 것입니다. 일회성 검증에는 괜찮지만, 정기적인 모니터링에는 적합하지 않습니다.

주거용 프록시 — 대부분의 작업에 최적의 선택

주거용 프록시는 실제 가정용 인터넷 사용자들의 IP 주소를 사용합니다. Temu의 입장에서 이러한 요청은 집에서 사이트에 접속한 일반 사용자와 구별할 수 없습니다. 이는 주거용 프록시가 가격 모니터링 및 카탈로그 파싱에 최적의 선택이 되게 합니다. IP 회전을 제공하는 공급자를 선택하는 것이 중요합니다 — 이는 각 새로운 요청이 새로운 주소에서 이루어져 의심이 쌓이지 않도록 합니다.

모바일 프록시 — 최대 안정성을 위한 선택

모바일 프록시는 이동통신 사업자(MTS, Beeline, T-Mobile, Vodafone 등)의 IP 주소를 통해 작동합니다. 이는 Temu를 포함한 모든 플랫폼에서 가장 "신뢰할 수 있는" 유형의 트래픽입니다. 하나의 모바일 IP 주소는 수천 명의 실제 사용자에 의해 동시에 사용될 수 있으므로, 높은 부하에서도 의심을 받지 않습니다. 24/7 안정적인 모니터링이 필요하다면 모바일 프록시가 더 신뢰할 수 있습니다.

Temu 모니터링을 위한 프록시 설정 방법: 단계별 안내

두 가지 인기 있는 도구를 예로 들어 설정을 살펴보겠습니다: 코드 작성을 하지 않는 사람들을 위한 준비된 파서와 수동 모니터링 및 테스트를 위한 안티탐지 브라우저입니다.

옵션 A: 안티탐지 브라우저(Dolphin Anty / AdsPower)를 통한 설정

안티탐지 브라우저는 고유한 지문을 가진 격리된 브라우저 프로필을 생성할 수 있게 해줍니다. 이는 여러 "위치"에서 Temu와 수동으로 작업하거나 다양한 국가의 가격을 테스트할 때 유용합니다.

1. Dolphin Anty(또는 AdsPower)를 열고 “프로필 생성”을 클릭합니다.
2. “프록시” 섹션에서 연결 유형을 선택합니다: SOCKS5 (추천) 또는 HTTP.
3. 프록시 데이터를 다음 형식으로 입력합니다: IP:포트:로그인:비밀번호
4. “프록시 확인”을 클릭합니다 — 브라우저가 국가와 IP 유형을 보여줍니다.
5. “지리적 위치” 섹션에서 “프록시에서 사용”을 선택합니다 — 이는 중요합니다, 그렇지 않으면 브라우저가 실제 지리적 위치를 표시합니다.
6. 프로필을 저장하고 브라우저를 실행합니다. temu.com에 접속하면 선택한 국가의 사이트 버전을 볼 수 있습니다.

옵션 B: 준비된 파서에서 설정하기 (코드 없이)

웹 인터페이스가 있는 준비된 파서를 사용하는 경우(예: Octoparse, ParseHub 또는 유사한 도구), 프록시 설정은 일반적으로 다음과 같습니다:

1. 프로젝트 설정으로 이동 → “프록시” / “Proxy Settings” 섹션으로 이동합니다.
2. “회전 프록시” 모드를 선택합니다 — 이는 Temu에 매우 중요합니다.
3. 회전 프록시의 엔드포인트를 입력합니다. 대부분의 공급자는 하나의 주소로 표시됩니다: gate.proxyprovider.com:8080
4. 인증을 위한 로그인과 비밀번호를 입력합니다.
5. 특정 국가가 필요한 경우, 로그인에 지리적 타겟팅 매개변수를 추가합니다: login-country-us (형식은 공급자에 따라 다릅니다).
6. 요청 간 지연을 설정합니다: 2–5초 — Temu에 최적의 범위입니다.
7. 10–20개의 상품에 대한 테스트 수집을 실행하고 데이터가 403/429 오류 없이 오는지 확인합니다.

Temu 파싱을 위한 준비된 도구

개발자가 아니고 코드를 작성하고 싶지 않다면, 다음은 올바르게 설정된 프록시와 함께 Temu에서 작동하는 도구입니다:

Octoparse

JavaScript 렌더링을 지원하는 비주얼 파서입니다. 코드 없이 클릭, 스크롤 및 양식 작성 시나리오를 설정할 수 있습니다. 서드파티 프록시 통합을 지원합니다. Temu의 동적 페이지를 잘 처리합니다. 클라우드 실행 모드는 컴퓨터에 부담을 주지 않고 24시간 파싱할 수 있게 해줍니다.

ParseHub

JavaScript를 지원하는 또 다른 비주얼 파서입니다. 무료 플랜은 프로젝트당 200페이지로 제한되지만, 테스트에는 충분합니다. 애플리케이션 설정을 통해 프록시를 지원합니다. 상품 카드, 가격 및 리뷰 파싱에 적합합니다.

Bright Data Web Scraper IDE

인기 있는 마켓플레이스를 위한 준비된 템플릿이 있는 더 발전된 도구입니다. 내장된 프록시 인프라는 진입 장벽을 낮춥니다. 자체 프록시를 사용하려면 설정을 통해 가능합니다.

Google Sheets + ImportXML (소량의 경우)

10–50개의 상품을 모니터링하기 위해 Google Sheets의 ImportXML 기능을 사용할 수 있습니다. 이는 어떤 도구도 필요하지 않지만, 공개적으로 접근 가능한 데이터에만 작동하며 프록시를 직접 지원하지 않습니다. 수동으로 포인트 모니터링에만 적합합니다.

Temu의 안티봇 보호를 우회하는 방법

올바른 유형의 프록시를 사용하더라도 Temu의 보호 특성을 고려하지 않으면 차단될 수 있습니다. 다음은 효과적인 실용적인 권장 사항입니다:

1. 각 요청마다 IP 회전 사용

모든 파싱에 하나의 IP 주소를 사용하지 마십시오. 회전 주거용 프록시는 각 새로운 요청마다 IP를 자동으로 변경합니다. 이는 의심을 쌓지 않는 가장 효과적인 방법입니다. 공급자가 스티키 세션(10–30분 동안 하나의 IP) 을 제공하는 경우, 이는 하나의 상품의 다중 페이지 파싱에만 사용하고 대량 카탈로그 우회에는 사용하지 마십시오.

2. 인간 행동 모방

Temu는 요청 패턴을 분석합니다. 요청을 정확히 2초마다 하면 의심을 받을 수 있습니다. 요청 간에 무작위 지연을 추가하십시오: 1.5초에서 4초 사이. 또한 페이지를 번갈아 가며 파싱하십시오 — 페이지 1, 2, 3, 4를 순차적으로 파싱하지 마십시오. 실제 사용자가 하는 것처럼 무작위로 이동하십시오.

3. 요청 헤더를 올바르게 설정

User-Agent는 실제 브라우저와 일치해야 합니다. python-requests/2.28.0와 같은 기본 값을 사용하지 마십시오 — 이는 즉시 봇으로 간주됩니다. Chrome이나 Firefox의 최신 User-Agent를 사용하십시오. 안티탐지 브라우저(Dolphin, AdsPower, GoLogin)에서는 자동으로 설정됩니다.

4. 모바일 버전의 사이트와 작업

Temu의 모바일 버전(m.temu.com) 또는 모바일 애플리케이션은 데스크톱 버전에 비해 덜 공격적인 보호를 가지고 있습니다. 모바일 프록시를 사용하는 경우, User-Agent를 모바일로 설정하는 것이 합리적입니다. 이는 요청 프로필을 더 일관되게 만듭니다.

5. 피크 시간에 파싱하지 마십시오

Temu는 높은 부하 기간 동안 안티봇 보호를 강화합니다 — 일반적으로 모스크바 시간으로 저녁(18:00–23:00) 및 세일 기간 동안입니다. 주요 파싱 작업은 야간 시간(2:00–8:00)으로 계획하십시오 — 서버에 대한 부하가 적고 이상에 대한 주목이 줄어듭니다.

Temu 파싱 시 자주 발생하는 오류 및 피하는 방법

마켓플레이스와의 작업 경험에 따르면, 대부분의 차단 문제는 동일한 오류에서 발생합니다. 각 오류를 살펴보겠습니다.

오류 1: 무료 프록시 사용

무료 프록시는 이미 수천 명의 다른 사람들이 사용하고 있는 IP 주소로, 스팸 및 공격에도 사용됩니다. 이들은 Temu의 블랙리스트에 오래전부터 올라와 있습니다. 게다가 무료 프록시는 불안정합니다: 예고 없이 꺼지거나 IP를 변경하며, 종종 트래픽을 가로챕니다. 마켓플레이스와의 진지한 작업에는 무료 프록시가 적합하지 않습니다.

오류 2: 너무 높은 요청 속도

많은 사람들이 데이터를 더 빨리 수집하기 위해 최대 속도로 파싱을 시작합니다. 이는 몇 분 만에 차단되는 보장된 방법입니다. Temu는 하나의 IP에서의 요청 수뿐만 아니라 서브넷에서의 비정상적인 활동도 추적합니다. 간단한 규칙: 파싱 속도는 활성 사용자 행동을 모방해야 하며, 자동화된 봇이 아니어야 합니다.

오류 3: 지리적 타겟팅 무시

미국 구매자를 위한 가격을 보려면 미국 IP가 필요합니다. 그러나 이것만으로는 충분하지 않습니다 — 브라우저 또한 미국 로케일, 시간대 및 언어를 표시해야 합니다. IP가 미국이지만 브라우저 언어가 러시아어인 경우 — Temu는 이를 감지하고 잘못된 데이터를 표시하거나 세션을 차단할 수 있습니다.

오류 4: 오류 처리 없이 파싱

파서가 429(요청이 너무 많음) 또는 403(금지됨) 응답을 받고 계속 요청을 보내면 차단이 가속화됩니다. 오류 처리를 설정하십시오: 429를 받을 경우 30–60초 동안 일시 정지하고 IP를 변경합니다. 403의 경우 — IP와 세션을 완전히 변경합니다.

오류 5: 모든 작업에 하나의 프록시 사용

Facebook Ads, Instagram 및 Temu와 작업할 때 동일한 프록시를 사용하는 것은 좋지 않은 관행입니다. 각 플랫폼은 고유한 위험 평가 시스템을 가지고 있습니다. 작업을 혼합하면 프록시에 대한 부하가 증가하고 차단 위험이 높아집니다. 각 프로젝트에 대해 별도의 프록시 풀을 할당하십시오.

오류 6: 실행 전에 프록시 품질 확인하지 않기

대규모 파싱을 시작하기 전에 항상 프록시를 수동으로 테스트하십시오: 필요한 프록시로 안티탐지 브라우저를 통해 temu.com에 접속하여 사이트가 올바르게 열리고, 올바른 국가를 표시하며, CAPTCHA를 요구하지 않는지 확인하십시오. 이는 2분이 소요되지만, 작업 시간을 절약할 수 있습니다.

결론: 안정적인 Temu 모니터링을 위한 체크리스트

Temu는 잘 설계된 안티봇 보호를 가진 심각한 마켓플레이스이지만, 이는 가격 모니터링 및 데이터 파싱이 불가능하다는 것을 의미하지 않습니다. 올바른 접근 방식을 사용하면 차단 없이 몇 달 동안 작동하는 안정적인 데이터 수집 프로세스를 구축할 수 있습니다.

이 가이드의 주요 결론은 다음과 같습니다:

• 프록시 유형이 모든 것을 결정합니다. 데이터 센터 프록시는 Temu와 작동하지 않습니다. IP 회전이 있는 주거용 또는 모바일 프록시를 사용하십시오.
• 코드 없는 도구가 가능합니다. Octoparse, ParseHub 및 안티탐지 브라우저는 프로그래밍 기술 없이 모니터링을 설정할 수 있게 해줍니다.
• 지리적 타겟팅은 필수입니다. IP, 브라우저 언어, 시간대 및 로케일은 목표 국가와 일치해야 합니다.
• 속도는 중요하지 않습니다. 실제 사용자의 행동을 모방하십시오: 무작위 지연, 비일관적인 탐색.
• 작업을 분리하십시오. 각 프로젝트에 대해 별도의 프록시 풀을 사용하는 것은 편집증이 아니라 실용적인 관행입니다.

Temu에서 가격을 정기적으로 모니터링하거나 대량으로 카탈로그를 파싱할 계획이라면, 주거용 프록시로 시작하는 것을 추천합니다 — 이는 대부분의 e-commerce 작업에 필요한 신뢰성과 비용의 균형을 제공합니다. 24/7 최대 안정성이 필요한 고부하 시나리오의 경우, 모바일 프록시를 고려하십시오 — 이는 집중적으로 사용하더라도 차단되지 않습니다.