← بازگشت به وبلاگ

پارسینگ Shopee، Lazada و Tokopedia: پروکسی برای هر کشور جنوب شرق آسیا

شاپی، لازادا و توکopedia تقریباً تمام تجارت الکترونیک جنوب شرق آسیا را در اختیار دارند، اما هر کشور یک ویترین جداگانه با ورود و حفاظت از IP های خارجی است. طرح مرحله به مرحله جمع آوری قیمت ها و موجودی: API رسمی، پروکسی برای کشور، جلسات ثابت، سرعت، بازگشت و معیارها.

📅۲۸ مهر ۱۴۰۵
پارسینگ Shopee، Lazada و Tokopedia: پروکسی برای هر کشور جنوب شرق آسیا

جنوب شرقی آسیا به یکی از سریع‌ترین بازارهای تجارت الکترونیک تبدیل شده است و تیم‌های بیشتری از کشورهای CIS، اروپا و چین می‌خواهند قیمت‌ها، موجودی‌ها و تخفیف‌های رقبای خود را در Shopee، Lazada و Tokopedia مشاهده کنند. مشکل این است که رویکرد معمول «یک اسکرپر برداشت، اولین پروکسی که پیدا شد را وصل کرد» در اینجا تقریباً بلافاصله شکست می‌خورد: این پلتفرم‌ها به کشورهای مختلف تقسیم شده‌اند، داده‌ها را با ورود به سیستم مسدود می‌کنند و IP های خارجی را قطع می‌کنند. بیایید بررسی کنیم که چگونه می‌توان یک طرح کاری را مرحله به مرحله جمع‌آوری کرد و چه پروکسی‌هایی برای آن نیاز است.

چرا این سه پلتفرم

طبق گزارش Momentum Works که در 14 آوریل 2026 منتشر شد، تجارت الکترونیک پلتفرمی جنوب شرقی آسیا در سال 2025 به میزان 22.8% رشد کرده و به $157.6 میلیارد رسیده است. سه بازیگر — Shopee، Lazada و TikTok Shop به همراه Tokopedia — حدود 98.8% این بازار را در اختیار دارند. Shopee با سهم 53% و مقام اول در تمام شش کشور کلیدی پیشتاز است، در حالی که GMV ترکیب TikTok Shop + Tokopedia به 65.7% GMV Shopee رسیده است.

بیشترین رشد در تایلند (+51.8% در سال) و مالزی (+47.6%) است و بزرگترین بازار همچنان اندونزی با 37% گردش مالی منطقه است. برای نظارت بر قیمت‌ها، این به معنای یک چیز ساده است: اگر شما در منطقه‌ای فروش می‌کنید یا کالا را از آنجا تهیه می‌کنید، باید به چندین کشور نگاه کنید و هر کدام دارای ویترین خاص خود هستند.

چه چیزی مانع از پارس کردن بازارهای جنوب شرقی آسیا می‌شود

1. هر کشور یک وب‌سایت جداگانه است

در Shopee یک فروشگاه واحد وجود ندارد: این یک مجموعه از دامنه‌های ملی است — shopee.co.id (اندونزی)، shopee.com.my (مالزی)، shopee.ph (فیلیپین)، shopee.sg (سنگاپور)، shopee.co.th (تایلند)، shopee.vn (ویتنام)، یک ویترین جداگانه در تایوان و همچنین shopee.com.br، shopee.com.mx، shopee.cl و shopee.com.co در آمریکای لاتین. Lazada در شش کشور فعالیت می‌کند: سنگاپور، مالزی، اندونزی، فیلیپین، تایلند و ویتنام. ارز، تنوع محصولات، تبلیغات و حتی موجودی کالا از کشوری به کشور دیگر متفاوت است.

Tokopedia یک پلتفرم کاملاً اندونزیایی است. از سال 2024، این پلتفرم با TikTok Shop اندونزی ادغام شده است: به درخواست مقررات اندونزی که شبکه‌های اجتماعی و تجارت را جدا می‌کند، تراکنش‌های TikTok Shop در کشور به سیستم Tokopedia منتقل شده است. برای جمع‌آوری داده‌ها، این به معنای IP های اندونزیایی و محلی اندونزیایی است، بدون گزینه‌های دیگر.

2. IP خارجی — بلافاصله مشکوک است

در توضیحات اسکرپر محبوب Lazada در Apify به وضوح ذکر شده است: Lazada IP های دیتاسنتر غیر منطقه‌ای را با بررسی ضد ربات مسدود می‌کند و جمع‌آوری معتبر به پروکسی‌های مقیم در کشور هدف نیاز دارد. به گفته نویسنده، دیتاسنتر در چنین طرحی معمولاً مسدود می‌شود.

3. Shopee داده‌ها را با ورود به سیستم مسدود می‌کند

راهنماهای Shopee در سال 2026 به یک نتیجه می‌رسند: داده‌های کامل محصولات تنها در یک جلسه معتبر ارائه می‌شوند. درخواست‌های غیرمعتبر پاسخ‌های خالی یا خطا دریافت می‌کنند و در پاسخ‌های داخلی نشانه is_login: false وجود دارد. به همین دلیل بسیاری از اسکرپرهای آماده از شما می‌خواهند که کوکی یک جلسه زنده Shopee را وارد کنید — و بلافاصله پروکسی مقیم را توصیه می‌کنند تا این جلسه را از دست ندهید.

4. حفاظت چند لایه

علاوه بر ورود به سیستم، پلتفرم‌ها از اثر انگشت‌گذاری مرورگر، کپچا، محدودیت‌ها بر اساس IP و حساب کاربری استفاده می‌کنند و API های داخلی و طراحی صفحات به طور منظم تغییر می‌کنند. دایرکتوری ScrapeOps پیچیدگی پارس کردن Shopee را 7 از 10 ارزیابی می‌کند و از میان حفاظت‌ها Cloudflare و Akamai را ذکر می‌کند. تأمین‌کنندگان API های آماده به طور صادقانه هشدار می‌دهند: وقتی Shopee نقاط پایانی داخلی را تغییر می‌دهد، جمع‌آوری ممکن است به طور موقت کاهش یابد.

ابتدا API رسمی را بررسی کنید

قبل از ساخت اسکرپر، به این سؤال پاسخ دهید: داده‌های چه کسی برای شما مهم است؟

  • داده‌های فروشگاه خودتان (سفارشات، موجودی‌ها، قیمت‌ها) — از طریق Shopee Open Platform و Lazada Open Platform دریافت کنید. دسترسی با تأیید هویت فروشگاه خاص ارائه می‌شود: فروشنده برنامه را متصل می‌کند، توکن‌ها را دریافت می‌کند و فقط با داده‌های خود کار می‌کند.
  • لینک‌ها و کاتالوگ‌های وابسته برای ناشران — Lazada یک API وابسته جداگانه برای وب‌سایت‌های کوپن و مقایسه قیمت دارد.
  • قیمت‌ها و تنوع محصولات رقبای شما — دسترسی رسمی وجود ندارد. این همان وظیفه‌ای است که برای پارس کردن صفحات عمومی وجود دارد و در اینجا به پروکسی نیاز است.

API رسمی همیشه پایدارتر و ایمن‌تر است. اسکرپینگ باید فقط برای مواردی که در API وجود ندارد، ساخته شود.

طرح مرحله به مرحله جمع‌آوری

  1. ماتریس «کشور × وظیفه» را ثبت کنید. به عنوان مثال: قیمت 500 SKU در shopee.co.id و shopee.co.th یک بار در روز، موجودی 50 محصول برتر در lazada.com.my هر 6 ساعت. برای هر سلول — دامنه خاص خود، ارز خاص خود، و مجموعه IP خاص خود.
  2. پروکسی جغرافیایی را به دقت برای ویترین انتخاب کنید. ویترین اندونزیایی — IP اندونزیایی، ویترین تایلندی — IP تایلندی. نباید ترکیب شوند: IP از سنگاپور در shopee.vn به همان اندازه مشکوک به نظر می‌رسد که IP از آلمان.
  3. وظایف را بر اساس نوع جلسه تقسیم کنید. صفحات عمومی که بدون ورود به سیستم باز می‌شوند (لیست‌های Lazada، صفحات فروشگاه‌ها) می‌توانند با چرخش IP جمع‌آوری شوند. هر چیزی که به ورود به سیستم در Shopee نیاز دارد — فقط از طریق یک جلسه ثابت (sticky): یک حساب = یک IP در تمام مدت زندگی جلسه.
  4. اثر انگشت مرورگر را «محلی» کنید. منطقه زمانی، زبان رابط و محلی باید با کشور IP مطابقت داشته باشد: Asia/Jakarta و id-ID برای اندونزی، Asia/Bangkok و th-TH برای تایلند. اثر انگشت را در داخل پروفایل ثابت نگه دارید و user-agent را در وسط جلسه تغییر ندهید — عدم ثبات در منطقه زمانی، فونت‌ها و UA دلیل اصلی «جلسات شکننده» نامیده می‌شود.
  5. با سرعت پایین شروع کنید. در راهنمای Pixelscan به عنوان یک نقطه شروع، 30–100 درخواست در دقیقه برای هر حساب (از حد پایین شروع کنید)، 1–3 صفحه موازی برای هر پروفایل و پراکندگی زمان‌ها ±20–40% ذکر شده است. این اعداد تقریبی نویسنده هستند و نه محدودیت‌های اندازه‌گیری شده Shopee، بنابراین آن‌ها را بر اساس داده‌های خود کالیبره کنید.
  6. کش کنید و درخواست‌های اضافی نکنید. کارت محصولی که قیمت آن هر روز تغییر می‌کند، نیازی به دور زدن هر 10 دقیقه ندارد. کش به مدت 5–60 دقیقه بار و مصرف ترافیک را کاهش می‌دهد.
  7. تنظیمات بازگشت را در صورت دریافت سیگنال‌های حفاظتی انجام دهید. کپچا، تغییر مسیر به ورود به سیستم یا 302 — دلیلی برای متوقف کردن پروفایل است: 3–5 تکرار با وقفه 5–15 ثانیه، سپس «خنک کردن» به مدت 15–60 دقیقه، نه فشار به همان IP.
  8. به معیارها توجه کنید. نسبت کپچا بالای 0.5–2% و نسبت تغییر مسیرها به ورود به سیستم بالای 0.5–1% — سیگنال‌های نگران‌کننده هستند، بالای 5% کپچا — زمان تغییر رویکرد است. IP که سه بار متوالی خطا داده است، از مجموعه خارج کنید؛ اینکه چگونه این بررسی را خودکار کنید، به تفصیل در مقاله‌ای درباره بررسی سلامت برای مجموعه پروکسی توضیح داده شده است.

دام‌های پنهان

  • کوکی — کلید حساب است. کوکی جلسه Shopee دسترسی کامل به حساب را فراهم می‌کند. آن را بدون نیاز به خدمات خارجی منتقل نکنید و در پیکربندی‌های باز ذخیره نکنید.
  • تایوان و آمریکای لاتین — بازارهای جداگانه هستند. اگر وظیفه مربوط به برزیل یا مکزیک است، پروکسی لاتی‌ن آمریکایی نیاز است، نه آسیایی.
  • ارز و فرمت قیمت‌ها. روپیه اندونزی، دونگ ویتنام و بات تایلندی به طور متفاوتی فرمت می‌شوند؛ بدون نرمال‌سازی، مقایسه قیمت‌ها در کشورهای مختلف به زباله تبدیل می‌شود.
  • TLS و هدرها. حتی بهترین IP مقیم هم نجات‌دهنده نخواهد بود اگر کلاینت HTTP خود را با اثر انگشت TLS معرفی کند. اگر بدون مرورگر کار می‌کنید، بررسی JA4 و curl_cffi را ببینید.
  • قوانین پلتفرم‌ها. فقط داده‌های عمومی را جمع‌آوری کنید، شرایط استفاده و قوانین محلی را رعایت کنید، و به داده‌های شخصی خریداران دست نزنید. هر چه بیشتر به مناطق تحت ورود به سیستم بروید، ریسک قانونی بالاتر می‌رود.

کدام پروکسی را انتخاب کنیم

پروکسی‌های مقیم با انتخاب کشور — انتخاب پایه‌ای برای هر سه پلتفرم است. آن‌ها IP های ارائه‌دهندگان خانگی کشور مورد نظر را فراهم می‌کنند و دقیقاً همین چیزی است که Lazada و Shopee نیاز دارند. برای لیست‌ها از چرخش استفاده کنید، برای جلسات معتبر — از IP ثابت. انتخاب کشور و حالت چرخش را می‌توانید در بخش پروکسی‌های مقیم ProxyCove پیدا کنید.

پروکسی‌های موبایل در جاهایی که «انسانی‌ترین» بودن حساب مهم است، مفید خواهند بود: پروفایل‌های فروشندگان با عمر طولانی، کار از طریق نسخه‌های موبایل پلتفرم‌ها، وظایف با حساسیت بالا به مسدود شدن. آن‌ها به ازای هر گیگابایت گران‌تر هستند، بنابراین آن‌ها را به صورت هدفمند استفاده کنید — برای حساب‌ها، نه برای دور زدن انبوه کاتالوگ. جزئیات در صفحه پروکسی‌های موبایل موجود است.

پروکسی‌های دیتاسنتری برای این پلتفرم‌ها مناسب نیستند: به گفته توسعه‌دهندگان اسکرپرها، Lazada آن‌ها را در ورودی مسدود می‌کند. آن‌ها را برای وظایف کمکی نگه دارید — به عنوان مثال، بررسی در دسترس بودن خدمات خودتان.

نتیجه‌گیری

پارس کردن Shopee، Lazada و Tokopedia یک وظیفه واحد نیست، بلکه مجموعه‌ای از وظایف بر اساس کشورها است. طرح کاری حول سه قانون ساخته می‌شود: IP از همان کشور که ویترین است؛ جلسه ثابت برای هر چیزی که به ورود به سیستم نیاز دارد؛ شروع آهسته با بازگشت در صورت دریافت اولین نشانه‌های حفاظتی. ابتدا بررسی کنید که آیا API رسمی نیاز شما را برآورده می‌کند یا خیر، و برای نظارت بر رقبای خود، مجموعه‌ای از پروکسی‌های مقیم برای کشورهای مورد نیاز منطقه جمع‌آوری کنید و از روز اول نسبت کپچا را اندازه‌گیری کنید.