Gerçek Zamanlı Rekabet Analizi için Proxy: Engellenmeden Veri Toplama Yöntemleri

Rakipleri izlemek, pazarlamacılar, pazar satıcıları ve arbitrajcılar için kritik bir görevdir. Wildberries'de fiyat takibi, Facebook Ads'de reklam kreatiflerinin analizi, Yandex'te pozisyon taraması — bunların hepsi sürekli veri toplamayı gerektirir. Sorun şu ki, platformlar otomatik istekleri aktif olarak engelliyor ve doğru ayarlanmamış proxy kullanmazsanız, birkaç dakika içinde yasaklanırsınız.

Bu rehberde, farklı analiz görevleri için hangi proxy'lere ihtiyaç duyulduğunu, bunların nasıl doğru bir şekilde ayarlanacağını ve gerçek zamanlı veri toplarken engellemelerden nasıl kaçınılacağını inceleyeceğiz.

Neden proxy olmadan rakip verileri toplayamazsınız

Modern platformlar, otomatik taramaya karşı birçok koruma yöntemi kullanıyor. Rakipler hakkında veri toplamaya çalıştığınızda — Ozon'daki fiyatlar, Avito'daki ilanlar, Facebook'taki reklam kreatifleri — güvenlik sistemleri birkaç parametreyi aynı anda izliyor.

İlk ve en belirgin olanı — IP adresiniz. Eğer bir IP'den dakikada 50 farklı ürüne istek gelirse, bu hemen şüphe uyandırır. Normal bir kullanıcı böyle davranmaz. Sistem ya CAPTCHA gösterir ya da birkaç saat veya gün boyunca erişimi hemen engeller.

İkinci parametre — coğrafi konum. Diyelim ki, Rusya'nın 20 şehrindeki rakiplerin fiyatlarını izliyorsunuz. Pazar yerleri, teslimat bölgesine göre farklı fiyatlar gösterir. Eğer tek bir Moskova IP'sinden, Vladivostok, Krasnodar ve Yekaterinburg için fiyatları aynı anda talep ederseniz — sistem bunu fark eder.

Üçüncü faktör — isteklerin sıklığı. Gerçek zamanlı analiz, sürekli veri toplama anlamına gelir: her 5-10 dakikada fiyat değişikliklerini kontrol etmek, her saat arama sonuçlarını güncellemek. IP adreslerinin döngüsünü sağlamazsanız, platformun limitlerini hızla aşarsınız.

Kullanım senaryoları: pazarlardan reklamlara

Rakip analizi için proxy'lere ihtiyaç duyulan belirli görevleri inceleyelim. Her senaryo, proxy türünü seçme ve döngü ayarlama konusunda kendine özgü bir yaklaşım gerektirir.

Pazarlarda fiyat izleme

Eğer Wildberries, Ozon veya Yandex.Market'te satış yapıyorsanız, rakiplerin fiyatlarını izlemek günlük bir gerekliliktir. Fiyatlar, özellikle indirim dönemlerinde günde birkaç kez değişir. Görev: her 10-15 dakikada, nişinizdeki 100-500 rakip ürünün fiyatlarını kontrol etmek.

Wildberries, teslimat bölgesine göre farklı fiyatlar gösterir. Aynı ürün Moskova'da 1500 ruble, Vladivostok'ta ise 1800 ruble olabilir. Tam bir resim elde etmek için, Rusya'nın farklı şehirlerinden proxy'lere ihtiyaç vardır.

Reklam kampanyalarının analizi

Arbitrajcılar ve pazarlamacılar, Facebook Ads, TikTok Ads, Google Ads'de rakiplerin hangi kreatifleri kullandığını sürekli olarak analiz eder. Bunun için reklam kütüphaneleri veya özel casus hizmetleri (AdSpy, PowerAdSpy, Pipiads) kullanılır.

Sorun: ABD, Almanya veya Brezilya'daki rakiplerin hangi reklamları gösterdiğini görmek için, bu ülkelerin IP'leri üzerinden giriş yapmanız gerekir. Facebook, coğrafi konumunuzu belirler ve ilgili reklamları gösterir. Rus IP'si ile Amerikan kreatiflerini göremezsiniz.

Arama sonuçlarındaki pozisyonların izlenmesi

SEO uzmanları, her gün kendi web sitelerinin ve rakiplerinin Yandex ve Google'daki pozisyonlarını yüzlerce anahtar kelime için kontrol eder. Arama motorları, sonuçları kişiselleştirir: bölgeye, arama geçmişine ve cihaza göre farklı sonuçlar gösterir.

Objektif veriler elde etmek için, gerekli bölgelerden "temiz" IP adresleri ile istekler yapmanız gerekir. Eğer St. Petersburg için pozisyonları kontrol ediyorsanız — St. Petersburg IP'si, Kazan için — Kazan IP'si gereklidir.

Avito'daki ilanların taranması

Eğer emlak, otomobil veya Avito'daki herhangi bir başka segmentle çalışıyorsanız, rakiplerin ilanlarını izlemelisiniz: ne zaman yayınlıyorlar, hangi fiyatları belirliyorlar, ne kadar hızlı satıyorlar. Avito, taramayı agresif bir şekilde engelliyor — bir IP'den 20-30 ilan görüntülemesi sonrası CAPTCHA gösteriyor.

Göreviniz için hangi proxy türünü seçmelisiniz

Üç ana proxy türü vardır ve rakip analizi için uygun seçenekler, platforma ve veri hacmine göre değişir.

Seçim önerileri

Pazar yerleri için (Wildberries, Ozon, Yandex.Market): Veri merkezi proxy'leri ile başlayın. Doğru döngü ayarlanırsa, %80 oranında başarı sağlarlar ve makul bir istek sıklığını aşmazsanız (bir IP'den 3-5 saniyede bir istek). Eğer engellemeler alıyorsanız — konut proxy'lerine geçin.

Reklam analizi için (Facebook Ads, TikTok Ads): Sadece konut veya mobil proxy'ler. Bu platformlar gelişmiş tespit sistemleri kullanır ve veri merkezi proxy'leri anında engellenir. Facebook için en iyisi mobil proxy'ler, TikTok için konut proxy'leri uygundur.

SEO izleme için (Yandex, Google): Veri merkezi proxy'leri yeterlidir. Arama motorları, istekler arasında duraklamalara uyduğunuzda ve gerçek tarayıcı User-Agent'leri kullandığınızda o kadar agresif engellemiyor.

Avito için: Konut proxy'leri. Avito, otomasyona çok duyarlıdır ve veri merkezi proxy'lerini hızla tespit eder. Konut IP'leri ile yüzlerce ilanı engellenmeden tarayabilirsiniz.

Pazarlarda fiyat izleme ayarlama

Wildberries örneği üzerinden rakiplerin fiyatlarını otomatik olarak nasıl izleyebileceğinizi adım adım inceleyelim. Bu aynı algoritma Ozon, Yandex.Market ve diğer platformlar için de geçerlidir.

Adım 1: Tarama aracı seçimi

Kod yazmanıza gerek yok. Fiyat izleme için hazır hizmetler mevcuttur: Priceva, Competera, Price2Spy. Ancak bunlar pahalıdır — aylık 5000 ruble'den başlar. Alternatif olarak, tarayıcı uzantıları veya Octoparse, ParseHub gibi kodsuz araçlar kullanabilirsiniz.

Örnek olarak Octoparse'ı alalım — sayfadaki toplamak istediğiniz öğelere (ürün adı, fiyat, puan) tıklayarak görsel bir tarayıcıdır ve program otomatik olarak bir script oluşturur.

Adım 2: Proxy bağlantısı

Octoparse ayarlarında "Proxy Settings" bölümünü açın. Aşağıdakileri belirtmeniz gerekir:

• Proxy IP adresi — örneğin, 123.45.67.89
• Port — genellikle 8080 veya 3128
• Kullanıcı adı ve şifre — eğer proxy kimlik doğrulaması gerektiriyorsa
• Protokol türü — HTTP veya SOCKS5 (pazar yerleri için HTTP uygundur)

Önemli bir nokta: Eğer farklı bölgelerde fiyatları izliyorsanız, bu şehirlerden bir proxy havuzuna ihtiyacınız var. Örneğin, 5 IP Moskova'dan, 3 St. Petersburg'dan, 2 Yekaterinburg'dan. Her isteğin yeni bir IP üzerinden gitmesi için döngüyü ayarlayın.

Adım 3: İstek sıklığının ayarlanması

Tüm ürünleri aynı anda taramaya çalışmayın. Wildberries, bir IP'den dakikada 50 istek gelirse sizi engeller. Doğru ayarlama:

• İstekler arasındaki gecikme: 3-5 saniye
• Bir oturumda bir IP'den maksimum 10-15 ürün
• Her 15 üründen sonra — IP değişimi (döngü)
• Rastgele User-Agent (farklı tarayıcıları taklit etme)

Octoparse'da bu ayarlar "Advanced Settings" → "Request Interval" (istekler arası süre) ve "IP Rotation" (IP döngüsü) bölümünde ayarlanır.

Adım 4: Veri toplama otomasyonu

Bir programlama ayarlayın: tarayıcı otomatik olarak her 2-4 saatte bir çalışacak ve güncel fiyatları toplayacaktır. Veriler Google Sheets veya Excel'de saklanır, burada otomatik bildirimler ayarlayabilirsiniz — eğer rakip fiyatınızın altına düştüyse, Telegram'da bir uyarı alırsınız.

Rakiplerin reklam kampanyalarının analizi

Arbitrajcılar ve pazarlamacılar için rakiplerin hangi kreatifleri kullandığını, hangi kitlelere hedeflediklerini ve hangi teklifleri öne çıkardıklarını bilmek kritik öneme sahiptir. Bu, yeni bir şey icat etmek yerine başarılı bağlantıları uyarlamanıza olanak tanır.

Facebook Reklam Kütüphanesinin Kullanımı

Facebook, herhangi bir sayfanın tüm aktif ilanlarını görebileceğiniz resmi bir reklam kütüphanesi (Facebook Ad Library) sunar. Sorun: kütüphane, coğrafi konumunuza bağlı olarak farklı içerikler gösterir.

Eğer rakip ABD'ye trafik çekiyorsa ve siz Rus IP'si ile giriş yapıyorsanız — onun Amerikan kreatiflerini göremezsiniz. Çözüm: ABD konut proxy'lerini kullanmak. Antidetekt tarayıcı ile ayarlama:

1. Dolphin Anty veya AdsPower'ı açın — yeni bir tarayıcı profili oluşturun
2. Proxy ayarlarında Amerikan konut proxy'sinin verilerini (IP, port, kullanıcı adı, şifre) belirtin
3. Coğrafi konumu seçin — örneğin, New York veya Los Angeles (proxy IP'si ile eşleşmelidir)
4. Tarayıcı parmak izini ayarlayın — User-Agent, ekran çözünürlüğü, dil — hepsi Amerikan kullanıcısına uygun olmalıdır
5. Bu profil üzerinden Facebook Ad Library'ye giriş yapın — artık ABD'den bir kullanıcı gibi reklamları görebilirsiniz

Reklam analizi için casus hizmetleri

Daha gelişmiş bir seçenek — özel hizmetler kullanmak: AdSpy (Facebook), Pipiads (TikTok), PowerAdSpy (çoklu platform). Bunlar milyonlarca kreatifi toplar ve niş, coğrafya, başlatma tarihi gibi kriterlere göre filtreleme yapmanıza olanak tanır.

Bu hizmetler zaten veri toplamak için proxy kullanıyor, ancak bir sınırlamaları var: yalnızca topladıkları verileri gösteriyorlar. Eğer rakip bir kampanya başlattıysa, casus hizmetin veritabanında henüz olmayabilir.

Kombine bir yaklaşım: nişin genel analizi için casus hizmetleri kullanın, belirli rakipleri gerçek zamanlı izlemek için proxy + antidetekt tarayıcı kullanın.

TikTok Ads analizi

TikTok'un halka açık bir reklam kütüphanesi yok, bu nedenle rakiplerin kreatiflerini görmek için gerekli ülkenin proxy'si üzerinden uygulamaya giriş yapmanız ve akışı kaydırmanız gerekir. Otomasyon için proxy ile Android emülatörleri kullanılır:

• BlueStacks veya LDPlayer — PC için Android emülatörleri
• Gerekli ülkenin mobil proxy'sini ayarlayın
• Emülatörde TikTok'u yükleyin
• Hedef ülkenin coğrafi konumu ile yeni bir hesap oluşturun
• Akışı kaydırın — TikTok, bu bölgeye uygun reklamları gösterecektir

Arama motorlarındaki pozisyonların izlenmesi

SEO uzmanları, her gün yüzlerce anahtar kelime için web sitelerinin pozisyonlarını kontrol eder. Proxy olmadan bu mümkün değildir: Google ve Yandex, otomatik istekleri hızla tespit eder ve CAPTCHA göstermeye başlar.

Pozisyon izleme araçları

Popüler hizmetler: Serpstat, SE Ranking, Ahrefs, Rush Analytics. Hepsi pozisyon kontrolü için proxy kullanıyor, ancak maliyetleri yüksektir — 100-200 anahtar kelime için aylık 2000 ruble'den başlar.

Tasarruf için alternatif: ücretsiz araçları (örneğin, Chrome için SEO Minion uzantısı) proxy ile birleştirerek kullanın. Ayarlama:

1. Chrome'da proxy yönetimi için bir uzantı yükleyin (örneğin, Proxy SwitchyOmega)
2. Gerekli bölgelerin proxy'lerini ekleyin (Moskova'daki pozisyonları kontrol etmek için — Moskova IP'si, Kazan için — Kazan IP'si)
3. SEO Minion'u yükleyin — pozisyonları hızlı kontrol etmek için bir uzantı
4. Her kontrol öncesinde proxy'yi değiştirin, böylece farklı bölgeler için sonuçları görebilirsiniz

Pozisyon kontrolünde sık yapılan hatalar

Hata 1: Tek bir IP'den kontrol. Eğer bir proxy ile ardışık 50 arama isteği yaparsanız, Google CAPTCHA gösterir. Çözüm: her 5-10 istekte IP döngüsü veya istekler arasında 10-15 saniye beklemek.

Hata 2: Coğrafi konumun uyumsuzluğu. Moskova proxy'si kullanıyorsunuz, ancak Vladivostok için pozisyonları kontrol ediyorsunuz — sonuçlar hatalı olacaktır. Her zaman kontrol ettiğiniz bölgenin proxy'sini kullanın.

Hata 3: Kişiselleştirmeyi göz ardı etmek. Proxy ile bile Google, çerezlere dayanarak sonuçları kişiselleştirebilir. Çözüm: gizli mod kullanın veya çerezleri düzenli olarak temizleyin.

Veri toplama otomasyonu için araçlar

Profesyonellerin rakip analizi için kullandığı belirli araçları inceleyelim. Hepsi proxy ile çalışmayı destekler.

No-code tarayıcılar (programlama gerektirmez)

Octoparse — Windows ve Mac için görsel bir tarayıcı. Sayfadaki öğelere (fiyat, ad, puan) tıklayarak program bir script oluşturur. Proxy desteği, görev zamanlayıcı, Excel/Google Sheets'e dışa aktarma. Fiyat: temel kullanım için ücretsiz, gelişmiş özellikler için ayda 75$'dan başlar.

ParseHub — Octoparse'a benzer, tarayıcıda çalışır. Dinamik sitelerin (içeriğin JavaScript ile yüklendiği) taranması için uygundur. Aylık 200 sayfa için ücretsiz planı vardır.

Apify — popüler siteleri taramak için hazır aktörler (scriptler) sunan bulut tabanlı bir platform. Örneğin, Amazon, Instagram, Google Maps için hazır bir aktör vardır. Proxy desteği, kullanım başına ödeme.

Antidetekt tarayıcılar ile manuel analiz

Dolphin Anty — arbitrajcılar arasında popülerdir. Eşsiz parmak izleri ve proxy ile on binlerce tarayıcı profili oluşturmanıza olanak tanır. Facebook, TikTok'taki rakip reklamlarını manuel olarak analiz etmek için uygundur. Fiyat: 10 profile kadar ücretsiz, 100 profil için ayda 89$'dan başlar.

AdsPower — Dolphin'e benzer, daha çok e-ticaret odaklıdır. Amazon, eBay pazar yerleri ile çalışmak için uygundur. Otomasyon için yerleşik araçlar (RPA) vardır.

Multilogin — en pahalı ama en gelişmiş olanıdır. Büyük ajanslar tarafından kullanılır. Fiyatı ayda 99€'dan başlar.

Özel hizmetler

Priceva — pazar yerlerinde fiyat izleme. Wildberries, Ozon, Yandex.Market'teki rakip fiyatlarını otomatik olarak izler. Fiyat: aylık 5000 ruble'den başlar.

AdSpy — Facebook için 100+ milyon reklam kreatifinden oluşan bir veritabanı. Niş, coğrafya, başlatma tarihi, etkileşim gibi filtreler. Fiyat: ayda 149$.

Pipiads — TikTok için AdSpy benzeri bir hizmet. Dünya genelinde kreatif veritabanı, ürün, ülke, tarih filtreleri. Fiyat: ayda 77$'dan başlar.

Sık yapılan hatalar ve nasıl kaçınılır

Doğru ayarlanmış proxy'lerle bile, platformların çalışma nüanslarını dikkate almazsanız engellemeler alabilirsiniz. Tipik hataları inceleyelim.

Hata 1: Çok yüksek istek sıklığı

Birçok kişi "100 proxy'im var, bu yüzden saniyede 100 istek yapabilirim" diye düşünür. Bu doğru değil. Farklı IP'lerden bile, istekler çok sık yapılıp aynı kalıplara (aynı başlıklar, User-Agent, eylem sırası) sahipse, platform bunu fark eder.

Çözüm: Gerçek bir kullanıcının davranışını taklit edin. İstekler arasında rastgele 3-7 saniye beklemeler ekleyin, User-Agent'ı değiştirin, bazen "gereksiz" eylemler yapın (ana sayfaya geçiş, kaydırma).

Hata 2: Kamuya açık veya ucuz proxy kullanımı

Açık listelerden alınan ücretsiz proxy'ler, büyük platformların kara listelerinde uzun zamandır bulunmaktadır. Ucuz proxy'ler (tanesi 10-20 ruble) genellikle yüzlerce kişi tarafından aynı anda kullanılır — bunlardan biri yasaklanırsa, IP kara listeye alınır.

Çözüm: Güvenilir sağlayıcılardan özel proxy'ler kullanın. Evet, bunlar daha pahalıdır, ancak proxy'de tasarruf etmek, engellemelerle mücadele etmek için harcanan zamana yol açar.

Hata 3: IP döngüsünün olmaması

Kaliteli bir proxy bile, çok yoğun kullanıldığında "yanar". Eğer bir IP'den Wildberries'de 500 ürünü bir saatte kontrol ediyorsanız — bu şüpheli.

Çözüm: Otomatik döngüyü ayarlayın. Konut proxy'leri için bu genellikle sağlayıcı düzeyinde yapılır — her istek otomatik olarak havuzdan yeni bir IP üzerinden gider. Veri merkezi proxy'leri için döngüyü tarayıcıda ayarlayın.

Hata 4: Tarayıcı parmak izini göz ardı etmek

Proxy sadece IP adresini değiştirir. Ancak modern platformlar (özellikle Facebook, TikTok) ekran çözünürlüğü, yüklü fontlar, WebGL parmak izi, Canvas parmak izi gibi birçok diğer parametreyi analiz eder.

Eğer IP değişirse ama tarayıcı parmak izi aynı kalırsa — platform tüm eylemlerinizi tek bir oturumda birleştirir ve engeller.

Çözüm: Antidetekt tarayıcılar (Dolphin Anty, AdsPower, Multilogin) kullanın. Her profil için parmak izi parametrelerini otomatik olarak değiştirirler.

Hata 5: Proxy ve hedef bölgenin coğrafi konumunun uyumsuzluğu

Amerikan proxy'si kullanıyorsunuz ama Rus Wildberries'i taramaya çalışıyorsunuz — site farklı fiyatlar gösterebilir veya şüpheli bir coğrafi konum nedeniyle erişimi tamamen engelleyebilir.

Çözüm: Her zaman veri topladığınız ülkenin (ve tercihen şehrin) proxy'sini kullanın. Rus pazar yerlerinde fiyat izlemek için — Rus proxy'leri, Amerikan reklam analizi için — Amerikan proxy'leri kullanın.

Sonuç

Gerçek zamanlı rakip analizi, pazarlamacılar, arbitrajcılar ve pazar satıcıları için kritik bir araçtır. Proxy olmadan kaliteli veri toplamak mümkün değildir: platformlar otomatik istekleri birkaç dakika içinde engeller.

Bu rehberden çıkarılması gereken ana noktalar: platforma bağlı olarak proxy türünü seçin (pazar yerleri için veri merkezi proxy'leri uygundur, sosyal medya ve reklam için konut veya mobil proxy'ler gereklidir), IP döngüsünü ve istekler arasındaki duraklamaları doğru bir şekilde ayarlayın, parmak izinin önemli olduğu görevler için antidetekt tarayıcılar kullanın.

Proxy kalitesinden tasarruf etmeyin — ucuz kamu IP'leri sürekli engellemeler ve zaman kaybına yol açar. Ölçeklendirmeden önce ayarları küçük bir veri hacminde test edin. Ve unutmayın: önemli olan tarama hızı değil, engellemeler olmadan istikrarlı bir şekilde çalışmaktır.

Eğer pazar yerlerinden veya arama motorlarından veri toplamayı planlıyorsanız, veri merkezi proxy'leri ile başlamanızı öneririz — doğru ayarlandığında yüksek hız ve istikrar sağlarlar. Sosyal medya reklam analizi için ise konut proxy'leri daha uygundur, çünkü gerçek kullanıcıları taklit eder ve engellenme riskini en aza indirir.