Eğer pazar yerlerinde satış yapıyorsanız veya bir e-ticaret mağazasını yönetiyorsanız, rakiplerinizin fiyatlarının günde birkaç kez değiştiğini bilirsiniz. Manuel izleme, kaybedilen saatler ve kaçırılan kazanç demektir. Otomatik veri toplama bu sorunu çözer, ancak siteler ve pazar yerleri aktif olarak parseleri engeller. Bu yazıda, fiyat izlemeyi nasıl ayarlayacağınızı, böylece isteklerinizin asla tespit edilmediği ve engellenmediği bir şekilde ele alıyoruz.
Siteler neden fiyat izlemeyi engelliyor ve sizi nasıl tespit ediyorlar
İzlemeyi ayarlamadan önce, sitelerin koruma mantığını anlamak önemlidir. Pazar yerleri ve e-ticaret mağazaları, rakiplerin fiyatlarını takip etmek istediğini çok iyi biliyor — ve buna aktif olarak karşı koyuyorlar. Koruma, aynı anda birden fazla seviyede çalışır.
İsteklerin sıklığının analizi
Normal bir alıcı, ürün sayfasına birkaç dakikada veya saatte bir girer. Parselere, bir IP adresinden dakikada yüzlerce istek gönderir. Antibot sistemleri (Cloudflare, Imperva, DataDome) bu tür bir anomaliyi hemen fark eder ve IP'yi engeller. Bu nedenle, otomatik veri toplama sırasında tek bir adresle çalışmak neredeyse imkansızdır.
IP adresinin ait olduğu yerin kontrolü
Her IP adresinin bir geçmişi ve ait olduğu yer vardır. Veri merkezi adresleri (AWS, Google Cloud, Hetzner) veritabanları aracılığıyla kolayca tanımlanabilir — siteler, bu adreslerden botların ve parselerin çalıştığını bilir ve bunları baştan engeller. Gerçek ev kullanıcılarına ait olan konut IP'leri, çok daha az şüphe uyandırır.
Davranış analizi
Modern koruma sistemleri yalnızca IP'yi değil, aynı zamanda davranışları da analiz eder: kaydırma hızı, fare hareketleri, eylemler arasındaki duraklamalar, sayfanın kaynaklarının yüklenme sırası. Eğer istekler tam bir programa göre, rastgele duraklamalar olmadan geliyorsa — bu, engelleme için bir sinyaldir.
Coğrafi kısıtlamalar
Bazı platformlar, bölgeye bağlı olarak farklı fiyatlar gösterir. Örneğin, Wildberries Moskova ve Novosibirsk için farklı fiyatlar gösterebilir. Belirli bir bölge için fiyatları izliyorsanız, proxy'nizin bu bölgeye ait bir IP'ye sahip olması gerekir — aksi takdirde alakasız veriler elde edersiniz.
Bilmeniz gereken önemli noktalar:
Wildberries ve Ozon, aynı anda birkaç koruma seviyesi kullanır. Sadece bir proxy yeterli değildir — doğru rotasyon, doğru istek başlıkları ve parseler için uygun ayar gereklidir.
Fiyat izleme için hangi proxy'ler uygundur: türlerin karşılaştırması
Tüm proxy'ler fiyat izleme için eşit derecede faydalı değildir. Seçim, hangi siteleri izlediğinize, verilerin ne sıklıkla güncellenmesi gerektiğine ve ayırmaya hazır olduğunuz bütçeye bağlıdır. Her türü ayrıntılı olarak inceleyelim.
| Proxy Türü | Güven Düzeyi | Hız | En iyi için | Maliyet |
|---|---|---|---|---|
| Konut | Çok yüksek | Ortalama | Wildberries, Ozon, korumalı siteler | Ortalama — yüksek |
| Mobil | Maksimum | Ortalama | Sert koruma olan platformlar, sitelerin mobil versiyonları | Yüksek |
| Veri merkezleri | Düşük | Yüksek | Ciddi koruma olmayan siteler, küçük mağazalar | Düşük |
Konut proxy'leri — çoğu görev için en iyi seçim
Konut proxy'leri, gerçek ev kullanıcılarının IP adreslerini kullanır. Site açısından, ona normal bir alıcıdan, bir daireden veya ofisten erişim sağlanıyormuş gibi görünür — hiçbir şüphe yok. Bu, onları Wildberries, Ozon, Avito ve diğer birçok platformda izleme için ideal hale getirir. Ana avantajı — coğrafi konum seçme imkanıdır: belirli bir şehir veya bölge için IP alabilirsiniz, bu da bölgesel fiyatların doğru izlenmesi için kritik öneme sahiptir.
Döngüsel konut proxy'leri, her istekte veya belirli bir aralıkta IP adresini otomatik olarak değiştirir. Bu, bir adres geçici bir kısıtlama altına girse bile, bir sonraki isteğin farklı bir IP ile gönderileceği anlamına gelir — izleme kesintiye uğramaz.
Mobil proxy'ler — en korumalı platformlar için
Mobil IP'ler, mobil operatörlerin (MTS, Beeline, MegaFon) adresleridir. Bu adreslerin bir benzersiz özelliği vardır: bir mobil IP'nin arkasında binlerce gerçek kullanıcı olabilir (operatör aracılığıyla NAT). Bu nedenle, siteler mobil adresleri çok nadir engeller — gerçek alıcıları etkileme riski çok yüksektir. Eğer agresif antibot korumasına sahip bir platformu izliyorsanız ve konut proxy'leri zaman zaman engelleniyorsa — mobil proxy'lere geçin.
Veri merkezi proxy'leri — sadece basit görevler için
Veri merkezi proxy'leri hızlı çalışır ve ucuzdur, ancak kolayca tanınabilir. Çoğu ciddi pazar yeri, yoğun çalışma süresince bunları birkaç dakika içinde engeller. Ciddi koruma olmayan küçük e-ticaret mağazalarını izlemek veya parseler için ön test yapmak için uygundurlar.
Wildberries, Ozon, Avito ve diğer platformlarda veri toplamanın özellikleri
Her büyük platformun kendine özgü koruma özellikleri vardır. Bu özellikleri anlamak, izlemeyi doğru bir şekilde ayarlamanızı ve kaynakları boşa harcamamanızı sağlar.
Wildberries
Wildberries, Rusya'daki en zor parselenen pazar yerlerinden biridir. Platform, içeriği JavaScript aracılığıyla dinamik olarak yüklemeyi aktif olarak kullanır, bu da demektir ki: basit bir HTTP isteği size fiyat vermez — sayfanın tamamen tarayıcı tarafından çizilmesi gerekir. Ayrıca, WB aktif olarak sayfa yapısını ve API uç noktalarını değiştirir, bu da parseleri bozar.
Wildberries için, Rus IP'leri ile döngüsel konut proxy'leri en uygunudur. İstek sıklığı — her IP için 3–5 saniyede bir istekte bulunmaktan daha sık olmamalıdır. Ayrıca, gerçek bir kullanıcının davranışını taklit etmek de önemlidir: rastgele duraklamalar, doğru tarayıcı başlıkları (User-Agent, Accept-Language).
Ozon
Ozon, Cloudflare tabanlı bir koruma sistemi ve kendi antibot çözümlerini kullanır. Platform, TLS parmak izi (bağlantının dijital izini) analiz eder — bu, iyi bir proxy ile bile isteğin, gerçek bir tarayıcıdan geliyormuş gibi görünmüyorsa engellenebileceği anlamına gelir. Ozon için, tarayıcıyı tamamen taklit eden araçlar (headless Chrome, Playwright) kullanmanız önerilir, basit HTTP istemcileri yerine.
Avito
Avito, orta düzeyde bir korumaya sahiptir, ancak veri merkezi IP'lerini aktif olarak engeller. Rus adreslerine sahip konut proxy'leri istikrarlı bir şekilde çalışır. Avito'nun özelliği — bölgesel olmasıdır: fiyatlar ve ilanlar şehirler arasında büyük farklılıklar gösterir. Eğer belirli bir bölgede rakipleri izliyorsanız, mutlaka o bölgenin IP'sine sahip proxy'ler kullanmalısınız, aksi takdirde veriler alakasız olacaktır.
Yandex.Market ve diğer agregatörler
Yandex.Market, botları tespit etmek için gelişmiş bir sistem kullanır — şirketin kaynakları göz önüne alındığında bu şaşırtıcı değildir. Platform, davranışı, istek sıklığını ve bağlantı özelliklerini analiz eder. İstikrarlı bir izleme için, istekler arasında en az 5–10 saniye duraklama ile döngüsel konut proxy'leri gereklidir.
Coğrafi konum önerisi:
Rus pazar yerlerini izlerken her zaman Rus IP'leri ile proxy kullanın. Yabancı IP, farklı fiyatlar, farklı ürün yelpazesi sunabilir veya coğrafi konum seviyesinde tamamen engellenebilir.
Kod olmadan fiyat izleme için hazır araçlar
Kod yazmayanlar için iyi haber: rakip fiyatlarını izlemek için ayarlamayı birkaç saat içinde yapmanızı sağlayan hazır hizmetler ve araçlar vardır. Tek yapmanız gereken proxy'yi bağlamak ve neyi izlemek istediğinizi belirtmektir.
Fiyat izleme için özel hizmetler
Priceva, Competera ve benzeri Rus hizmetleri gibi platformlar, hazır bir çözüm sunar: rakiplerin sayfa URL'lerini ekliyorsunuz, kontrol takvimini belirliyorsunuz, uygun formatta raporlar alıyorsunuz. Birçoğu kendi proxy'lerinizi bağlamayı destekler — bu, coğrafi konumu ve IP adreslerinin kalitesini kontrol etmek istiyorsanız önemlidir.
No-code parseler: Octoparse, ParseHub, Apify
Octoparse ve ParseHub, sürükle-bırak arayüzüne sahip görsel parselerdir. Sayfanın öğelerine (fiyat, ürün adı, stok durumu) "tıklayarak" aracı kendisi nasıl çıkaracağını anlar. Her ikisi de standart formatta proxy bağlantısını destekler: host:port:login:password. Apify, popüler siteleri parselamak için hazır "aktörler" (şablonlar) sunan daha güçlü bir platformdur, pazar yerleri de dahil.
Google Tablo + IMPORTXML/IMPORTHTML
Basit görevler için — ciddi koruma olmadan 10–20 sayfayı izlemek için — Google Tablo'nun yerleşik işlevlerini kullanabilirsiniz. IMPORTXML ve IMPORTHTML, verileri web sayfalarından doğrudan tabloya çekmenizi sağlar. Eksik: proxy desteği yoktur ve yalnızca basit statik sayfalarla çalışır. Pazar yerleri için bu yöntem uygun değildir.
Manuel izleme için anti-detect tarayıcılar
Farklı bölgelerden fiyatları periyodik olarak manuel olarak kontrol etmeniz gerekiyorsa — örneğin, ürününüzün Yekaterinburg'daki bir alıcı için nasıl göründüğünü görmek — Dolphin Anty, AdsPower veya GoLogin gibi anti-detect tarayıcılar kullanışlı bir araç olacaktır. İhtiyacınız olan coğrafi konumla ayrı bir tarayıcı profili oluşturursunuz, gerekli şehirdeki IP ile proxy'yi bağlarsınız ve rakip sayfasını açarsınız. Her profil, ayrı bir benzersiz kullanıcı gibi görünür.
Fiyat izleme için proxy nasıl ayarlanır: adım adım kılavuz
Popüler bir izleme aracına proxy bağlama örneği üzerinden pratik ayarları inceleyelim. Prensip, çoğu no-code çözüm için aynıdır.
Adım 1: Proxy verilerini alın
Proxy satın aldıktan sonra, bağlantı için verileri şu formatta alırsınız: host (IP veya alan adı), port, kullanıcı adı ve şifre. Döngüsel konut proxy'leri için genellikle bir uç nokta verilir — her istekte otomatik olarak IP değişiminin gerçekleştiği geçit adresi. Bu verileri not edin — bir sonraki adımda ihtiyaç duyacaksınız.
Adım 2: Protokolü seçin — HTTP veya SOCKS5
Çoğu parsel aracı her iki protokolü de destekler. HTTP proxy'leri — evrensel bir seçenektir, her araçla çalışır. SOCKS5 — daha esnek bir protokoldür, her türlü trafiği destekler ve proxy kullanımını gizleme konusunda daha iyidir. Fiyat izleme için, aracınız destekliyorsa SOCKS5 öneririz.
Adım 3: Octoparse'da ayarlama (örnek)
Octoparse'da Ayarlar → Proxy Ayarları menüsüne gidin. Özel Proxy modunu seçin. Proxy verilerinizi girin: host, port, kullanıcı adı, şifre. Bağlantıyı Test Et butonuna tıklayın — araç, proxy'nin çalışabilirliğini kontrol edecek ve yeni IP adresinizi gösterecektir. Test başarılı olduysa — proxy bağlanmıştır. Artık parselerinizin tüm istekleri bu proxy üzerinden gidecektir.
Adım 4: Rotasyon ve gecikmeleri ayarlayın
Bu, birçok kişinin atladığı kritik bir adımdır. İyi bir proxy ile bile agresif parseler tespit edilecektir. Aşağıdaki parametreleri ayarlayın:
- İstekler arasındaki gecikme: Wildberries ve Ozon için en az 3–5 saniye, daha az korumalı siteler için 1–2 saniye
- IP rotasyonu: her 10–20 istekte veya her 5–10 dakikada bir IP değiştirin
- Rastgele duraklamalar: sabit bir gecikme yerine rastgele bir aralık kullanın (örneğin, 3 ile 8 saniye arasında)
- User-Agent: gerçek tarayıcıların (Chrome, Firefox) güncel User-Agent dizelerini kullanın
Adım 5: Başlatmadan önce test edin
Tam kapsamlı izlemeye başlamadan önce bir test yapın: 10–20 sayfayı parselleyin ve tüm verilerin doğru bir şekilde toplanıp toplanmadığını ve engellemelerin olup olmadığını kontrol edin. Eğer bazı istekler 403 hatası (erişim yasak) veya CAPTCHA döndürüyorsa — gecikmeleri artırın ve rotasyon ayarlarını kontrol edin.
Fiyat parselerken sık yapılan hatalar ve bunlardan nasıl kaçınılır
Fiyat izleme ile ilgili çoğu problem, aynı hatalardan kaynaklanmaktadır. En yaygın olanlarını inceleyelim.
Hata 1: Tüm istekler için tek bir IP kullanmak
İyi bir konut IP'niz olsa bile — bunu ardışık yüzlerce istek için kullanmayın. Kısa bir süre içinde çok fazla istek yapan herhangi bir IP engellenecektir. Rotasyonel proxy'ler veya birkaç IP adresinden oluşan bir havuz kullanarak yükü bunlar arasında dağıtın.
Hata 2: Coğrafi konumu göz ardı etmek
Eğer rakibin fiyatlarını Moskova'da izliyorsanız, Novosibirsk veya Almanya'dan bir IP kullanıyorsanız — yanlış veriler alırsınız. Wildberries, Ozon ve Avito'da fiyatlar ve teslimat koşulları bölgeye bağlıdır. Her zaman, görevinizle ilgili coğrafi konuma uygun proxy'ler seçin.
Hata 3: Çok yüksek istek sıklığı
Verileri mümkün olan en hızlı şekilde almak istemek, parselerin her 0,1–0,5 saniyede bir istek yapmasına neden olur. Bu tür bir aktivite anında tespit edilir. Fiyatlar her saniye değişmez — genellikle onları saatte bir veya birkaç saatte bir kontrol etmek yeterlidir. Sıklığı azaltın — ve izleme istikrarı önemli ölçüde artacaktır.
Hata 4: Zor platformlar için ucuz veri merkezi proxy'leri kullanmak
Birçok kişi en ucuz veri merkezi proxy'leri ile başlar ve neden Wildberries'in 5 dakika içinde bunları engellediğine şaşırır. Ciddi pazar yerleri için konut veya mobil proxy'ler gereklidir. Proxy'lerde tasarruf etmek, engellemelerle mücadele etmek için harcanan zaman kaybına yol açar.
Hata 5: Proxy'nin çalışabilirliğini izlememek
Proxy'ler geçici olarak çalışmayabilir, yüksek gecikme süresine sahip olabilir veya hatalar döndürebilir. Eğer bunu kontrol etmezseniz, izleme sessizce "bozulabilir" — veriler güncellenmeyi durdurur ve bunu ancak birkaç gün sonra öğrenirsiniz. Araçlarınızdaki hatalar için uyarılar ayarlayın veya periyodik olarak verilerin güncelliğini manuel olarak kontrol edin.
Farklı görevler için çalışan izleme şemaları
Yenilik yapmamak için, satıcılar ve pazarlamacılar için tipik görevler için belirli şemaları inceleyelim.
Şema 1: Wildberries'de rakip fiyatlarını izleme — satıcılar için
Görev: Wildberries'de 50–100 rakip ürünün fiyatlarını izlemek, güncellemeler 2–4 saatte bir.
Araçlar: Özel bir hizmet (Priceva veya benzeri) veya WB için hazır bir aktör ile Apify.
Proxy: Rus IP'leri ile döngüsel konut proxy'leri. Yük dağılımı için 50 adreslik bir havuz.
Ayarlar: İstekler arasında 5–8 saniye gecikme, rastgele aralık, her 15 istekte IP rotasyonu.
Sonuç: Rakiplerin fiyatları hakkında güncel veriler her 2–4 saatte bir, fiyat değişikliklerinde %5'ten fazla otomatik uyarılar.
Şema 2: Avito'da bölgesel fiyat izleme — yerel işletmeler için
Görev: Belirli bir şehirde (örneğin, Krasnodar) Avito'daki rakiplerin fiyatlarını izlemek, güncellemeler günde bir kez.
Araçlar: Avito için ayarlanmış bir şablon ile Octoparse veya ParseHub.
Proxy: Belirli bir şehir veya bölgeye ait IP'leri olan konut proxy'leri. Önemli: IP, yerel fiyatları almak için gerekli şehre uygun olmalıdır.
Ayarlar: Günde bir kez başlatma, 3–5 saniye gecikme, statik IP (düşük sıklıkta agresif rotasyona gerek yok).
Sonuç: Bölgenizdeki rakiplerin fiyatları hakkında günlük rapor, Excel veya Google Tablo'ya aktarma.
Şema 3: Rakiplerin reklam tekliflerini izleme — pazarlamacılar için
Görev: Rakiplerin sitelerindeki ve reklam ilanlarındaki kampanyaları, indirimleri ve özel teklifleri izlemek.
Araçlar: Siteler için bir parsel aracı (Apify) + ilanları izlemek için reklam izleme araçları kombinasyonu.
Proxy: Hedef pazarın coğrafi konumuna sahip konut proxy'leri. Farklı bölgeler için reklam izliyorsanız — aynı anda birkaç bölgenin proxy'lerine ihtiyacınız var.
Ayarlar: Günde 2–3 kez kontrol, her yeni oturumda IP rotasyonu.
Sonuç: Rakiplerin pazarlama faaliyetleri hakkında hızlı bilgi, kampanyalarına hızlı tepki verme imkanı.
Şema 4: Yabancı pazar yerlerinde fiyat izleme — ithalatçılar için
Görev: AliExpress, Amazon, eBay'deki tedarikçilerin ve rakiplerin fiyatlarını izlemek.
Araçlar: Amazon ve AliExpress için hazır aktörlerle Apify veya özel izleme hizmetleri.
Proxy: Hedef pazar yerinin ülkesine ait IP'leri olan konut proxy'leri (Amazon için ABD, AliExpress için Çin veya ABD). Bu önemlidir, çünkü fiyatlar ziyaretçinin ülkesine bağlı olarak farklılık gösterebilir.
Ayarlar: 6–12 saatte bir güncelleme, 5–10 saniye gecikme, her 20 istekte IP rotasyonu.
Fiyat izlemeye başlamadan önce kontrol listesi:
- ✅ Görev için uygun proxy türü seçildi (pazar yerleri için konut)
- ✅ Proxy'nin coğrafi konumu hedef pazarla uyumlu
- ✅ IP rotasyonu ayarlandı
- ✅ İstekler arasındaki gecikmeler ayarlandı (en az 3–5 sn)
- ✅ Tam başlatmadan önce 10–20 sayfada test edildi
- ✅ Hatalar veya fiyat değişiklikleri için uyarılar ayarlandı
- ✅ Güncellemeler için bir takvim belirlendi (gerektiğinden daha sık değil)
Sonuç
Rekabetçi fiyatların otomatik izlenmesi, sadece bir kolaylık değil, aynı zamanda bir rekabet avantajıdır. Wildberries, Ozon, Avito ve diğer platformlardaki fiyatların nasıl değiştiğini bilerek, hızlı bir şekilde tepki verebilirsiniz: rakiplerin fiyatlarını düşürdüğünde fiyatı azaltmak, yüksek talep dönemlerinde artırmak, doğru zamanda kampanyalar başlatmak. Tüm bunlar, satışlar ve karlılık üzerinde doğrudan etki eder.
İstikrarlı bir izleme için anahtar, doğru seçilmiş proxy'ler ve araçların doğru ayarlanmasıdır. Çoğu Rus pazar yeri için en iyi seçim, Rus IP'leri ile döngüsel konut proxy'leridir: gerçek kullanıcılar gibi görünürler, coğrafi konum seçimini desteklerler ve agresif antibot sistemleri tarafından engellenmezler.
Eğer parseleri özellikle sert bir şekilde engelleyen platformlarla çalışıyorsanız veya maksimum istikrar gerekiyorsa — mobil proxy'leri düşünün: bunlar çok nadir engellenir, çünkü bir mobil IP'nin arkasında binlerce gerçek kullanıcı olabilir.
Küçükten başlayın: rakiplerin 20–30 ana pozisyonunu izlemeye ayarlayın, şemayı test edin, verilerin istikrarını kontrol edin — ardından ölçeklendirin. Doğru ayarlanmış fiyat izleme, ilk ayda geri dönüş sağlar.