← Bloga geri dön

Dünya Genelinde Kamu İhaleleri ve Tekliflerin Parsellenmesi: Proxy Neden Gereklidir ve Yasaklanmamak İçin Ne Yapılmalı

Devlet ihale portallarının neden otomatik veri toplamayı engellediği ve farklı ülkelerde ihaleleri izlemek için hangi proxy'lerin gerektiğine dair detaylı bir analiz.

📅1 Kasım 2026

Rusya, Kazakistan, AB ülkeleri ve ABD'deki ihaleleri izleyen şirketler, er ya da geç aynı sorunla karşılaşırlar: devlet ihale portalı aniden veri vermeyi durdurur, CAPTCHA çıkar veya IP adresi yasaklanır. Bunun nedeni, devlet platformlarının otomatik bilgi toplama işlemlerine karşı aktif bir şekilde korunmasıdır. Neden böyle olduğunu, hangi ülkelerin trafiği özellikle sert bir şekilde filtrelediğini ve ihaleleri istikrarlı bir şekilde izlemek için hangi tür proxy'lerin seçilmesi gerektiğini inceleyelim.

Devlet ihale portalları neden veri toplama işlemlerini engelliyor

Resmi olarak, çoğu ülkede devlet ihale bilgileri kamuya açıktır — bu, bütçe harcamalarının şeffaflığına ilişkin yasaların bir gereğidir. Ancak "kamusal" olmak, "otomatik veri toplama için erişilebilir" anlamına gelmez. Rusya'nın EIS (zakupki.gov.ru), Kazakistan'ın goszakup.gov.kz portalı, Avrupa'nın TED (Tenders Electronic Daily) veya ABD'nin SAM.gov gibi platformlar, tarayıcı üzerinden manuel görüntüleme için tasarlanmıştır, dakikada binlerce isteğe değil.

Bir IP adresinden anormal bir aktivite olduğunda — saniyede onlarca istek, aynı User-Agent, tıklamalar arasında duraksama olmaması — koruma sistemi (genellikle Cloudflare, DataDome veya devlet kurumunun kendi geliştirmesi) bunu bir bot olarak tanır. Sonrasında üç senaryo mümkündür: CAPTCHA gösterimi, IP'nin 15-60 dakika süreyle geçici olarak yasaklanması veya alt ağın tamamen yasaklanması. İhaleleri izleyen bir şirket için bu senaryoların her biri, kaçırılan ihaleler ve kaybedilen paralar anlamına gelir.

Ek bir zorluk, birçok ihale platformunun E-imza (elektronik imza) ile kimlik doğrulama gerektirmesi veya verileri yalnızca tarayıcıda JavaScript kontrolünü geçtikten sonra vermesidir. Bu, sadece IP değiştirmekle yetinmeyeceğiniz anlamına gelir — gerçek bir kullanıcının gerçek bir tarayıcı ortamında davranışını taklit etmeniz gerekir.

Ülkelere göre açık veriler: nerede toplamak en zor

Koruma seviyesi ve API erişilebilirliği, ülkeye bağlı olarak büyük ölçüde değişiklik göstermektedir. İhaleler ve teklif uzmanları tarafından en sık çalışılan ana yargı alanlarını inceleyelim.

Ülke / Bölge Portal Koruma Seviyesi Özellikler
Rusya zakupki.gov.ru, B2B-Center Orta-yüksek Resmi bir API var, ancak sınırlamalar ve kayıt gerektiriyor
Kazakistan goszakup.gov.kz Orta Yüksek hacimli taleplerde sık sık zaman aşımı yaşanıyor
Avrupa Birliği TED (ted.europa.eu) Düşük-orta XML/CSV formatında açık veri, ancak bazı veriler için coğrafi kısıtlamalar var
ABD SAM.gov Yüksek Sert tarayıcı kontrolü, kayıt ve API anahtarı gerektiriyor
Ukrayna Prozorro Düşük Tamamen açık bir API, proxy'lere nadiren ihtiyaç duyuluyor
Birleşik Krallık Contracts Finder, Find a Tender Orta Birleşik Krallık dışındaki taleplere coğrafi kısıtlama uygulanıyor

Tabloyu incelemenin ana sonucu: resmi bir açık API olsa bile, genellikle coğrafi kısıtlamalar veya bir IP'den gelen istek sayısı için sert sınırlamalar geçerlidir. Eğer Birleşik Krallık'tan veri topluyorsanız ve fiziksel olarak başka bir ülkede bulunuyorsanız, istek, bot kontrolü yapılmadan önce reddedilebilir — çünkü IP Birleşik Krallık'tan değildir. İşte burada proxy'lerin rolü başlar: ihtiyaç duyulan coğrafi konumdan veri talep etmenizi ve yükü onlarca adres arasında dağıtmanızı sağlar.

İhale platformları için hangi tür proxy gerekli

Devlet ihale verilerini izlemek için "her durum için bir proxy türü" evrensel bir çözüm değildir. Seçim, hangi platformla çalıştığınıza ve koruma seviyesinin ne kadar agresif olduğuna bağlıdır.

Proxy Türü Ne zaman kullanılmalı Engellenme Riski
Veri merkezi proxy'leri Açık API'ye ve zayıf korumaya sahip portallar (Prozorro, kısmen TED) Orta — veri merkezi alt ağları bazen kara listelerde yer alıyor
Konut proxy'leri Cloudflare/DataDome, coğrafi kısıtlamalara sahip platformlar (SAM.gov, Contracts Finder) Düşük — IP'ler normal ev kullanıcıları gibi görünür
Mobil proxy'ler Belirli ihalelerin kontrolü, düşük istek sıklığı Minimum, ancak trafik maliyeti daha yüksek

Pratikte, birden fazla ülkede ihale izleyen çoğu şirket, açık API'ye sahip platformlar için veri merkezi IP'leri ve ciddi koruma veya kesin coğrafi konum gerektiren yerlerde konut proxy'leri kullanır (örneğin, istek tam olarak Londra'dan gelmelidir, rastgele bir Avrupa noktasından değil). Konut proxy'leri, portalın yalnızca IP'yi değil, aynı zamanda saat dilimi, tarayıcı dili ve istek coğrafyası gibi parametreleri kontrol ettiği durumlarda özellikle faydalıdır — bu parametrelerin uyuşmaması otomatik trafiği hemen ortaya çıkarır.

Veri toplama ayarları: pratik şemalar

Kod yazmayan ancak veri toplama sürecini yükleniciler veya hazır hizmetler aracılığıyla yöneten ihale analistleri için, doğrudan programlamaya dokunmadan ayar mantığını anlamak önemlidir. İşte ihale departmanlarının kullandığı adım adım bir şema:

  1. Hedef portalları belirleyin. İzlenmesi gereken ülkelerden oluşan bir liste oluşturun ve resmi bir API'lerinin olup olmadığını kontrol edin — bu, proxy üzerindeki yükü azaltır.
  2. Coğrafi gereksinimleri kontrol edin. Eğer platform, kendi ülkesinden olmayan talepleri engelliyorsa (örneğin, Birleşik Krallık Contracts Finder), bütçenize gerekli coğrafi konumda konut proxy'leri ekleyin.
  3. IP döngüsünü ayarlayın. Düzenli veri toplama için (günde birkaç kez) IP'nin her 5-15 dakikada bir otomatik olarak değiştirilmesi gerekir, böylece bir adresten gelen istek limitlerini aşmazsınız.
  4. İstekler arasında duraksamalar ekleyin. İnsan davranışını taklit etmek — sayfalara erişimlerde 3-10 saniye bekleme süreleri — anti-bot sistemlerinin tetiklenme olasılığını azaltır.
  5. CAPTCHA ve yasakları izleyin. CAPTCHA sayısındaki artış için bildirim ayarlayın — bu, mevcut IP havuzunun "ısındığını" ve yeni adreslere geçiş yapılması gerektiğini gösterir.
  6. İstek geçmişini saklayın. Her portal için başarılı ve engellenen isteklerin kaydını tutun — bu, belirli bir platform için hangi proxy türünün daha iyi çalıştığını anlamaya yardımcı olur.

Pratikte öneri:

Eğer 3-4 ülkeden ihale izliyorsanız, tüm platformlar için aynı IP havuzunu kullanmaya çalışmayın. Proxy'leri önceden ülkelere göre ayırın — bu, bir portaldaki yasaklamanın diğerinin IP itibarı üzerinde etkili olma riskini azaltır.

İhaleleri izlemek için araçlar

Şirketler genellikle sıfırdan parsel yazmazlar — daha çok hazır çözümler kullanırlar veya birkaç aracı birleştirirler. İşte devlet ihale verilerini toplamak için kullanılan ana kategoriler:

  • Hazır ihale parser'ları — Tenderplan, Kontur.İhaleler, B2B-Center gibi hizmetler, CAPTCHA aşma mantığı zaten entegre edilmiştir, ancak belirli bir portal için ayarlama yapmak proxy gerektirebilir.
  • No-code veri toplama platformları — Octoparse, ParseHub, kod yazmadan görsel arayüz aracılığıyla veri toplama ayarlamanıza olanak tanır ve dış proxy'lerin bağlanmasını destekler.
  • Anti-detect tarayıcılar — Veri toplama işlemi portalda kimlik doğrulama gerektiriyorsa (örneğin, zakupki.gov.ru'daki kullanıcı paneli), Dolphin Anty veya AdsPower gibi araçlar, her biri kendi proxy'si ve benzersiz tarayıcı parmak izi ile birden fazla hesabı aynı anda yönetmenize yardımcı olur.
  • RSS ve portalın kendisinden e-posta bildirimleri — bu mümkün olduğunda (Prozorro gibi), aktif veri toplamaya ve proxy'ye olan ihtiyacı azaltır.

Araç seçimi, hacme bağlıdır: tek bir ülkede 1-2 ihale kategorisini izlemek için ücretsiz RSS bildirimleri yeterli olabilir. Ancak, 5-10 ülkede günlük güncellemelerle kapsamlı bir ihale izleme söz konusuysa, parser + proxy havuzu + IP döngüsü olmadan ilerlemek mümkün değildir.

Devlet ihale verilerini toplarken sık yapılan hatalar

İhaleleri izlerken çoğu yasak, veri toplama işleminin kendisinden değil, ayarlarla ilgili teknik hatalardan kaynaklanmaktadır. İşte yasaklanmaya en sık neden olan durumlar:

  • Çok yüksek istek sıklığı. Tüm ihale kaydını bir oturumda maksimum hızda toplamaya çalışmak neredeyse her zaman CAPTCHA veya IP'nin geçici olarak yasaklanmasıyla sonuçlanır.
  • Aynı IP'yi birden fazla ülke için kullanmak. Eğer bir adres hem Rus hem de Kazak portalına kısa bir süre içinde erişirse, bu her iki koruma sistemi için de şüpheli görünür.
  • User-Agent ve tarayıcı başlıklarını göz ardı etmek. İyi bir proxy ile bile "boş" veya eski tarayıcı başlıklarıyla yapılan bir istek bot olarak tanınabilir.
  • Uzun süreli izleme sırasında döngü eksikliği. Eğer veri toplama işlemi bir IP'den birkaç saat boyunca kesintisiz devam ederse, yasaklanma olasılığı ilk saatten sonra üstel olarak artar.
  • Coğrafi uyumsuzluğu göz ardı etmek. Hollanda'dan gelen bir IP ile Birleşik Krallık portalına yapılan bir istek bir kez geçebilir, ancak düzenli erişimlerde sistem uyumsuzluğu fark edecek ve onay talep etmeye başlayacaktır.

İki kavramı ayırmak önemlidir: verilere erişimin yasal durumu ve portalın kullanım koşullarına (ToS) uyum. Çoğu ülkede devlet ihale bilgileri yasalar gereği kamuya açıktır — bu, bütçe harcamalarının şeffaflığına ilişkin bir gerekliliktir. Ancak, belirli bir portal kendi otomatik erişim kurallarını belirleyebilir: istek limitleri, API için kayıt gereksinimi, izin olmadan toplu veri çekme yasağı.

Pratikte, ihale analitiği ile uğraşan çoğu şirket gri bir alanda çalışmaktadır: veriler kamuya açık ve toplanması bilgiye erişim yasasını ihlal etmez, ancak portalın kullanıcı sözleşmesine resmi olarak aykırı olabilir. Bu, ceza hukuku ihlali değildir, ancak sistematik, agresif bir şekilde makul limitler dışında veri toplama işlemi yapıldığında IP adreslerinin yasaklanma riski ve hatta portal yönetimi ile hukuki yazışmalar olasılığı vardır. Bu nedenle, konut veya veri merkezi proxy'leri aracılığıyla makul bir IP döngüsü, yalnızca teknik bir çözüm değil, aynı zamanda itibar açısından da bir çözümdür: portalın altyapısına olan yükü azaltır ve çatışmaları en aza indirir.

Sonuç

Farklı ülkelerde devlet ihale ve tekliflerini izlemek, engellerden korunma konusunda farklı bir yaklaşım gerektirir. Açık API'lerin sert limitler olmadan çalıştığı yerlerde (Prozorro, kısmen TED), temel bir IP döngüsü yeterlidir. Ancak, ciddi koruma ve coğrafi kısıtlamalara sahip platformlar için — SAM.gov, Contracts Finder, EIS'in belirli bölümleri — daha ciddi bir altyapı gerekecektir: gerekli coğrafi konumda konut proxy'leri, istekler arasında duraksamalar ve gerçek bir kullanıcının davranışını dikkatlice taklit etme.

Eğer ihale izleme sisteminizi kurmaya yeni başlıyorsanız ve birden fazla ülke ile çalışmayı planlıyorsanız, konut proxy'leri ile başlamak mantıklıdır — bu, portal koruma sistemleri tarafından yüksek bir güven düzeyi sağlar ve gerekli coğrafi konumu tam olarak ayarlamanıza olanak tanır. Daha az korumaya sahip açık API'ye sahip platformlar için, veri merkezi proxy'leri kullanarak tasarruf edebilirsiniz — bunlar, agresif korumanın olmadığı yerlerde daha hızlı ve daha ucuzdur.