Proxy sağlayıcısının fiyat listesi, tedarikçileri karşılaştırmayı kolay bir iş haline getiriyor: bir gigabayt 1 dolara, diğer bir gigabayt 8 dolara — aradaki fark sekiz kat. Pratikte, bir dolara gigabayt satın alan ekip, toplanan veriler için düzenli olarak daha fazla ödeme yapıyor, oysa sekiz dolara alan ekip daha az ödüyor. Sebep, pazarlama veya gizli komisyonlarda değil: gigabayt başına fiyat, görevinizin ölçü birimi değildir. Siz trafik satın almıyorsunuz — başarılı bir şekilde elde edilen kayıtlar satın alıyorsunuz ve bu iki büyüklük arasında her projeye özgü bir çarpan zinciri vardır.
Fatura, düşündüğünüz gibi gelmiyor
Tipik bir sahne: bir milyon ürün kartı toplamayı planladınız, sayfa başına 200 KB ayırdınız, hesapladığınız 200 GB ve yaklaşık 1500 dolarlık bir bütçe elde ettiniz. Bir ay sonra kişisel panelde — 900 GB ve tahminin üç katı bir fatura. Hiç kimse sizi kandırmadı: hesaplamada yer almayan üç şey değişti.
Fiyat ile fatura arasındaki fark her zaman aynı bileşenlere ayrılır. Bunları ayrı ayrı incelemek yeterli — ardından formül kendiliğinden oluşur.
Fiyat ile fatura arasındaki üç çarpan
1. Sayfanın gerçek ağırlığı ne kadar?
“200 KB” değerlendirmesi kafadan çıkar ve çıplak HTML ile ilgilidir. Gerçek ağırlık, sayfayı nasıl aldığınıza bağlıdır. Modern bir mağazanın ham HTML yanıtı genellikle yüzlerce kilobayttır. Ancak, headless tarayıcıda tamamen işlenmiş bir sayfa, tüm scriptler, fontlar, resimler ve analizlerle birlikte 2-5 MB ağırlığındadır. Aynı verileri elde etmenin iki yolu arasındaki fark, büyüklük sırasıdır ve bu tamamen trafiğinize yansır.
Sektörel hesaplamalar genellikle, optimize edilmemiş toplama için 1-3 MB ve optimize edilmiş toplama için 100-300 KB aralığını kullanır. Bu iki mod arasında “biraz tasarruf” değil, aynı projede on kat fark vardır.
2. Cevapların ne kadarı gerçekten uygundur?
İkinci çarpan — başarı oranı, uygun içerik döndüren isteklerin oranıdır. Sayfa yerine CAPTCHA, 403, veri olmadan boş bir çerçeve, bir engelleme yönlendirmesi — bunlar, hiçbir kayıt sağlamayan ödenmiş trafiktir.
Hesaplama basit ve acımasızdır: istek sayısı = gerekli kayıtlar ÷ başarı oranı. %95 başarı ile bir milyon kayıt için 1,05 milyon istek gerekir. %70 ile bu 1,43 milyon olur. %60 ile 1,67 milyon. Yani, başarı oranının %95'ten %60'a düşmesi, aynı gigabayt fiyatıyla fatura üzerinde neredeyse %60 ekler.
3. Yeniden denemeler, zaman aşımı ve yardımcı trafik
Bunun üzerine, envanterin kendisinin eklediği dolaylı trafik gelir. Burada olgun ve aceleyle oluşturulmuş yığınlar arasındaki fark büyüktür: düzgün bir yönetilen platformda yeniden yönlendirmeler yaklaşık %0,1-3 kadar eklenirken, kendi yazdığınız Scrapy boru hattında bu %5-15 arasındadır ve oran, ölçekle birlikte artar. Engellenmiş bir alan adını ardışık beş kez zorlayan agresif bir yeniden deneme mantığı, bu yüzdeleri kolayca on katına çıkarabilir.
Yanlış söylemeyen bir metrik
Her şeyi tek bir büyüklükte toplayalım. Hesaplamak gereken, gigabayt başına dolar değil, başarıyla elde edilen bin kayıt başına maliyet:
- 1000 kayıt başına fiyat = (ortalama yanıt ağırlığı GB cinsinden ÷ başarı oranı) × (1 + yeniden deneme oranı) × GB fiyatı × 1000
Bu formülün değeri, karşılaştırılamaz teklifleri karşılaştırılabilir hale getirmesidir. %40 engelleme oranına sahip ucuz bir havuz ile %5 engelleme oranına sahip pahalı bir havuz nihayet aynı eksende yer alır. İlginçtir ki, son bir yıl içinde bu metriğe kendileri de ulaştı: sektörel materyallerde giderek daha fazla “fiyatın başarı oranına bölünmesi” ifadesi duyuluyor, çıplak gigabayt fiyatı değil.
Bu, paranın içinde nasıl görünüyor?
Bir milyon kayıt alalım, ortalama sayfa 500 KB ve $8/GB üzerinden yerleşik trafik — piyasanın tipik ortası. Sadece başarı oranını değiştiriyoruz:
- %95 başarı — 1,05 milyon istek, yaklaşık 525 GB, yaklaşık $4,200
- %70 başarı — 1,43 milyon istek, yaklaşık 715 GB, yaklaşık $5,720
- %60 başarı — 1,67 milyon istek, yaklaşık 835 GB, yaklaşık $6,680
Fark — aynı fiyatla neredeyse $2,500. Şimdi fiyat listesinde gökyüzü ve yer gibi görünen iki teklifi karşılaştıralım. Sağlayıcı A: $2/GB, ancak hedefinizde %55 başarı oranı var. Sağlayıcı B: $6/GB ve %92 başarı. Aynı 500 KB ve bir milyon kayıtla A, yaklaşık 910 GB ve $1,820, B ise yaklaşık 545 GB ve $3,270 çıkarıyor. Burada A gerçekten daha ucuz ve bu dürüst bir sonuç: fiyat farkı büyük olduğunda, düşük başarı oranı her zaman kazancı yemez.
A'ya %15 yeniden deneme ekleyin, B'de %3'e karşı, A'nın içerik yerine genellikle engelleme döndüren ucuz havuz nedeniyle dahil edilen headless render ekleyin — ve A'nın sayfa ağırlığı 1,5 MB'a, B'nin ise 500 KB'a çıkıyor. Yeniden hesaplama: A — yaklaşık 3,1 TB ve $6,200, B — yaklaşık 560 GB ve $3,370. Durum tersine döndü. İşte bu yüzden “kimin gigabaytı daha ucuz” sorusunun bağımsız bir anlamı yoktur: cevap, hedefinize, yığınınıza ve engelleme oranınıza bağlıdır.
Neden scraping API'leri farklı hesaplanıyor — ve nasıl karşılaştırılır?
Pazarın bir kısmının aslında gigabayt satmadığı ayrı bir zorluktur. Scraping API'leri ve web engelleyicileri, istek başına ücret alır ve bunları karmaşıklığa göre fiyatlandırır. 2026 yılı için 1000 sayfa başına fiyat aralığı şöyle görünmektedir:
- Basit HTML: ScrapeOps yaklaşık $0,19, ScraperAPI yaklaşık $0,49, Scrape.do yaklaşık $0,58, ScrapingBee yaklaşık $0,66, Bright Data yaklaşık $1,00
- JS render ile (genellikle bir yerine beş kredi): ScrapeOps yaklaşık $0,95, Scrape.do yaklaşık $2,90, ScrapingBee yaklaşık $3,30, ScraperAPI yaklaşık $4,90, Bright Data yaklaşık $5,00
- Anti-bot koruması altında siteler (10-25 kredi): ScrapeOps yaklaşık $1,90, Scrape.do yaklaşık $4,45, ScraperAPI yaklaşık $5,96, ScrapingBee yaklaşık $6,60, Bright Data $8-15 aralığında
Aynı sağlayıcı içindeki farklara dikkat edin: ScraperAPI'de basit bir sayfa ile koruma altındaki bir sayfa arasında on iki kat fark vardır. “İstek başına” tarifesi, bir gigabaytın fiyatından daha öngörülebilir görünür, tam olarak hedef ilk kategoriden üçüncüye geçtiğinde — ve bu sizin müdahaleniz olmadan, site sahibinin kararıyla gerçekleşir.
Bu, yine aynı formülle ortak bir eksene dönüştürülür: istek maliyeti ÷ başarı oranı × 1000. Sonrasında “$3,30 için 1000 JS sayfası” teklifi ile “$6 için yerleşik trafik gigabaytı” teklifini nihayet yan yana koyabilirsiniz. Daha geniş bir inceleme, resmi API, hazır veri seti veya kendi ayrıştırıcınız hakkında ayrı olarak ele alındı; burada önemli olan, paranın karşılaştırılabilirliğidir.
Bir akşamda ölçüm
Formül, kendi sayılarınız olmadan işe yaramaz ve iyi haber şu ki, onları elde etmek — birkaç saatlik bir iş. Gerçek URL'lerinizle 1000 isteklik bir pilot, gereken her şeyi sağlar.
- Temsilci bir hedef örneği alın — ana sayfa değil, toplamak istediğiniz ürün kartları, kategoriler ve sonuçlar. Ana sayfadaki başarı, hiçbir şey tahmin etmez.
- Ayrıca dört sayaç kaydedin: veri içeren geçerli yanıtlar, HTTP hataları, CAPTCHA'lar ve zorluklar, “boş iki yüzler” — gerekli içerik olmadan 200 kodu. Son kategori en sinsi olanıdır: resmi olarak bu bir başarıdır, gerçekte ise ödenmiş çöptür.
- Gerçek trafik hacmini sağlayıcının istatistiklerinden alın, kendi tahminlerinizden değil. Hesaplanan ve gerçek sayfa ağırlığı arasındaki fark, genellikle böyle bir pilotun ilk bulgusudur.
- Yeniden denemeleri ayrı bir satır olarak sayın, genel istek sayısında eritmeyin.
- Aynı gün ikinci bir sağlayıcıda tekrarlayın. Başarı oranı, anti-bot sistemlerinin ruh haliyle birlikte dalgalanır ve bir haftaya yayılan ölçümleri karşılaştırmak mümkün değildir.
Pilot düşük bir başarı gösterdiyse, sağlayıcıyı değiştirmek için acele etmeyin: önce sebebi anlamak önemlidir. Sorunun tipik kaynaklarının analizi, düşük başarı oranı olan proxy'leri nasıl teşhis edeceğiniz konusundaki materyalde toplanmıştır ve aynı metriklerin düzenli kontrolü bir akışa konulmalıdır. Genellikle sorun başlıklarda, zamanlamada veya istemci TLS parmak izinde bulunur, IP kalitesinde değil.
İndirimden daha fazla rakamı hareket ettiren dört kaldıraç
Metrik hesaplandığında, nerede en hassas olduğu görünür. Fiyatta %10'luk bir indirim, mevcut en zayıf kaldıraçtır.
Yanıtın ağırlığı. En hızlı kazanç. Sadece gerekeni almak, trafiği 2-10 kat azaltır. Eğer headless tarayıcı zorunluysa, isteklerin yakalanması seviyesinde resimleri, fontları, medyayı ve üçüncü taraf scriptleri engelleyin — içerik bundan etkilenmez, ancak hacim katlanarak azalır. Sıkıştırmayı ve ETag üzerinden koşullu istekleri etkinleştirin: son gezintiden beri değişmeyen bir sayfa, size 304 yanıtı olarak maliyetlenmeli, megabayt olarak değil.
Başarı oranı. %60-95 aralığında her on yüzde puanı başarı, faturada onlarla yüzdeler ekler. Burada para değil, mühendislik çalışır: doğru istemci parmak izi, makul hız, belirli bir hedef için doğru IP türü.
Proxy türlerinin karışımı. Tüm trafiği yerleşik havuzdan geçirmek, en yaygın ve en pahalı hatadır. Hedeflerin önemli bir kısmı, veri merkezi proxy'leri ile mükemmel bir şekilde elde edilebilir, bunlar on kat daha ucuzdur; yerleşik adresler yalnızca gerçekten gerektiren şeyler için harcanmalıdır. Hedefe göre yönlendirme yapmak, alışkanlıkla değil, proxy harcamalarını %60-70 oranında keser.
Yeniden deneme disiplini. Üstel gecikme, deneme tavanı, tekrarlara neden olmayan kodlarda tekrar yapmaktan vazgeçme. %3 ile %15 arasındaki dolaylı trafik farkı, dikkatli bir sarmanın varlığı ile yokluğu arasındaki farktır. Bu konunun pratik yönü, proxy üzerinden trafik tüketiminin optimizasyonu konusundaki materyalde ele alınmıştır.
Trafiğin ötesinde kalanlar
Tüm harcama tablosu, proxy faturasından daha geniştir ve “kendim toplamak” ile “hazır almak” arasında seçim yaparken bunu hatırlamak önemlidir. Aylık bir milyon sayfa ölçeğindeki bir proje için sektörel tahminler, kendi barındırılan çözüm için şöyle görünmektedir: yerleşik trafik $500-1500, mühendislik süresi $1000-2000, altyapı $300-500. Toplamda aylık $2000-4400 — ve bu, kendi iş mantığınızı yazmadan önce. Mühendis ücretinin saatte yaklaşık $100 olduğu göz önüne alındığında, birkaç gün boyunca çökmüş seçicileri düzeltmek, proxy için aylık faturadan daha pahalıdır.
Bu, kendi başına toplama karşı bir argüman değil — mühendislik saatlerini gigabaytlar gibi bütçenin bir satırı olarak hesaplamak için bir argümandır. Fiyatlandırma modeli de bilinçli bir şekilde seçilmelidir: uzun süreli istikrarlı oturumlar için ayrılmış IP için ödeme, genellikle megabayt başına olandan daha avantajlıdır.
Kısaca
Gigabayt başına fiyat, verilerin fiyatı değil, dört çarpandan birinin fiyatıdır. Sağlayıcıları buna göre karşılaştırmak, bir aracın fiyatını litre benzin fiyatına göre seçmek gibidir, tüketim hakkında soru sormadan. Karşılaştırma için tek bir çalışma birimi vardır: hedeflerinizde, yanıt ağırlığınızla, başarı oranınızla ve yeniden denemelerinizle başarıyla elde edilen bin kaydın maliyeti nedir.
Bunu bin isteklik bir pilotla hesaplayın, yıllık bir tarifeye abone olmadan önce. Genellikle, fiyat listesinde en ucuz teklifin, diğer tüm tekliflerden daha pahalıya mal olduğu ortaya çıkar — ve en büyük tasarruf potansiyelinin, indirim müzakerelerinde değil, resim yüklemelerini devre dışı bırakan yirmi satırlık kodda yattığı anlaşılır.
```