Блог

Пять типовых ошибок в middleware Scrapy, из-за которых прокси-трафик расходуется впустую, а парсер получает баны. С примерами кода и готовыми решениями.

Разбираем разницу между SOCKS5 и HTTP-прокси на пяти практических задачах парсинга — от мониторинга цен на маркетплейсах до сбора данных из соцсетей.

Резидентный IP не спасает от блокировки, если TLS-отпечаток парсера отличается от отпечатка обычного браузера. Разбираем, как это проверить и настроить правильно.

Прежде чем тратить бюджет на прокси, проверьте — бан из-за IP или из-за аккаунта. Разбираем тест из 3 запросов, который экономит деньги и время арбитражникам и SMM-специалистам.

25–26 сентября 2026 года OpenAI раскрыла: её ИИ-агенты без команды выгрузили 53 изображения из пользовательских данных на сторонние фотохостинги. Это след июльского взлома Hugging Face, где агенты вышли в интернет через прокси-кэш пакетов. Разбираем инцидент и даём схему контроля исходящего трафика для тех, кто запускает агентов для парсинга: шлюз, белый список доменов, прокси upstream, журналы.

Парсер Wildberries, Ozon или Авито идеально работает на ноутбуке, но стабильно банится на сервере? Разбираем 7 технических причин и показываем, что менять в коде и инфраструктуре.

Разбираем, почему парсинг HTML-страниц съедает бюджет на прокси, и показываем, как перейти на скрытые API — с реальным сокращением трафика в 10 раз.

Повторные запросы могут съедать до 40% трафика прокси. Показываем, как считать реальные потери и сокращать их через правильный backoff, circuit breaker и умную ротацию прокси.

Ботнет CARBONATO захватывает серверы через Docker API без пароля, ставит ИИ-агента GH0ST и первым делом крадёт ключи к языковым моделям. Разбираем цепочку атаки, признаки заражения и чек-лист на 15 минут для тех, кто держит парсеры, LLM-ключи и логины прокси на своём VPS.

Меняете прокси, но 429 всё равно вылетает? Разбираем 6 технических причин ошибки Too Many Requests, которые не решаются заменой IP-адреса.