博客

关于代理、网页抓取和互联网基础设施的最新文章和见解

2026年9月7日,CipherCue 测量了 44,143 家欧洲公司,其中检测到 CDN:89.6% 的公司使用 Cloudflare,在荷兰这一比例为 95.6%。我们分析这些数字和方法,与 W3Techs 的数据进行对比,解释为什么在每秒 4600 万个请求的情况下,统一的 bot score 改变了地址池的工作规则,以及当一个供应商成为故障和封锁的共同故障点时该如何处理。

📅 2026年9月9日
阅读文章

Bright Data 移除了移动代理,需求转向了几十个小品牌,而“移动性”的加价仍然存在——相对于居民千兆的价格提高了 2-5 倍。我们分析六个检查,这些检查可以显示您是使用移动地址还是以移动形式呈现的居民地址:ip-api 标志、通过 RIPEstat 的 ASN、反向 DNS 记录、第二个独立来源、在 60 次结果中的轮换测试和地理位置核对。

📅 2026年9月8日
阅读文章

暗网服务Nexus在过去一年中实时接收来自IDScan.net验证承包商的文件扫描:1.53亿个驾驶执照,1000万个身份证,300万个旅行文件。联邦调查局正在进行调查。我们来分析一下,为什么泄露的扫描比泄露的密码更危险,以及如何避免创建多余的文件副本。

📅 2026年9月7日
阅读文章

检查一千个居民地址在六个免费数据库中的结果显示:80.3% 被标记为 DNSBL,但没有一个进入危险基础设施的名单,而 Cloudflare 的 threat_score 到处都是零。我们来分析一下,为什么 Spamhaus 对居民 IP 的标记是邮件政策,而不是威胁,以及哪些指标真正预测池的工作。

📅 2026年9月6日
阅读文章

解析器返回了空值,你更换了代理——但问题出在网站的重新设计上。我们来分析一下,如何在五分钟内区分封禁和布局漂移,Scrapling 的自适应选择器是如何工作的(在 SQLite 中的元素指纹和相似性搜索耗时 2.46 毫秒),以及为什么基准需要从你之后收集数据的相同地理位置进行拍摄。

📅 2026年9月5日
阅读文章

2026年9月1日,CrowdSec发布了1.8版本:工作量证明和浏览器指纹识别现在可以在自托管的WAF中使用。我们分析了为什么检测认为驻留IP和纯TLS毫无用处,PoW任务对人类和机器人的成本是多少(0.017秒来自本地求解器,而手机上需要2分钟),以及Kasada的商业PoW与开放的Anubis相比,原则上更具危险性。

📅 2026年9月4日
阅读文章