← Quay lại blog

Phân tích đấu thầu và mua sắm công toàn cầu: Tại sao cần proxy và cách tránh bị cấm

Phân tích chi tiết lý do tại sao cổng thông tin đấu thầu nhà nước chặn việc thu thập dữ liệu tự động và loại proxy nào cần thiết để theo dõi các cuộc đấu thầu ở các quốc gia khác nhau.

📅1 tháng 11, 2026

Các công ty theo dõi các cuộc đấu thầu ở Nga, Kazakhstan, các quốc gia EU và Hoa Kỳ sớm hay muộn cũng gặp phải một vấn đề giống nhau: cổng thông tin mua sắm công đột nhiên ngừng cung cấp dữ liệu, xuất hiện captcha hoặc địa chỉ IP bị chặn. Điều này xảy ra vì các nền tảng nhà nước đang tích cực bảo vệ chống lại việc thu thập thông tin tự động. Hãy cùng phân tích lý do tại sao điều này xảy ra, những quốc gia nào đặc biệt nghiêm ngặt trong việc lọc lưu lượng và loại proxy nào nên chọn để theo dõi các cuộc đấu thầu một cách ổn định.

Tại sao các cổng thông tin mua sắm công chặn việc thu thập dữ liệu

Về mặt hình thức, thông tin về mua sắm công ở hầu hết các quốc gia là công khai — đây là yêu cầu của luật pháp về tính minh bạch trong chi tiêu ngân sách. Nhưng "công khai" không có nghĩa là "có sẵn cho việc thu thập tự động trên quy mô lớn". Các nền tảng như EIS của Nga (zakupki.gov.ru), cổng thông tin Kazakhstan goszakup.gov.kz, TED (Tenders Electronic Daily) châu Âu hoặc SAM.gov của Mỹ được thiết kế để xem bằng tay qua trình duyệt, chứ không phải hàng nghìn yêu cầu mỗi phút từ các kịch bản.

Khi có hoạt động bất thường từ một địa chỉ IP — hàng chục yêu cầu mỗi giây, User-Agent giống nhau, không có khoảng dừng giữa các lần nhấp — hệ thống bảo vệ (thường là Cloudflare, DataDome hoặc phát triển riêng của cơ quan nhà nước) nhận diện điều này như một bot. Sau đó có ba kịch bản có thể xảy ra: hiển thị captcha, chặn tạm thời địa chỉ IP trong 15-60 phút hoặc cấm hoàn toàn theo subnet. Đối với một công ty xây dựng kinh doanh trên việc theo dõi đấu thầu, bất kỳ kịch bản nào trong số này cũng có nghĩa là bỏ lỡ các cuộc đấu thầu và mất tiền.

Sự phức tạp thêm là nhiều nền tảng đấu thầu yêu cầu xác thực qua chữ ký số điện tử (ECP) hoặc chỉ cung cấp dữ liệu sau khi vượt qua kiểm tra JavaScript của trình duyệt. Điều này có nghĩa là chỉ thay đổi IP là không đủ — cần phải giả lập hành vi của người dùng thực với môi trường trình duyệt thực.

Dữ liệu mở theo quốc gia: nơi khó thu thập nhất

Mức độ bảo vệ và khả năng truy cập API khác nhau rất nhiều tùy thuộc vào quốc gia. Hãy cùng phân tích các khu vực pháp lý chính, mà các nhà phân tích mua sắm và chuyên gia đấu thầu thường làm việc.

Quốc gia / khu vực Cổng thông tin Mức độ bảo vệ Đặc điểm
Nga zakupki.gov.ru, B2B-Center Trung bình-cao Có API chính thức, nhưng có giới hạn và yêu cầu đăng ký
Kazakhstan goszakup.gov.kz Trung bình Thường xuyên bị timeout khi có khối lượng yêu cầu lớn
Liên minh châu Âu TED (ted.europa.eu) Thấp-trung bình Xuất dữ liệu mở ở định dạng XML/CSV, nhưng có giới hạn địa lý cho một số dữ liệu
Hoa Kỳ SAM.gov Cao Kiểm tra trình duyệt nghiêm ngặt, cần đăng ký và API key
Ukraine Prozorro Thấp API hoàn toàn mở, hiếm khi cần proxy
Vương quốc Anh Contracts Finder, Find a Tender Trung bình Chặn địa lý các yêu cầu không từ Vương quốc Anh

Kết luận chính từ bảng trên: ngay cả ở nơi có API mở chính thức, thường có giới hạn địa lý hoặc giới hạn nghiêm ngặt về số lượng yêu cầu từ một địa chỉ IP. Nếu bạn thu thập dữ liệu từ Vương quốc Anh, trong khi đang ở một quốc gia khác, yêu cầu có thể bị từ chối ngay cả trước khi kiểm tra bot — chỉ vì địa chỉ IP không phải của Anh. Đây là lúc vai trò của proxy bắt đầu: chúng cho phép yêu cầu dữ liệu từ vị trí địa lý mong muốn và phân phối tải giữa hàng chục địa chỉ.

Loại proxy nào cần cho các trang đấu thầu

Để theo dõi các cuộc đấu thầu công, không có giải pháp chung "một loại proxy cho mọi trường hợp". Lựa chọn phụ thuộc vào nền tảng bạn đang làm việc và mức độ bảo vệ của nó.

Loại proxy Khi nào sử dụng Rủi ro bị chặn
Proxy trung tâm dữ liệu Các cổng thông tin với API mở và bảo vệ yếu (Prozorro, một phần TED) Trung bình — subnet của trung tâm dữ liệu đôi khi đã có trong danh sách đen
Proxy cư trú Các nền tảng với Cloudflare/DataDome, giới hạn địa lý (SAM.gov, Contracts Finder) Thấp — IP trông giống như người dùng bình thường
Proxy di động Kiểm tra cụ thể các cuộc đấu thầu, tần suất yêu cầu thấp Tối thiểu, nhưng chi phí lưu lượng cao hơn

Trên thực tế, hầu hết các công ty theo dõi các cuộc đấu thầu ở nhiều quốc gia cùng lúc, sử dụng sự kết hợp: IP trung tâm dữ liệu cho các nền tảng với API mở, và proxy cư trú — ở những nơi có bảo vệ nghiêm ngặt hoặc cần vị trí địa lý chính xác (ví dụ, yêu cầu phải đến từ London, không phải từ bất kỳ điểm nào ở châu Âu). Proxy cư trú đặc biệt hữu ích khi cổng thông tin kiểm tra không chỉ IP mà còn cả sự phù hợp của múi giờ, ngôn ngữ trình duyệt và vị trí địa lý của yêu cầu — sự không khớp của những tham số này ngay lập tức phát hiện lưu lượng tự động.

Cài đặt thu thập dữ liệu: sơ đồ thực tiễn

Đối với các nhà phân tích mua sắm không viết mã, nhưng quản lý quy trình thu thập dữ liệu qua các nhà thầu hoặc dịch vụ sẵn có, điều quan trọng là hiểu logic cài đặt, ngay cả khi không trực tiếp liên quan đến lập trình. Dưới đây là sơ đồ từng bước mà các phòng đấu thầu sử dụng:

  1. Xác định các cổng thông tin mục tiêu. Lập danh sách các nền tảng theo quốc gia cần theo dõi và kiểm tra xem có API chính thức không — điều này giảm tải cho proxy.
  2. Kiểm tra yêu cầu địa lý. Nếu nền tảng chặn các yêu cầu không từ quốc gia của mình (như Contracts Finder của Anh), hãy dự trù ngân sách cho các proxy cư trú với vị trí địa lý cần thiết.
  3. Cài đặt luân phiên IP. Đối với việc thu thập dữ liệu định kỳ (vài lần một ngày), cần thay đổi IP tự động mỗi 5-15 phút, để không vượt quá giới hạn yêu cầu từ một địa chỉ.
  4. Thêm khoảng dừng giữa các yêu cầu. Giả lập hành vi của con người — độ trễ 3-10 giây giữa các lần truy cập vào các trang — giảm khả năng kích hoạt hệ thống chống bot.
  5. Theo dõi captcha và cấm. Thiết lập thông báo về sự gia tăng số lượng captcha — đây là tín hiệu cho thấy nhóm IP hiện tại đã "ấm" và cần thay đổi sang các địa chỉ mới.
  6. Lưu trữ lịch sử yêu cầu. Ghi lại nhật ký các yêu cầu thành công và bị chặn cho mỗi cổng thông tin — điều này giúp hiểu loại proxy nào hoạt động tốt hơn cho nền tảng cụ thể.

Lời khuyên thực tiễn:

Nếu bạn theo dõi các cuộc đấu thầu từ 3-4 quốc gia cùng lúc, đừng cố gắng sử dụng cùng một nhóm IP cho tất cả các nền tảng. Hãy chia nhỏ proxy theo quốc gia trước — điều này giảm rủi ro rằng việc cấm trên một cổng thông tin sẽ "ảnh hưởng" đến danh tiếng của IP cho cổng thông tin khác.

Công cụ theo dõi các cuộc đấu thầu

Các công ty hiếm khi viết các trình thu thập dữ liệu từ đầu — thường sử dụng các giải pháp có sẵn hoặc kết hợp nhiều công cụ. Dưới đây là các loại chính được sử dụng để thu thập dữ liệu về mua sắm công:

  • Các trình thu thập dữ liệu đấu thầu có sẵn — các dịch vụ như Tenderplan, Контур.Закупки, B2B-Center theo dõi — đã tích hợp logic vượt qua captcha, nhưng cài đặt cho cổng thông tin cụ thể có thể yêu cầu proxy để mở rộng.
  • Nền tảng thu thập dữ liệu không cần mã — Octoparse, ParseHub cho phép thiết lập thu thập dữ liệu qua giao diện trực quan mà không cần viết mã, với hỗ trợ kết nối proxy bên ngoài.
  • Trình duyệt chống phát hiện — nếu việc thu thập dữ liệu yêu cầu xác thực trên cổng thông tin (ví dụ, tài khoản cá nhân trên zakupki.gov.ru), các công cụ như Dolphin Anty hoặc AdsPower giúp quản lý nhiều tài khoản song song, mỗi tài khoản với proxy riêng và dấu vân tay trình duyệt độc đáo.
  • Thông báo RSS và email từ chính các cổng thông tin — nơi nào có sẵn (như trong Prozorro), điều này giảm nhu cầu về việc thu thập dữ liệu chủ động và proxy nói chung.

Việc lựa chọn công cụ phụ thuộc vào khối lượng: để theo dõi 1-2 loại mua sắm ở một quốc gia có thể đủ với thông báo RSS miễn phí. Nhưng nếu nói đến việc theo dõi toàn diện các cuộc đấu thầu ở 5-10 quốc gia với cập nhật hàng ngày, không thể thiếu sự kết hợp giữa trình thu thập dữ liệu + nhóm proxy + luân phiên IP.

Những sai lầm thường gặp khi thu thập dữ liệu mua sắm công

Hầu hết các trường hợp bị chặn khi theo dõi các cuộc đấu thầu không phải do chính việc thu thập dữ liệu, mà do các lỗi kỹ thuật trong cài đặt. Dưới đây là những điều thường dẫn đến việc bị cấm:

  • Tần suất yêu cầu quá cao. Cố gắng thu thập toàn bộ danh sách mua sắm trong một phiên với tốc độ tối đa gần như luôn kết thúc bằng captcha hoặc chặn tạm thời địa chỉ IP.
  • Sử dụng cùng một địa chỉ IP cho nhiều quốc gia. Nếu một địa chỉ truy cập cả cổng thông tin Nga và Kazakhstan trong khoảng thời gian ngắn, điều này trông đáng ngờ đối với cả hai hệ thống bảo vệ.
  • Bỏ qua User-Agent và tiêu đề trình duyệt. Ngay cả với proxy tốt, yêu cầu với tiêu đề trình duyệt "trống" hoặc lỗi thời có thể bị nhận diện là bot.
  • Không có luân phiên khi theo dõi lâu dài. Nếu việc thu thập dữ liệu diễn ra liên tục trong vài giờ từ một địa chỉ IP, khả năng bị chặn tăng lên theo cấp số nhân sau giờ đầu tiên.
  • Thờ ơ với sự phù hợp địa lý. Yêu cầu đến cổng thông tin Anh từ IP của Hà Lan có thể thành công một lần, nhưng khi truy cập thường xuyên, hệ thống sẽ nhận thấy sự không phù hợp và bắt đầu yêu cầu xác nhận.

Quan trọng là phân biệt hai khái niệm: tính hợp pháp của việc truy cập dữ liệu và việc tuân thủ các điều kiện kỹ thuật sử dụng cổng thông tin (ToS). Thông tin về mua sắm công ở hầu hết các quốc gia là công khai theo luật — đây là yêu cầu về tính minh bạch trong chi tiêu ngân sách. Tuy nhiên, cổng thông tin cụ thể có thể đặt ra các quy tắc riêng cho việc truy cập tự động: giới hạn yêu cầu, yêu cầu đăng ký cho API, cấm việc thu thập dữ liệu hàng loạt mà không có sự cho phép.

Trên thực tế, hầu hết các công ty hoạt động trong lĩnh vực phân tích đấu thầu làm việc trong vùng xám: dữ liệu là công khai và việc thu thập của họ không vi phạm luật về quyền truy cập thông tin, nhưng có thể chính thức mâu thuẫn với thỏa thuận người dùng của cổng thông tin. Đây không phải là vi phạm hình sự, nhưng khi thu thập dữ liệu một cách hệ thống và quyết liệt mà không tuân thủ các giới hạn hợp lý, rủi ro bị chặn địa chỉ IP và thậm chí có thư từ pháp lý với quản trị viên cổng thông tin là có thể xảy ra. Do đó, việc luân phiên IP hợp lý qua proxy cư trú hoặc trung tâm dữ liệu không chỉ là một giải pháp kỹ thuật mà còn là một giải pháp về danh tiếng: nó giảm tải cho cơ sở hạ tầng của cổng thông tin và tối thiểu hóa các xung đột.

Kết luận

Việc theo dõi mua sắm công và đấu thầu ở các quốc gia khác nhau yêu cầu cách tiếp cận khác nhau để bảo vệ khỏi việc bị chặn. Ở nơi có API mở mà không có giới hạn nghiêm ngặt (Prozorro, một phần TED), chỉ cần luân phiên IP cơ bản. Nhưng đối với các nền tảng có bảo vệ nghiêm ngặt và giới hạn địa lý — SAM.gov, Contracts Finder, các phần riêng biệt của EIS — sẽ cần một cơ sở hạ tầng nghiêm túc hơn: proxy cư trú với vị trí địa lý cần thiết, khoảng dừng giữa các yêu cầu và giả lập hành vi của người dùng thực một cách cẩn thận.

Nếu bạn chỉ mới bắt đầu xây dựng hệ thống theo dõi các cuộc đấu thầu và có kế hoạch làm việc với nhiều quốc gia cùng lúc, hợp lý là bắt đầu với proxy cư trú — chúng cung cấp mức độ tin cậy cao từ các hệ thống bảo vệ của cổng thông tin và cho phép lựa chọn chính xác vị trí địa lý cần thiết. Đối với các nền tảng ít bảo vệ hơn với API mở, bạn có thể tiết kiệm, bằng cách sử dụng proxy trung tâm dữ liệu — chúng nhanh hơn và rẻ hơn ở nơi không có bảo vệ nghiêm ngặt.