2024년 인스타그램, VK 및 페이스북에서 안전하게 연락처 파싱하기: 계정 정지를 피하는 방법

소셜 미디어에서 잠재 고객의 연락처를 수집하는 것은 차가운 판매, 이메일 마케팅 및 타겟 광고를 위한 데이터베이스를 구축하는 가장 효과적인 방법 중 하나입니다. 그러나 Instagram, VK, Facebook 및 LinkedIn과 같은 플랫폼은 자동화된 파싱을 적극적으로 차단하고 있으며, 의심스러운 활동의 징후가 보이면 계정과 IP 주소를 차단합니다. 이 가이드에서는 소셜 미디어에서 안전하게 연락처를 수집하는 방법, 사용할 도구 및 차단 방지를 위한 프록시 설정 방법을 살펴보겠습니다.

소셜 미디어가 연락처 파싱을 차단하는 이유

소셜 플랫폼은 자동화된 데이터 수집을 감지하기 위해 복잡한 알고리즘을 사용합니다. 차단의 주요 트리거는 다음과 같습니다:

• 너무 높은 요청 속도: 계정이 1분에 100개의 프로필을 조회하면 이는 명백한 봇의 징후입니다. 일반 사용자는 그렇게 빠른 속도를 낼 수 없습니다.
• 반복되는 행동 패턴: 요청 간 동일한 간격, 임의의 일시 중지 없음, 완벽한 행동 순서.
• 의심스러운 IP 주소: 하나의 IP에서 동시에 수십 개의 계정이 작동하거나 IP가 데이터 센터에 속하고 가정용 제공업체에 속하지 않는 경우.
• 자연스러운 활동 부족: 계정이 데이터만 파싱하고 좋아요, 댓글, 콘텐츠 게시를 하지 않는 경우.
• 잘 알려진 도구 사용: Instagram과 Facebook은 User-Agent, 브라우저의 지문 및 기타 징후를 통해 인기 있는 파서를 감지할 수 있습니다.

Instagram은 파싱에 대해 특히 공격적입니다 — 플랫폼은 의심스러운 활동을 감지하면 시간당 50-70개의 프로필 조회만으로도 계정을 차단할 수 있습니다. VK는 API를 통한 파싱에 대해 더 관대하지만 웹 인터페이스를 통한 스크래핑은 엄격히 제한합니다. Facebook과 LinkedIn은 단계별 제한을 적용합니다: 처음에는 행동에 대한 임시 제한, 그 다음에는 captcha, 그리고 마지막으로 완전 차단입니다.

소셜 미디어 파싱에 적합한 프록시

프록시 유형 선택은 안전한 파싱에 매우 중요합니다. 다양한 작업에는 다양한 솔루션이 필요합니다:

주거용 프록시는 Instagram, Facebook 및 LinkedIn 파싱에 최적의 선택입니다. 이러한 IP는 실제 가정용 제공업체에 속하므로 플랫폼은 이를 일반 사용자로 인식합니다. 주요 장점은 자연스러운 행동 패턴을 준수하면 하나의 IP에서 하루에 200-300개의 프로필을 차단 없이 파싱할 수 있는 가능성입니다.

모바일 프록시는 모바일 제공업체의 IP를 사용하므로 최대한의 보호를 제공합니다. Instagram과 TikTok은 모바일 IP를 거의 차단하지 않으며, 하나의 주소 뒤에는 천 명의 실제 사용자가 있을 수 있습니다(NAT로 인해). 단점은 높은 비용으로, 일반적으로 한 IP당 월 $50-100입니다.

데이터 센터 프록시는 VK(공식 API 사용 시) 및 덜 보호된 플랫폼에만 적합합니다. Instagram과 Facebook은 데이터 센터 IP를 빠르게 감지하고 차단합니다. 그러나 VK API를 통해 공개 데이터를 파싱하는 데는 충분히 작동하며, 특히 회전 사용 시 효과적입니다.

각 플랫폼에 대한 안전한 요청 한도

각 소셜 네트워크는 행동 수에 대한 비공식 한도를 가지고 있습니다. 이러한 수치는 파싱 경험을 기반으로 하며, 플랫폼 알고리즘 변경에 따라 정기적으로 업데이트됩니다:

Instagram

• 프로필 조회: 새로운 계정의 경우 시간당 50-70회, 하루에 300-400회; 3개월 이상 된 계정의 경우 하루에 600-800회까지 가능.
• 바이오 링크 클릭: 시간당 30-40회 이하.
• 팔로워/팔로잉 수집: 요청 간 2-3초의 간격을 두고 시간당 최대 200-300개 프로필.
• 해시태그 검색: 시간당 20-30개의 해시태그, 5-10초 간격.
• 필수 일시 중지: 매 1-1.5시간마다 15-20분의 휴식.

VKontakte

• API를 통한: 공식 한도는 초당 3회 요청(시간당 약 10,000회)이며, 안전을 위해 초당 1-2회 요청을 권장합니다.
• 웹 인터페이스를 통한: 시간당 100-150개의 프로필, 하루에 800-1000회.
• 그룹 참가자 파싱: API를 통해 시간당 최대 500개의 프로필, 웹을 통해 200-300개.
• 게시물에서 ID 수집: API를 통해 시간당 최대 1000개의 게시물.

Facebook

• 프로필 조회: 시간당 40-60회, 활성화된 계정의 경우 하루에 최대 400회.
• 그룹 참가자 파싱: 시간당 최대 100-150개 프로필.
• 사람 검색: 시간당 최대 30개의 검색 요청.
• 외부 링크 클릭: 시간당 최대 20-30회.
• 중요: Facebook은 자동화의 첫 징후에 대해 captcha를 적극적으로 사용합니다.

LinkedIn

• 프로필 조회: 무료 계정의 경우 하루에 80-100회, Premium의 경우 최대 150-200회.
• InMail/메시지 전송: 하루에 20-30회.
• 필터 검색: 시간당 최대 15-20개의 검색 요청.
• 연락처 내보내기: LinkedIn은 엄격하게 제한하며, Sales Navigator를 통해 하루에 최대 50개의 프로필.

프로그래밍 없이 연락처 파싱 도구

소셜 미디어에서 연락처를 수집하기 위해 프로그래밍 기술이 필요하지 않습니다. 그래픽 인터페이스를 갖춘 다양한 도구가 있습니다:

다목적 파서 (여러 플랫폼에서 작동)

• Octoparse: Instagram, Facebook, LinkedIn, VK를 지원하는 비주얼 파서. 프로그래밍이 필요 없으며 마우스 클릭으로 작업을 설정합니다. 내장된 프록시 및 IP 회전 지원. 가격은 월 $75부터 시작합니다.
• ParseHub: Octoparse와 유사하며 무료 버전으로 한 번에 200페이지까지 파싱할 수 있습니다. 동적 콘텐츠(JavaScript)와 잘 작동합니다. 프록시를 지원합니다.
• Phantombuster: Instagram, LinkedIn, Facebook, Twitter를 위한 준비된 시나리오를 갖춘 클라우드 서비스. 수행된 작업 수에 따라 요금이 부과됩니다. 월 $30부터 시작합니다.

Instagram 전용 도구

• Ingramer (이전 Inflact): Instagram을 위한 가장 안전한 파서 중 하나입니다. 클라우드를 통해 작동하며 사람의 행동을 모방합니다. 경쟁자의 팔로워, 게시물에 좋아요를 누른 사람, 댓글 작성자를 수집할 수 있습니다. 월 $10부터 시작합니다.
• Combin Growth: Instagram 파싱 및 자동화를 위한 데스크톱 애플리케이션. 내장된 보안 한도. 프록시 지원이 필수입니다. 월 $15부터 시작합니다.
• Jarvee: 파싱 기능을 갖춘 강력한 자동화 도구. 안티디텍트 브라우저를 통해 작동합니다. 기술적 설정이 필요합니다. 월 약 $50입니다.

VKontakte 전용 도구

• TargetHunter: VK 전용 파서. 그룹 참가자, 활동 사용자, 댓글 작성자를 수집합니다. 나이, 성별, 도시별 필터링. 월 1990₽부터 시작합니다.
• Pepper.Ninja: API를 통해 VK를 파싱하는 클라우드 서비스. 하루에 최대 100,000개의 프로필을 신속하게 수집합니다. 월 $29부터 시작합니다.
• VK Scraper: Chrome용 무료 확장 프로그램이지만 수동 실행 및 모니터링이 필요합니다. 소규모 데이터(최대 500개 프로필)에 적합합니다.

LinkedIn 전용 파서

• Dux-Soup: Chrome 확장 프로그램으로, 프로필 조회 및 연락처 수집을 자동화합니다. 무료 버전은 하루에 100개의 작업으로 제한됩니다. Premium은 월 $15부터 시작합니다.
• LinkedIn Sales Navigator: B2B 판매를 위한 LinkedIn의 공식 도구. 최대 2500개의 연락처를 CSV로 내보낼 수 있습니다. 월 $79부터 시작합니다.
• Phantombuster LinkedIn scrapers: 프로필, 회사, 게시물을 파싱하기 위한 준비된 봇 세트. 클라우드에서 작동합니다.

도구를 선택할 때 내장된 보안 한도, 프록시 지원 및 작업 간 임의 지연 설정 가능성을 고려하십시오. 이러한 기능이 없는 도구는 계정 차단으로 이어질 수 있습니다.

Instagram에서 연락처 파싱: 단계별 안내

Instagram은 공격적인 안티봇 보호로 인해 파싱하기 가장 어려운 플랫폼 중 하나입니다. 안티디텍트 브라우저와 주거용 프록시를 통해 연락처를 안전하게 수집하는 방법을 살펴보겠습니다.

1단계: 인프라 준비

1. 안티디텍트 브라우저 설치: Dolphin Anty(최대 10개의 프로필 무료), AdsPower 또는 Multilogin.
2. 주거용 프록시 확보 — Instagram에 대해 가정용 제공업체의 IP를 사용하는 것이 매우 중요합니다. 하나의 Instagram 계정에 하나의 프록시.
3. 브라우저 프로필 생성: 프록시를 지정하고 프록시의 지리적 위치에 맞는 fingerprint(브라우저 지문)를 선택합니다.
4. Instagram에 로그인합니다. 계정이 새 계정이라면 즉시 파싱을 시작하지 말고 2-3일 동안 일반 활동(좋아요, 스토리 조회, 댓글 작성)에 시간을 할애하십시오.

2단계: 파서 설정

안전한 클라우드 파서로 Ingramer를 사용합니다:

1. Ingramer에 Instagram 계정을 연결합니다(서비스는 공식 API + 에뮬레이션을 통해 작동합니다).
2. 연락처 출처 선택: 경쟁자의 팔로워, 특정 게시물에 좋아요를 누른 사람, 해시태그를 사용한 사람, 지리적 위치에 따른 사용자.
3. 필터 설정: 팔로워 수(봇 제외), 바이오의 언어, 프로필에 이메일/링크가 있는지 여부.
4. 한도 설정: 시간당 50개 프로필, 하루에 300개로 시작합니다. 작업 간 3-7초의 임의 지연을 활성화합니다.
5. 작업을 시작하고 처음 2-3시간 동안 모니터링합니다 — Instagram이 captcha나 경고를 표시하지 않으면 계속 진행할 수 있습니다.

3단계: 데이터 수집 및 처리

대부분의 파서는 다음 필드가 포함된 CSV/Excel로 데이터를 내보냅니다:

• Username (닉네임)
• Full Name (프로필의 이름)
• Bio (프로필 설명 — 여기에는 종종 이메일이나 링크가 포함됨)
• External URL (프로필의 링크)
• Followers count (팔로워 수)
• Following count (팔로잉 수)
• Posts count (게시물 수)

Bio에서 이메일을 추출하려면 정규 표현식이나 Email Extractor와 같은 온라인 도구를 사용하십시오. Instagram의 비즈니스 계정 중 약 15-25%가 프로필 설명에 이메일을 명시합니다.

VKontakte에서 연락처 수집: 방법 및 제한 사항

VK는 특히 공식 API를 사용할 경우 파싱에 대해 더 관대합니다. API를 통한 방법과 웹 인터페이스를 통한 방법을 살펴보겠습니다.

방법 1: VK API를 통한 파싱 (권장)

VK의 공식 API를 사용하면 사용자에 대한 공개 데이터를 수집할 수 있습니다: 이름, 성, 도시, 나이, 소셜 미디어 링크. 이메일과 전화번호는 API를 통해 얻을 수 없습니다 — 이는 개인 데이터입니다.

1. 액세스 토큰 받기: VK Developers(vk.com/dev)에서 애플리케이션을 등록하고 사용자 데이터에 대한 액세스 권한이 있는 access_token을 받습니다.
2. 준비된 파서 사용: TargetHunter, Pepper.Ninja 또는 vk_api 라이브러리를 사용하여 간단한 Python 스크립트를 작성합니다.
3. 사용자 ID 수집: 예를 들어 경쟁자의 그룹 참가자를 groups.getMembers 메서드를 통해 수집합니다(요청당 최대 1000개의 ID 반환).
4. 프로필 데이터 받기: users.get 메서드를 사용하여 한 번의 호출로 1000명의 사용자에 대한 정보를 요청합니다.
5. 한도 준수: 초당 3회 요청을 초과하지 말고 호출 간 지연을 사용하십시오.

API를 통해 얻을 수 있는 데이터의 예:

• 이름, 성, 생년월일
• 도시, 국가
• 대학교, 직장
• 친구 수, 팔로워 수
• Instagram, Telegram 링크(프로필에 명시된 경우)
• 마지막 활동(온라인/오프라인)

방법 2: 웹 인터페이스를 통한 파싱

추가 데이터를 수집해야 하는 경우(예: 그룹 설명이나 댓글에서 이메일) 브라우저를 통한 파싱을 사용하십시오:

1. 주거용 또는 데이터 센터 프록시로 안티디텍트 브라우저를 설정합니다.
2. VK Scraper 또는 Octoparse 확장 프로그램을 사용하여 자동화합니다.
3. 데이터 수집 설정: 그룹 URL 또는 검색 쿼리를 지정하고 파싱할 필드를 선택합니다.
4. 한도 설정: 시간당 100-150개의 프로필, 요청 간 2-4초의 간격.
5. CSV로 데이터를 내보냅니다.

VK는 공개 데이터 파싱에 대해 잘 차단하지 않지만, 너무 높은 활동으로 인해 일부 기능(예: 검색)에 대한 접근을 일시적으로 제한할 수 있습니다. 일반적으로 제한은 24-48시간 후에 해제됩니다.

Facebook 및 LinkedIn: B2B 연락처 파싱의 특징

Facebook과 LinkedIn은 B2B 리드 생성 플랫폼이지만, 모든 소셜 미디어 중에서 자동화에 대한 가장 강력한 보호를 가지고 있습니다.

Facebook 파싱

Facebook은 Cambridge Analytica 스캔들 이후 사용자 데이터 파싱을 위한 Graph API 접근을 거의 완전히 차단했습니다. 웹 인터페이스를 통한 파싱만 가능합니다:

• 신뢰할 수 있는 계정 사용: Facebook은 자동화의 징후가 보이면 새로운 프로필을 즉시 차단합니다. 계정은 최소 6개월 이상 되어야 하며, 정기적인 활동이 필요합니다.
• 주거용 프록시 필수: Facebook은 데이터 센터 IP를 몇 초 만에 감지합니다.
• 그룹 참가자만 파싱: 이는 가장 위험이 적은 활동입니다. 검색을 통한 대량 프로필 조회는 피하십시오.
• 한도: 시간당 40-60개 프로필, 하루에 300-400개. 매 1.5시간마다 휴식을 취하십시오.
• captcha에 대비하십시오: Facebook은 정상적인 활동에서도 자주 검증을 표시합니다. 수동으로 해결하십시오.

Facebook을 위한 도구: Phantombuster(클라우드, 준비된 시나리오 포함), Octoparse(비주얼 파서). 잘 알려지지 않은 확장 프로그램은 피하십시오 — Facebook은 이를 빠르게 감지합니다.

LinkedIn 파싱

LinkedIn은 B2B 연락처를 위한 금광이지만, 플랫폼은 파싱을 엄격하게 제한합니다:

• 프로필 조회 한도: 무료 계정의 경우 하루에 80-100회, Premium/Sales Navigator의 경우 최대 200회. LinkedIn은 누가 프로필을 조회했는지 추적하므로 숨겨진 파싱은 불가능합니다.
• Sales Navigator 사용: B2B 판매를 위한 공식 도구로, 최대 2500개의 연락처를 월별로 내보낼 수 있습니다. 월 $79이며, 합법적인 방법입니다.
• 대안 — Dux-Soup: Chrome 확장 프로그램으로, 조회 및 연락처 수집을 자동화합니다. LinkedIn의 한도에 따라 느리게 작동하지만 안전합니다.
• 프록시 필수: 여러 계정에서 파싱하는 경우 각 계정에 고유한 주거용 IP가 필요합니다.

LinkedIn은 직위, 회사, 경력, 교육과 같은 가장 질 높은 B2B 데이터를 제공합니다. 많은 사용자가 프로필이나 "연락처" 섹션에 이메일(일반적으로 회사 이메일)을 명시합니다.

안티디텍트 브라우저 설정으로 안전한 파싱

안티디텍트 브라우저는 소셜 미디어 파싱에 매우 중요한 도구입니다. 이들은 브라우저의 디지털 지문(fingerprint)을 변경하여 각 계정을 플랫폼의 눈에 고유하게 만듭니다.

파싱을 위한 인기 있는 안티디텍트 브라우저

Dolphin Anty에서 프로필 설정 단계별 안내

1. 새 프로필 생성: 메인 창에서 "프로필 생성"을 클릭합니다.
2. 이름 지정: 예를 들어, "Instagram_parsing_1"으로 관리 편의성을 위해 지정합니다.
3. 프록시 설정:
   • 유형 선택: HTTP 또는 SOCKS5 (프록시 제공업체에 따라 다름)
   • 데이터 입력: IP:PORT:USERNAME:PASSWORD
   • "프록시 확인" 클릭 — IP의 지리적 위치가 표시되어야 합니다.
4. Fingerprint 선택:
   • 운영 체제: Windows 10/11 또는 macOS (프록시의 지리적 위치에 맞춤)
   • User-Agent: 최신 버전의 Chrome
   • 화면 해상도: 표준 해상도 (1920x1080 또는 1366x768)
   • 브라우저 언어: 프록시의 국가에 맞춤 (미국의 경우 en-US, 러시아의 경우 ru-RU)
5. WebRTC 설정: "대체" 선택 — 이는 WebRTC를 통해 실제 IP 유출을 방지합니다.
6. Canvas 및 WebGL: "노이즈" 활성화 — 이는 fingerprint의 고유성을 추가합니다.
7. 프로필을 저장하고 브라우저를 실행합니다.

파싱 전 설정 확인

파싱을 시작하기 전에 fingerprint가 고유한지 반드시 확인하십시오:

1. whoer.net 또는 browserleaks.com 웹사이트를 엽니다.
2. IP 주소 확인 — 프록시와 일치해야 합니다.
3. WebRTC 확인 — 실제 IP가 표시되지 않아야 합니다.
4. DNS 확인 — 프록시의 국가와 일치해야 합니다.
5. 시간대 확인 — 프록시의 지리적 위치와 일치해야 합니다.

하나의 매개변수라도 일치하지 않으면 Instagram, Facebook 또는 LinkedIn이 불일치를 감지하고 계정을 차단할 수 있습니다.

결론

소셜 미디어에서 안전하게 연락처를 파싱하려면 종합적인 접근이 필요합니다: 올바른 프록시 선택, 활동 한도 준수, 안티디텍트 브라우저 및 고품질 자동화 도구 사용. Instagram과 Facebook은 최대한의 주의가 필요하며 — 주거용 또는 모바일 프록시가 필수이며, 한도는 보수적이어야 합니다(하루에 300-400개 프로필을 초과하지 않도록). VK는 API를 통해 작업할 경우 더 관대하며, 최소한의 위험으로 대량의 연락처를 수집할 수 있습니다.

가장 중요한 규칙은 실제 사용자의 행동을 모방하는 것입니다: 작업 간 임의의 일시 중지, 주기적인 휴식, 다양한 활동(단순한 파싱뿐만 아니라 좋아요, 댓글, 콘텐츠 조회 포함). 플랫폼은 지속적으로 봇 감지 알고리즘을 개선하므로 정기적으로 방법과 도구를 업데이트하고 한도 변경을 주시하며 파싱 전략을 조정하십시오.

Instagram, Facebook 및 LinkedIn에서 안전하게 연락처를 파싱하려면 주거용 프록시를 사용하는 것이 좋습니다 — 이들은 실제 가정용 제공업체의 IP 덕분에 차단으로부터 최대한의 보호를 제공합니다. Instagram이나 TikTok과 같은 모바일 플랫폼에서 작업하는 경우 모바일 프록시를 고려하십시오 — 이들은 일반 모바일 애플리케이션 사용자와 거의 구별할 수 없으며 차단 위험이 최소화됩니다.