CrawlRelay 프록시 문서: 빠른 시작

처음 요청은 어떻게 보내나요?

대시보드에서 사용자 이름과 비밀번호를 복사한 뒤, 다음 중 하나를 실행하세요. 각 명령은 웹사이트가 보는 IP 주소를 출력하며, 보통 실행할 때마다 변경됩니다.

curl -x http://USERNAME-country-us:[email protected]:7777 https://api.ipify.org

import requests

proxy = "http://USERNAME-country-us:[email protected]:7777"
r = requests.get("https://api.ipify.org", proxies={"http": proxy, "https": proxy}, timeout=(10, 30))
print(r.text)

import { ProxyAgent, fetch } from "undici";

const dispatcher = new ProxyAgent("http://USERNAME-country-us:[email protected]:7777");
const res = await fetch("https://api.ipify.org", { dispatcher });
console.log(await res.text());

사용자 이름은 어떻게 만드나요?

대시보드의 사용자 이름에서 시작해 위 형식대로 하이픈으로 매개변수를 덧붙이세요. 매개변수는 모두 선택 사항입니다. 값은 소문자이며 도시 이름은 밑줄(_)로 연결합니다(new_york, sao_paulo). 도시별 가능 지역은 다릅니다.

회전 세션과 고정 세션은 어떻게 다르게 작동하나요?

session- 없이 사용자 이름을 쓰면 새로운 TCP 연결마다 보통 다른 IP를 프록시 풀에서 받습니다. session-<id>-ttl-<minutes>가 포함된 사용자 이름은 TTL 종료 또는 레지덴셜 프록시 기기가 오프라인 될 때까지 동일 출구 IP를 유지합니다.

• 회전은 요청별이 아니라 연결별로 일어납니다: keep-alive는 동일 출구를 재사용합니다.
• 작업별, 브라우저 컨텍스트별 또는 계정 흐름별로 새 세션 ID를 사용하세요.
• 동일한 세션 ID를 사용하는 두 개의 스크래퍼는 하나의 출구 IP를 공유합니다.

세션 가이드에서 각 라이브러리별 연결 재사용을 다룹니다.

제한 사항은 무엇인가요?

• 차단된 목적지: 은행, 정부 및 결제 포털 사이트, SMTP (이메일 전송) 포트 25, 465, 587 지원. 해당 요청은 거부됩니다.
• 사용: 공개 데이터만, 허용된 사용 정책 아래에서 사용하세요. 계정 탈취, 사기, 스팸 또는 사이트의 의도적 차단 우회를 시도하지 마세요.
• 트래픽: GB당 요금 부과. 사용량은 프록시를 통한 모든 송수신 데이터(업로드 및 다운로드, 헤더 포함)를 계산합니다. 1GB = 1,000,000,000 바이트. 대상에 도달하지 못한 연결 시도는 집계하지 않습니다.. 플랜의 트래픽이 소진되면 요청이 중단됩니다.
• 세션: 최대 30분; 레지덴셜 프록시 장치가 오프라인이 되면 IP가 조기에 변경될 수 있습니다.
• 프로토콜: HTTP, HTTPS (CONNECT) 및 SOCKS5.
• 동시 처리: 요금 부과 없음. 제한은 각 대상이 허용하는 양이며, 동시 처리 가이드를 참고하세요.

인증 정보 및 사용량은 어떻게 관리하나요?

대시보드 또는 API 키로 REST API https://crawlrelay.com/api/v1에서 관리할 수 있습니다. 언제든지 취소 가능한 API 키. 주요 작업:

• 서브 사용자: 스크래퍼 또는 클라이언트 프로젝트별로 하나의 인증 정보 세트, 선택적으로 트래픽 제한 설정 가능. 레지덴셜 API 참조.
• IP 허용 목록: 비밀번호 없이 접속 가능한 최대 10개 IP
• 사용량: 구독별 일일 트래픽, 크롤링 전 알림 설정 가능
• 카탈로그: 대상 국가, 도시, 주 및 ASN 목록. 사용자 이름 유효성 검증에 사용
• 주문: 대시보드 없이 잔액으로 추가 트래픽 구매 가능. 주문 API 참조.