Những gì nhà phát triển sử dụng proxy CrawlRelay

Điểm chung của tất cả các trường hợp sử dụng này là gì?

Dữ liệu công khai, thu thập với tốc độ mà trang web chấp nhận, từ nơi dữ liệu có sự khác biệt. Mỗi tài khoản CrawlRelay hoạt động theo Chính sách Sử dụng Chấp nhận được: không đăng nhập vào tài khoản bạn không sở hữu, không thu thập dữ liệu cá nhân vi phạm pháp luật, không cố gắng vượt qua các chặn cố ý của trang, và cổng từ chối Các trang ngân hàng, chính phủ và cổng thanh toán, cùng các cổng SMTP (gửi email) 25, 465 và 587.

Thói quen kỹ thuật cũng được chia sẻ: xác định crawler của bạn, giới hạn đồng thời mỗi host, lấy HTML trước khi hiển thị, bỏ qua trang không đổi, và giữ mỗi pipeline trên một sub-user riêng với giới hạn lưu lượng. Tài liệu docs hướng dẫn từng phần với mã.

Những trường hợp sử dụng nào CrawlRelay không phục vụ?

Bất cứ thứ gì dựa trên việc giả mạo người dùng hoặc vượt qua bảo vệ: tạo hoặc chiếm đoạt tài khoản, mua hàng giới hạn hoặc vé bằng bot, gửi spam, kiểm tra thông tin đăng nhập, gian lận, hoặc thu thập dữ liệu cá nhân sau đăng nhập. Những hành vi đó vi phạm chính sách và là lý do các mạng residential bị tịch thu năm 2026. Chúng tôi đình chỉ tài khoản sử dụng cổng cho những mục đích này.