Data pelatihan AI
Korpora web publik multi-terabyte: sekitar 50 GB per satu juta halaman HTML, robots.txt dan opt-out AI, penyaringan data pribadi.
Jawaban cepat
Untuk apa proxy residensial digunakan oleh pengembang?
Pengembang menggunakan CrawlRelay proxy residensial untuk mengumpulkan data web publik dari lokasi yang penting: korpora pelatihan AI, pengambilan halaman untuk agen AI, pemeriksaan akurat berdasarkan lokasi pada halaman pencarian dan iklan, serta pemantauan harga e-commerce. Biaya trafik US$1,50 untuk 1 GB dan US$0,50/GB mulai 50 GB, per Oktober 2026, dan tidak pernah kedaluwarsa. Dibayar dengan crypto, tanpa KYC.
Kasus penggunaan
Agen AI
Alat pengambilan yang aman dan server MCP melalui jalur keluar residensial, dengan sesi per tugas dan pembatas pengaman.
Pemeriksaan SERP dan peringkat
Apa yang masih berfungsi di tahun 2026: robots.txt Google, gugatan hukum, pemblokiran, dan pemeriksaan halaman Anda sendiri yang akurat per kota.
Pemantauan harga
Harga lokal, stok dan persyaratan pengiriman per negara, ekstraksi JSON-LD, trafik per produk per bulan.
Pengaturan mana yang cocok untuk setiap kasus penggunaan?
| Kasus penggunaan | Tipe proxy | Sesi | Trafik tipikal |
|---|---|---|---|
| Data pelatihan AI | Proxy residensial | Rotasi; tetap hanya untuk paginasi | 30–60 GB per satu juta halaman HTML |
| Agen AI | Residensial; seluler untuk tampilan hanya seluler | Satu sesi tetap per tugas | ≈1 MB per tugas 20 halaman dalam HTML |
| Pemeriksaan SERP dan peringkat | Residensial dengan penargetan kota | Satu sesi pendek per pemeriksaan kota | Kecil: beberapa halaman per pemeriksaan |
| Pemantauan harga | Residensial per pasar | Rotasi antar produk; tetap dalam alur | ≈1,8 MB per produk per bulan, pemeriksaan harian |
Apa kesamaan semua kasus penggunaan ini?
Data publik, dikumpulkan secepat situs bisa menerima, di tempat data berbeda. Setiap akun CrawlRelay beroperasi di bawah Kebijakan Penggunaan yang Dapat Diterima: tanpa login ke akun yang bukan milik Anda, tanpa mengumpulkan data pribadi melanggar hukum, tanpa upaya mengalahkan blokir situs secara sengaja, dan gateway yang menolak Situs perbankan, pemerintah dan portal pembayaran, serta port SMTP (pengiriman email) 25, 465, dan 587.
Kebiasaan teknik juga dibagikan: identifikasi crawler Anda, batasi concurrency per host, ambil HTML sebelum render, lewati halaman yang tidak berubah, dan jalankan setiap pipeline pada sub-user dengan batas trafik sendiri. Dokumentasi membahas tiap satu dengan kode.
Kasus penggunaan mana yang tidak dilayani CrawlRelay?
Apa pun yang bergantung pada menyamar sebagai orang lain atau mengalahkan proteksi: membuat atau mengambil alih akun, membeli stok atau tiket terbatas dengan bot, mengirim spam, pengujian kredensial, penipuan, atau mengumpulkan data pribadi di balik login. Penggunaan ini melanggar kebijakan kami dan menjadi alasan penyitaan jaringan residensial pada 2026. Kami menangguhkan akun yang memakai gateway untuk hal itu.
Kasus penggunaan: pertanyaan
Bisakah saya menggunakan CrawlRelay untuk data media sosial?
Hanya untuk halaman publik, dikumpulkan sesuai aturan platform dan hukum, dan tanpa login ke akun yang bukan milik Anda. Banyak konten media sosial adalah data pribadi, jadi periksa terlebih dahulu dasar hukum. Banyak platform menawarkan API riset atau bisnis; gunakan jika tersedia.
Bisakah saya menggunakan CrawlRelay untuk verifikasi iklan?
Ya. Memeriksa bagaimana iklan dan halaman landing Anda muncul di tiap negara dan kota adalah penggunaan standar dari jalur keluar residensial. Gunakan penargetan kota dan sesi tetap pendek per pemeriksaan, seperti pada halaman SERP.
Apakah ada kasus penggunaan yang membutuhkan proxy seluler 4G?
Memeriksa apa yang dilihat pengguna ponsel: situs mobile, aplikasi, dan iklan mobile. Proxy seluler 4G yang berputar berbiaya US$3,18 untuk 1 GB dan US$1,50/GB mulai 5 GB pada CrawlRelay; uji dahulu di paket kecil sebelum mengalihkan trafik lebih banyak.