Autentikasi proxy Puppeteer dengan IP proxy residensial dan proxy seluler 4G

Bagaimana cara saya mengatur satu proxy yang diautentikasi?

Ini pola minimal. Blok try … finally menutup Chrome meskipun navigasi gagal, penting di server di mana browser yatim menumpuk.

import puppeteer from "puppeteer";

const browser = await puppeteer.launch({
  args: ["--proxy-server=http://gw.crawlrelay.com:7777"],
});
try {
  const page = await browser.newPage();
  await page.authenticate({ username: "USERNAME-country-us", password: "PASSWORD" });
  await page.setRequestInterception(true);
  page.on("request", (req) =>
    ["image", "font", "media"].includes(req.resourceType()) ? req.abort() : req.continue()
  );
  const res = await page.goto("https://example.com/", { waitUntil: "domcontentloaded", timeout: 60000 });
  console.log(res.status(), await page.title());
} finally {
  await browser.close();
}

Bagaimana cara menjalankan beberapa sesi atau negara dalam satu browser?

Buat satu konteks browser per sesi. Sebuah konteks adalah profil terisolasi dengan cookie, cache, dan status jaringan sendiri, jadi kredensial yang Anda berikan pada satu konteks tidak bocor ke yang lain. Beri setiap konteks username dengan negara atau ID sesi sendiri.

import puppeteer from "puppeteer";
import { randomUUID } from "node:crypto";

const GATEWAY = "http://gw.crawlrelay.com:7777";
const browser = await puppeteer.launch();

async function visit(country, url) {
  const session = randomUUID().replaceAll("-", "").slice(0, 10);
  const context = await browser.createBrowserContext({ proxyServer: GATEWAY });
  try {
    const page = await context.newPage();
    await page.authenticate({
      username: `USERNAME-country-${country}-session-${session}-ttl-20`,
      password: "PASSWORD",
    });
    await page.goto(url, { waitUntil: "domcontentloaded", timeout: 60000 });
    return { country, session, ip: await page.evaluate(() => document.body.innerText.trim()) };
  } finally {
    await context.close();
  }
}

try {
  const results = await Promise.all([
    visit("us", "https://api.ipify.org"),
    visit("gb", "https://api.ipify.org"),
  ]);
  console.table(results);
} finally {
  await browser.close();
}

Kenapa Puppeteer menunjukkan 407 atau ERR_TUNNEL_CONNECTION_FAILED?

Karena Chrome tidak mengirim kredensial, atau salah. Periksa tiga hal:

1. page.authenticate() dijalankan sebelum goto pertama pada halaman itu.
2. Flag --proxy-server atau proxyServer hanya berisi skema, host, dan port, tanpa bagian user:pass@.
3. Username tidak ada salah ketik pada bagian targetnya: coba dengan curl dulu, seperti pada halaman 407.

Jika curl berhasil dengan username dan password yang sama tapi Puppeteer gagal, baca ERR_TUNNEL_CONNECTION_FAILED.

Berapa biaya traffic untuk sebuah halaman Puppeteer?

Semua yang diunduh Chrome dikenai biaya: HTML, skrip, gaya, gambar, font, dan panggilan API yang dilakukan halaman. HTTP Archive Web Almanac 2025 mengukur rata-rata bobot halaman 2.164 KB di mobile dan 2.412 KB di desktop. Memblokir gambar, font, dan media dengan intersepsi permintaan biasanya menurunkannya ke beberapa ratus kilobyte, dan mengembalikan respons cache untuk skrip berulang semakin menghemat. Gunakan rotating proxy seluler 4G hanya untuk halaman yang membutuhkannya: traffic seluler 4G biaya US$1,50/GB mulai 5 GB, proxy residensial US$0,50/GB mulai 50 GB.