Puppeteer proxy kimlik doğrulaması konut ve mobil IP'lerle

Tek bir kimlik doğrulamalı proxy nasıl kurarım?

Bu en temel kalıptır. try … finally bloğu, gezinme başarısız olsa bile Chrome'u kapatır; bu, yetim tarayıcıların biriktiği sunucular için önemlidir.

import puppeteer from "puppeteer";

const browser = await puppeteer.launch({
  args: ["--proxy-server=http://gw.crawlrelay.com:7777"],
});
try {
  const page = await browser.newPage();
  await page.authenticate({ username: "USERNAME-country-us", password: "PASSWORD" });
  await page.setRequestInterception(true);
  page.on("request", (req) =>
    ["image", "font", "media"].includes(req.resourceType()) ? req.abort() : req.continue()
  );
  const res = await page.goto("https://example.com/", { waitUntil: "domcontentloaded", timeout: 60000 });
  console.log(res.status(), await page.title());
} finally {
  await browser.close();
}

Birden fazla oturum veya ülkeyi tek tarayıcıda nasıl çalıştırırım?

Her oturum için bir tarayıcı bağlamı oluşturun. Bağlam; kendi çerezleri, önbelleği ve ağ durumu olan izole bir profildir, böylece bir bağlama verdiğiniz kimlik bilgileri başka bağlama sızmaz. Her bağlama kendi ülkesini veya oturum kimliğini içeren bir kullanıcı adı verin.

import puppeteer from "puppeteer";
import { randomUUID } from "node:crypto";

const GATEWAY = "http://gw.crawlrelay.com:7777";
const browser = await puppeteer.launch();

async function visit(country, url) {
  const session = randomUUID().replaceAll("-", "").slice(0, 10);
  const context = await browser.createBrowserContext({ proxyServer: GATEWAY });
  try {
    const page = await context.newPage();
    await page.authenticate({
      username: `USERNAME-country-${country}-session-${session}-ttl-20`,
      password: "PASSWORD",
    });
    await page.goto(url, { waitUntil: "domcontentloaded", timeout: 60000 });
    return { country, session, ip: await page.evaluate(() => document.body.innerText.trim()) };
  } finally {
    await context.close();
  }
}

try {
  const results = await Promise.all([
    visit("us", "https://api.ipify.org"),
    visit("gb", "https://api.ipify.org"),
  ]);
  console.table(results);
} finally {
  await browser.close();
}

Puppeteer neden 407 veya ERR_TUNNEL_CONNECTION_FAILED gösterir?

Çünkü Chrome hiç kimlik bilgisi göndermedi ya da yanlış gönderdiler. Üç şeyi kontrol edin:

1. page.authenticate(), o sayfada ilk goto'ten önce çalışır.
2. --proxy-server bayrağı veya proxyServer sadece şema, host ve port içerir; user:pass@ kısmı yoktur.
3. Kullanıcı adının hedef kısmında yazım yanlışı yoktur: önce curl ile test edin, 407 sayfasında gösterildiği gibi.

Eğer curl aynı kullanıcı adı ve şifre ile başarılıysa ve Puppeteer başarısızsa, ERR_TUNNEL_CONNECTION_FAILED sayfasını okuyun.

Puppeteer sayfası kaç GB trafik harcar?

Chrome'un indirdiği her şey faturalandırılır: HTML, betikler, stil dosyaları, resimler, fontlar ve sayfanın yaptığı API çağrıları. HTTP Archive Web Almanac 2025, mobilde ortalama sayfa ağırlığını 2,164 KB ve masaüstünde 2,412 KB olarak ölçmüştür. İstek engelleme ile resimleri, fontları ve medyayı engellemek genellikle bunu birkaç yüz kilobaya indirir; tekrarlanan betikler için önbelleğe alınan yanıtları geri vermek ise daha da azaltır. Sadece ihtiyacınız olan sayfalar için döndürücü mobil 4G proxy kullanın: mobil trafik 5 GB’dan başlayan $1,50/GB, konut trafik ise 50 GB’dan başlayan $0,50/GB ile maliyetlendirilir.