SSL CERTIFICATE_VERIFY_FAILED melalui proxy

Apa arti SSL: CERTIFICATE_VERIFY_FAILED?

Selama handshake TLS, situs web mengirim rantai sertifikat. Klien Anda memeriksanya terhadap daftar otoritas tepercaya, trust store, serta memeriksa nama dan tanggal. Jika salah satu pemeriksaan gagal, proses dihentikan.

Dengan terowongan CONNECT, proxy meneruskan handshake tanpa disentuh, jadi sertifikat yang Anda lihat adalah milik situs web. Sesuatu yang menyisipkan sertifikat sendiri, seperti perangkat lunak inspeksi, atau trust store yang sudah usang di mesin Anda, biasanya penyebabnya.

Seperti apa CERTIFICATE_VERIFY_FAILED dalam Python, curl, Node.js, dan browser?

Kegagalan yang sama dicetak berbeda di setiap alat. Ini adalah pesan yang perlu dicari di log Anda:

• Python: [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: unable to get local issuer certificate
• Node.js: UNABLE_TO_GET_ISSUER_CERT_LOCALLY atau SELF_SIGNED_CERT_IN_CHAIN
• curl: curl: (60) SSL certificate problem: unable to get local issuer certificate
• Browser: NET::ERR_CERT_AUTHORITY_INVALID

Apa penyebab CERTIFICATE_VERIFY_FAILED?

Kemungkinan besar pertama:

• Bundle CA yang usang, misalnya paket certifi lama di Python.
• Inspeksi HTTPS oleh antivirus, firewall perusahaan, atau proxy debugging, yang menghadirkan sertifikat sendiri.
• Jam sistem yang salah yang membuat sertifikat valid tampak kedaluwarsa atau belum berlaku.
• Situs web dengan rantai yang rusak, kekurangan sertifikat intermediate.
• Gambar container tanpa paket sertifikat CA sistem.

Bagaimana cara mendiagnosis CERTIFICATE_VERIFY_FAILED langkah demi langkah?

1. Jalankan permintaan yang sama tanpa proxy. Jika juga gagal, proxy tidak terlibat.
2. Cetak penerbit sertifikat dengan openssl s_client atau curl -v: penerbit dengan nama antivirus atau firewall Anda menunjukkan adanya intersepsi.
3. Periksa tanggal dan waktu sistem.
4. Perbarui bundle CA dan uji lagi.

# Use the URL that fails; with https://api.ipify.org instead, you test the gateway alone.
# "HTTP/1.1 200 Connection established" first, then the site's own status: the site answered.
curl -v -x http://USERNAME:[email protected]:7777 https://TARGET_URL

# Same test through the SOCKS5 port, with DNS resolved at the exit
curl -v --socks5-hostname gw.crawlrelay.com:7778 --proxy-user USERNAME:PASSWORD https://TARGET_URL

Bagaimana cara memperbaiki CERTIFICATE_VERIFY_FAILED?

• Perbarui certifi (pip install -U certifi) atau paket CA sistem Anda.
• Tambahkan sertifikat inspeksi perusahaan ke trust store jika jaringan Anda membutuhkan inspeksi, atau jalankan scraper di luar jaringan tersebut.
• Perbaiki jam dengan sinkronisasi waktu jaringan.
• Pasang sertifikat CA di gambar container slim, misalnya paket ca-certificates.
• Jangan nonaktifkan verifikasi di kode yang mengirim kredensial atau mengumpulkan data yang Anda andalkan.

Haruskah saya mencoba lagi setelah CERTIFICATE_VERIFY_FAILED?

Jangan coba ulang: trust store yang sama akan gagal dengan cara yang sama. Perbaiki trust store, jam, atau jalur jaringan, lalu jalankan ulang.

Bagaimana SSL: CERTIFICATE_VERIFY_FAILED berlaku untuk CrawlRelay?

Port HTTP CrawlRelay menuntun HTTPS dengan CONNECT, jadi sertifikat yang diperiksa klien adalah yang dikirim situs web. Jika error muncul hanya melalui gateway dan tidak pernah tanpa itu, hubungi dukungan dengan hostname target dan error lengkap supaya kami dapat memeriksa sisi keluaran.

Gateway: gw.crawlrelay.com, port 7777 (HTTP, HTTPS melalui CONNECT) dan port 7778 (SOCKS5). Format username: USERNAME-country-{cc}-state-{state}-city-{city}-zip-{zip}-asn-{asn}-session-{id}-ttl-{minutes}. Terkait: SSL: WRONG_VERSION_NUMBER · Koneksi direset · Panduan Python.