คำตอบด่วน
ต้องใช้ GB ของทราฟฟิกพร็อกซีเท่าไรเพื่อเก็บข้อมูล 1,000 หน้า?
ประมาณ 0.05 GB สำหรับ 1,000 หน้า HTML บีบอัด, ประมาณ 0.5 GB สำหรับการใช้บราวเซอร์ headless ที่บล็อกภาพ และประมาณ 2.2 GB สำหรับ 1,000 หน้าเรนเดอร์เต็มรูป ตามค่ามัธยฐาน HTTP Archive Web Almanac 2025 ที่ 2,164 KB ต่อหน้าบนมือถือ คูณด้วยราคาของคุณต่อ GB: ทราฟฟิกพร็อกซีเรซิเดนเชียล CrawlRelay มีราคา US$0.50/GB เริ่มต้นที่ 50 GB และไม่หมดอายุ ไม่ต้อง KYC จ่ายด้วยคริปโต
คำนวณทราฟฟิกย่อๆ
| สูตร | GB = จำนวนหน้า × ค่าเฉลี่ย KB บีบอัดต่อหน้า ÷ 1,000,000 |
|---|---|
| น้ำหนักหน้ามัธยฐาน รวมทรัพยากรทั้งหมด | 2,164 KB บนมือถือ, 2,412 KB บนเดสก์ท็อป (Web Almanac 2025, การรวบรวมข้อมูลกรกฎาคม 2025) |
| ขนาด HTML มัธยฐาน | 22 KB ในหน้าแรก; 33–35 KB ในการวัดอื่นของบทเดียวกัน |
| หน่วย | 1 GB = 1,000,000,000 ไบต์ (เลขฐานสิบ ระบบหน่วยที่ CrawlRelay คิดเงิน); 1 GiB = 1,073,741,824 ไบต์ |
| การประหยัดมากที่สุด | ดาวน์โหลด HTML หรือ JSON แทนการเรนเดอร์; บล็อกภาพ ฟอนต์ และมีเดียเมื่อเรนเดอร์ |
| ราคาของ CrawlRelay | US$1.50 สำหรับ 1 GB; US$0.50/GB จาก 50 GB |
ต้องใช้กี่ GB และกี่ดอลลาร์ต่อ 1,000 หน้า?
ขนาดบีบอัดเฉลี่ยตามประเภทหน้า 3 คอลัมน์ราคาสำหรับอ่านราคาผู้ให้บริการใดก็ได้; ราคาของ CrawlRelay คือ US$0.50/GB เริ่มต้นที่ 50 GB
| สิ่งที่คุณดาวน์โหลด | ≈ KB ต่อหน้า | GB ต่อ 1,000 หน้า | ที่ $0.50/GB | ที่ $1.00/GB | ที่ $3.50/GB |
|---|---|---|---|---|---|
| การตอบสนอง API แบบ JSON | 10 | 0.01 | $0.005 | $0.01 | $0.035 |
| หน้า HTML แบบบีบอัด | 50 | 0.05 | $0.025 | $0.05 | $0.18 |
| HTML หนัก (สคริปต์ขนาดใหญ่ฝังในหน้า) | 150 | 0.15 | $0.075 | $0.15 | $0.53 |
| เบราว์เซอร์แบบ headless ปิดภาพ ฟอนต์ และมีเดีย | 500 | 0.5 | $0.25 | $0.50 | $1.75 |
| เรนเดอร์เต็มรูปแบบ หน้าเว็บมือถือขนาดกลาง | 2,164 | 2.16 | $1.08 | $2.16 | $7.57 |
$3.50/GB คือราคากลางสำหรับ 10 GB ใน ดัชนีราคาตุลาคม 2026 จะวัดน้ำหนักหน้าเว็บจาก HTTP Archive Web Almanac 2025 และขนาดบีบอัดทั่วไป; คุณสามารถวัดหน้าของตัวเองได้
ฉันวัดหน้าของตัวเองยังไง?
ดึง URL จริงตัวอย่าง 100 ถึง 1,000 ผ่านพร็อกซีคำนวณจำนวนไบต์ที่ได้รับบนสายและประเมินค่า httpx num_bytes_downloaded นับไบต์บีบอัดซึ่งใกล้เคียงกับที่พร็อกซีเรียกเก็บเงิน เพิ่มอีกไม่กี่กิโลไบต์ต่อการเชื่อมต่อใหม่สำหรับการจับมือ TLS หากเปลี่ยน IP ทุกคำขอ
import statistics
import httpx
PROXY = "http://USERNAME-country-us:[email protected]:7777"
SAMPLE = ["https://example.com/", "https://example.org/", "https://example.net/"] # use 100+ real URLs
sizes = []
with httpx.Client(proxy=PROXY, timeout=httpx.Timeout(30.0, connect=10.0), follow_redirects=True) as client:
for url in SAMPLE:
try:
r = client.get(url)
sizes.append(r.num_bytes_downloaded)
except httpx.HTTPError:
pass
if sizes:
mean = statistics.mean(sizes)
print("pages measured:", len(sizes))
print("mean bytes per page: %.0f" % mean)
print("GB per 1,000 pages: %.3f" % (mean * 1000 / 1e9))
print("GB for 1 million pages: %.1f" % (mean * 1_000_000 / 1e9))แผนใดเหมาะกับโปรเจคไหน?
แปลงจำนวนหน้าเป็นกิกะไบต์ แล้วเลือกแผนที่ครอบคลุม เมื่อ HTML ประมาณ 50 KB ต่อหน้า:
| โปรเจค | จำนวนหน้า | ปริมาณข้อมูล | แผน CrawlRelay |
|---|---|---|---|
| ทดสอบเป้าหมายใหม่ | 5,000 | ≈0.25 GB | 1 GB (US$1.50) |
| เครื่องมือตรวจขนาดเล็ก 1 เดือน | 100,000 | ≈5 GB | 5 GB (US$3.75) หรือ 10 GB (US$5.94) |
| คลังแคตาล็อก | 1 ล้าน | ≈50 GB | 50 GB (US$25) |
| คลังข้อมูลหลายไซต์ | 10 ล้าน | ≈500 GB | 500 GB (US$250) |
| คลังข้อมูล AI ขนาดใหญ่ | 20 ล้าน | ≈1 TB | 1 TB (US$500) |
ปริมาณข้อมูลไม่หมดอายุ จึงซื้อแผนใหญ่ครั้งเดียวแล้วใช้ได้หลายเดือน
ฉันจะลดปริมาณข้อมูลพร็อกซีโดยไม่เสียข้อมูลอย่างไร?
- ดึงข้อมูล ไม่ดึงหน้าเว็บ ถ้าไซต์มีเอกสารหรืออนุญาตจุดเชื่อมต่อ JSON จะใช้ข้อมูลน้อยกว่าหน้า HTML
- เรนเดอร์เมื่อจำเป็นเท่านั้น เบราว์เซอร์แบบ headless ดึงสคริปต์ สไตล์ ภาพ และฟอนต์ HTTP ธรรมดาดึงแค่เอกสารเดียว
- บล็อกทรัพยากรหนักในเบราว์เซอร์: ภาพ ฟอนต์ และมีเดีย ใช้ไบต์มากที่สุด
- เปิดการบีบอัดไว้เสมอ ส่ง
Accept-Encoding: gzip, br; ไคลเอนต์ส่วนใหญ่ตั้งค่าไว้แล้ว - ข้ามหน้าที่ไม่เปลี่ยนแปลง ด้วย
If-None-MatchหรือIf-Modified-Since:304จะเสียค่าใช้จ่ายเพิ่มไม่กี่ร้อยไบต์ - ลบลิงก์ซ้ำซ้อนก่อนเข้าสู่คิว: พารามิเตอร์ติดตามและรหัสเซสชันสร้างหน้าซ้ำกัน
- เก็บการตอบกลับดิบ เพื่อบั๊กของพาร์เซอร์จะไม่บังคับให้ดาวน์โหลดซ้ำ
คำถามเกี่ยวกับแบนด์วิดท์พร็อกซี
การดึงข้อมูล 1 ล้านหน้าด้วยพร็อกซีเรซิเดนเชียลจะมีค่าใช้จ่ายเท่าไหร่?
ถ้า HTML บีบอัดประมาณ 50 KB ต่อหน้า 1 ล้านหน้าจะใช้ประมาณ 50 GB ที่ CrawlRelay นั้นคือแผน 50 GB, US$25, ณ ตุลาคม 2026 การเรนเดอร์แต่ละหน้าในเบราว์เซอร์ที่ขนาดกลาง 2 MB จะใช้ประมาณ 2 TB แทน วิธีดึงข้อมูลจึงมีผลมากกว่าผู้ให้บริการถึง 40 เท่า
พร็อกซีนับปริมาณการอัปโหลดและดาวน์โหลดข้อมูลหรือไม่?
แบนด์วิดท์ของพร็อกซีนับข้อมูลที่ผ่านเกตเวย์สำหรับการเชื่อมต่อของคุณ; สำหรับการขูดข้อมูล, การตอบสนองเกือบทั้งหมดนับเป็นข้อมูลทั้งหมด. คำขอที่มีเนื้อหาขนาดใหญ่ เช่น การอัปโหลดไฟล์ จะถูกนับขนาดของมันเอง. ที่ CrawlRelay: นับข้อมูลทั้งหมดที่ส่งและรับผ่านพร็อกซี (อัปโหลดและดาวน์โหลด รวมทั้งส่วนหัว) 1 GB = 1,000,000,000 ไบต์ การเชื่อมต่อล้มเหลวก่อนถึงเป้าหมายจะไม่นับ.
การเปลี่ยน IP ใหม่ในแต่ละคำขอใช้แบนด์วิดท์มากขึ้นหรือไม่?
เพิ่มขึ้นเล็กน้อยเท่านั้น. การเชื่อมต่อใหม่แต่ละครั้งต้องมีการจับมือ TLS กับเว็บไซต์ ซึ่งโดยทั่วไปใช้ข้อมูลไม่กี่กิโลไบต์รวมถึงโซ่ใบรับรอง. บนหน้า 50 KB นั่นคิดเป็นไม่กี่เปอร์เซ็นต์; บนคำตอบ JSON เล็ก ๆ อาจเป็นสัดส่วนใหญ่. ใช้เซสชันติดหนึบและ keep-alive สำหรับหลายคำขอไปยังไซต์เดียวกันเมื่อไม่สนใจความหลากหลายของ IP.
ราคาต่อ GB หรือ GB ต่อหน้าแบบไหนสำคัญกว่า?
GB ต่อหน้าสำคัญกว่ามาก. ความแตกต่างระหว่างการดึง HTML กับการเรนเดอร์หน้าเต็มนั้นเกือบสี่สิบเท่า ในขณะที่ราคาที่ตั้งไว้ตามปกติมักแพงกว่าราคาเริ่มต้นเพียงสองถึงห้าเท่าในปริมาณเดียวกัน. ปรับปรุงวิธีการดึงข้อมูลก่อน แล้วค่อยเปรียบเทียบผู้ให้บริการบน ตารางราคา.
แหล่งข้อมูล (2)
- Web Almanac 2025: น้ำหนักหน้า — HTTP Archive (2026-01-15)
- ดัชนีราคาพร็อกซีเรซิเดนเชียล 2026 — CrawlRelay (2026-10-13)
ซื้อกิกะไบต์ตามที่คุณวัดได้
US$1.50 สำหรับ 1 GB, US$0.50/GB จาก 50 GB, ไม่หมดอายุ.