Proxy dân cư cần bao nhiêu GB? Cách tính theo dung lượng trang

Proxy dân cư tính tiền theo GB, nên câu hỏi thật sự là mỗi request của bạn nặng bao nhiêu. Đây là cách ước tính trong 5 phút với số liệu thực tế.

Proxy dân cư (residential proxy) được bán theo lưu lượng, không theo IP hay theo số request. Vì vậy lần mua đầu tiên giống như đoán mò: 2 GB có đủ không, hay cần 50 GB? Câu trả lời gần như chỉ phụ thuộc vào một con số, đó là dung lượng trung bình của một request, và bạn có thể đo nó trước khi bỏ tiền.

Cái gì được tính là lưu lượng?

Nhà cung cấp tính mọi byte đi qua proxy: request bạn gửi đi, phản hồi nhận về, header, quá trình bắt tay TLS và chuyển hướng. Phần tải xuống chiếm phần lớn, nên trên thực tế có thể hiểu là «mọi thứ máy chủ đích gửi về cho bạn».

Dung lượng điển hình cho mỗi request

Gọi API JSON: 2 đến 50 KB. 1 GB đủ cho khoảng 20.000 đến 500.000 lần gọi.
Trang HTML thô (dùng curl, Python requests hoặc tương tự, không tải ảnh): thường 50 đến 300 KB sau nén. 1 GB đủ cho khoảng 3.000 đến 20.000 trang.
Tải trang đầy đủ bằng trình duyệt (Puppeteer, Playwright, Selenium, trình duyệt antidetect): trang web trung bình nặng khoảng 2 đến 2,5 MB gồm ảnh, script và font. 1 GB chỉ đủ cho khoảng 400 đến 500 trang.
Video hoặc ảnh lớn: vài MB mỗi phút. Tránh tải chúng qua proxy dân cư nếu không thật sự cần.

Ước tính trong 5 phút

Chạy script hoặc trình duyệt với 50 đến 100 request điển hình, qua proxy hoặc không.
Xem tổng dung lượng đã truyền: tab Network trong Chrome DevTools hiển thị ở phía dưới, còn trong code bạn có thể cộng kích thước các phản hồi.
Chia cho số request để ra dung lượng trung bình.
Nhân với số request dự kiến mỗi tháng, rồi cộng thêm 15 đến 25% cho việc thử lại, chuyển hướng và request lỗi.

Ví dụ: 30.000 trang sản phẩm mỗi tháng, mỗi trang 180 KB, tổng khoảng 5,4 GB. Cộng 20% dự phòng là khoảng 6,5 GB, nên gói 10 GB vẫn còn dư thoải mái.

Cách dùng ít dữ liệu hơn nhiều

Chặn ảnh, media và font trong trình duyệt headless. Với Playwright và Puppeteer chỉ cần vài dòng chặn request, thường giảm 50 đến 80% lưu lượng.
Gọi API nội bộ của trang web thay vì render cả trang, nếu dữ liệu đến từ đó. JSON nhẹ hơn nhiều lần so với HTML cùng tài nguyên đi kèm.
Gửi Accept-Encoding: gzip, br để nhận phản hồi đã nén. Hầu hết thư viện HTTP làm điều này mặc định, nhưng hãy kiểm tra thư viện bạn dùng.
Chỉ đi qua proxy những gì cần IP dân cư. File tĩnh từ CDN thường không quan tâm đến IP của bạn, hãy tải trực tiếp.
Lưu cache những trang không thay đổi giữa các lần chạy.

Bắt đầu với gói nhỏ

Đo bằng một gói nhỏ rồi mới mở rộng. Dung lượng không hết hạn sau một tháng giúp ích rất nhiều: tại Proxare, dung lượng proxy dân cư và proxy di động có hạn dùng 12 tháng, nên mua gói lớn hơn một chút với giá mỗi GB rẻ hơn không có nghĩa là mất phần chưa dùng trong tháng này.

Bài viết khác

Ngôn ngữ khác: English · Français · العربية · 中文 · Українська