Proxy cho giám sát giá thương mại điện tử tại châu Á

Tại sao quốc gia của proxy lại quan trọng khi theo dõi giá?

Quốc gia của proxy quan trọng vì các sàn thương mại điện tử châu Á hiển thị giá, tiền tệ, tồn kho và phí giao hàng khác nhau theo vị trí. Shopee và Lazada vận hành trang riêng cho từng quốc gia. Giá Shopee Việt Nam chỉ hiển thị chính xác với khách truy cập tại Việt Nam.

Thành phố cũng có thể quan trọng. Phí giao hàng và ngày giao hàng trên Rakuten hoặc Flipkart có thể thay đổi giữa các thành phố. AsiaProxies là nhà cung cấp proxy châu Á - Thái Bình Dương: proxy dân cư và proxy di động 4G/5G tại Nhật Bản, Hàn Quốc, Ấn Độ, Indonesia, Việt Nam, Philippines, Thái Lan, Singapore và Úc, thanh toán bằng crypto không cần KYC.

Nên dùng proxy dân cư hay proxy di động 4G để theo dõi giá?

Dùng proxy dân cư cho hầu hết việc theo dõi giá. Chúng có chi phí thấp hơn mỗi GB, bao phủ mọi quốc gia khu vực Châu Á - Thái Bình Dương và thay đổi IP mỗi yêu cầu. Dùng phiên cố định (tối đa 60 phút) khi luồng trang cần cùng một IP, ví dụ khi duyệt kết quả tìm kiếm.

Dùng proxy di động 4G khi dữ liệu chỉ có trong app, hoặc khi kiểm tra khuyến mãi chỉ dành cho di động. Một cổng 4G/5G riêng có giá từ $3/ngày với lưu lượng không giới hạn. Dữ liệu di động xoay vòng có giá từ 0,90 US$/GB.

Làm sao để theo dõi giá một cách lịch sự?

Theo dõi lịch sự nghĩa là bạn chỉ lấy dữ liệu công khai, làm chậm rãi và tuân thủ quy định từng trang. Làm theo các quy tắc sau:

• Trước tiên kiểm tra API chính thức. Một số nền tảng có API, như Shopee Open Platform dành cho người bán.
• Đọc kỹ điều khoản dịch vụ và robots.txt của từng trang và tôn trọng chúng.
• Chỉ thu thập dữ liệu sản phẩm công khai: giá, tồn kho, phí giao hàng và tên người bán. Không đăng nhập và không lấy dữ liệu cá nhân như hồ sơ người đánh giá.
• Giữ tốc độ yêu cầu thấp. Bắt đầu với một yêu cầu mỗi vài giây trên mỗi trang, và dùng ít luồng đồng thời.
• Lưu cache kết quả và lấy mỗi sản phẩm chỉ theo tần suất báo cáo cần.
• Chậm lại hoặc dừng lại khi nhận HTTP 429 hoặc CAPTCHA. Không cố gắng vượt qua chúng.

Chính sách sử dụng chấp nhận của chúng tôi acceptable use policy cấm việc scalping, lạm dụng thưởng, tạo tài khoản ảo và né tránh cấm.

Làm sao gửi yêu cầu kiểm tra giá qua IP quốc gia?

Đặt quốc gia mục tiêu trong tên đăng nhập proxy, thêm độ trễ và kiểm tra robots.txt trước mỗi trang mới. Ví dụ dưới đây dùng Python và gateway của chúng tôi. Thay URL mẫu bằng trang sản phẩm công khai bạn được phép lấy. Cài đặt đầy đủ trong hướng dẫn thiết lập.

import time, random, requests
from urllib import robotparser
from urllib.parse import urlparse

# Username format: USERNAME-country-{cc}-city-{city}-session-{id}-ttl-{minutes}
USER = "USERNAME-country-id-city-jakarta-session-price01-ttl-10"
PROXY = f"http://{USER}:[email protected]:7777"
PROXIES = {"http": PROXY, "https": PROXY}
HEADERS = {"User-Agent": "PriceMonitor/1.0 (contact: [email protected])"}

def allowed(url):
    root = "{0.scheme}://{0.netloc}".format(urlparse(url))
    rp = robotparser.RobotFileParser(root + "/robots.txt")
    rp.read()
    return rp.can_fetch(HEADERS["User-Agent"], url)

urls = ["https://shop.example/item/1001", "https://shop.example/item/1002"]
for url in urls:
    if not allowed(url):
        print("skip (robots.txt):", url)
        continue
    r = requests.get(url, proxies=PROXIES, headers=HEADERS, timeout=30)
    if r.status_code == 429:
        print("rate limited, stopping")
        break
    print(url, r.status_code, len(r.content))
    time.sleep(random.uniform(3, 6))  # polite delay per request

Theo dõi giá dùng bao nhiêu lưu lượng?

Lưu lượng phụ thuộc kích thước trang và số trang bạn lấy. Đo một trang sản phẩm trước, rồi nhân lên. Ví dụ, nếu một trang trung bình 200 KB, 10,000 lượt tải trang dùng khoảng 2 GB.

Bạn có thể giảm lưu lượng bằng cách chỉ yêu cầu HTML hoặc endpoint dữ liệu sản phẩm, và bỏ qua hình ảnh. Lưu lượng proxy dân cư không bao giờ hết hạn, nên gói 6,60 US$ 10 GB có thể dùng cho nhiều chu kỳ theo dõi. Xem các gói trên trang giá.