codeforfun

Hình như bạn muốn crawl data từ website nào đó. Nếu bạn muốn crawl data web để không bị block thì nên dùng proxy nhé, proxy sẽ giúp bạn change IP ngẫu nhiên. Không thì IP address của bạn sẽ sớm bị block vì cố tình crawl data gây chậm cho hệ thống của họ. Và cũng nói thêm domain chỉ là định danh thôi không block được gì cả, chỉ là bộ filter được chủ web thiết lập xem là request của bạn là trình duyệt hay qua giả lập (bot, job ...) mới là cái block request.