如何检查scrapy发射的每个Spider的IP?

时间:2019-02-12 12:48:27

标签: python web-scraping scrapy ip

与先前的question相关,我想知道何时发射这样的蜘蛛:

scrapy crawl spider -a username=Bidule -a password=TMTC #cmd1

scrapy crawl spider -a username=Truc -a password=TMTC #cmd2

如何获取每个IP的当前IP?

注意:在另一个论坛中,一个膜告诉我代理将对其进行管理,但是我想检查它是否为真,以便知道我是否必须更改代码中的某些内容。

1 个答案:

答案 0 :(得分:2)

您可以向返回您IP地址的站点发出请求,然后从响应中解析IP。

例如https://httpbin.org/ip