需要网络爬虫

时间:2010-04-12 11:23:15

标签: web-crawler

有人知道我可以在哪里获得一个免费的网络抓取工具,实际上我的编码很少吗?

我用谷歌搜索了它,只能找到不起作用的旧的或者看起来不起作用的openwebspider。

理想情况下,我只想存储网页地址以及该网页包含的链接。

有什么建议吗?

1 个答案:

答案 0 :(得分:4)

我建议从头开始写一个。您可以使用搜索爬虫的时间来编写一个。