NodeJS Web Scraping - 表单提交

时间:2016-05-25 17:36:55

标签: node.js web-scraping web-crawler

我正在尝试使用X-Ray来做以下事情,我不喜欢网络疤痕,而且我正在寻找适合我使用的技术。

浏览页面,在其中分配特定表单,设置一些变量并提交。 然后得到另一页,依此类推......

基于NodeJS的最佳解决方案是什么,包含示例和文档来完成这项工作?

感谢。

1 个答案:

答案 0 :(得分:2)

为网络抓取创建了许多节点模块。

其中一些是:

参见Node.js Scraping Libraries - Moritz Klack在Webkid博客上的一个非常好的比较。

网上有一些关于如何使用其中一些的好文章,主要是关于Cheerio:

值得一提的是,X射线模块是由Cheerio的作者撰写的 - 请参阅:X-Ray: A Scraper by the Author of Cheerio在DailyJS上。