NodeJS网络抓取-形式深渊翻滚 [英] NodeJS Web Scraping - Form Submission

问题描述

我正在尝试使用X光来做以下事情，我不太熟悉网络刮削，我正在寻找一种适合我使用的技术。

浏览页面，在其中分配特定表单，设置一些变量，然后提交。 然后转到另一个页面，依此类推.

带示例和文档的基于NodeJS的最佳解决方案是什么？

谢谢。

推荐答案

有许多为Web抓取创建的节点模块。

其中一些是：

• cheerio
• osmosis
• x-ray
• noodlejs
• yakuza
• ineed

见Node.js Scraping Libraries-莫里茨·克拉克在WebKid博客上的一个非常好的比较。

网上有一些关于如何使用它们的好文章，大部分是关于Cheerio的：

• Web Scraping With Node.js埃利奥特·邦内维尔(Smsing Magazine)关于啦啦队
• Scraping the Web With Node.jsAdnan Kukic(Scotch.io)关于Cheerio
• Easy Web Scraping With Node.js米格尔·格林伯格关于啦啦队
• Simple web scraping with Node.js / JavaScriptStephen(‘Net Instructions)关于Cheerio

值得一提的是，x射线模块是由Cheerio的作者编写的-参见：X-Ray: A Scraper by the Author of Cheerioon DailyJS。

这篇关于NodeJS网络抓取-形式深渊翻滚的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！