允许抓取需要 javascript 的站点的节点包

Node package that allows crawling of sites that requires javascript

所以我一直在无休止地寻找允许抓取 javascript 个站点的软件包。我一直在尝试 selenium,但我不喜欢整个浏览器交易。

是否有类似于 superagentrequest 的解决方案post & get requests,它也有 javascript "enabled"?

看看scraperjs dynamicScraper function or phantomjs。 它们都允许 运行 js 而无需加载整个浏览器。 这是

页上 how to wait for some events 的示例