允许抓取需要 javascript 的站点的节点包
Node package that allows crawling of sites that requires javascript
所以我一直在无休止地寻找允许抓取 javascript 个站点的软件包。我一直在尝试 selenium,但我不喜欢整个浏览器交易。
是否有类似于 superagent 和 request 的解决方案post & get requests,它也有 javascript "enabled"?
看看scraperjs dynamicScraper function or phantomjs。
它们都允许 运行 js 而无需加载整个浏览器。
这是
页上 how to wait for some events 的示例
所以我一直在无休止地寻找允许抓取 javascript 个站点的软件包。我一直在尝试 selenium,但我不喜欢整个浏览器交易。
是否有类似于 superagent 和 request 的解决方案post & get requests,它也有 javascript "enabled"?
看看scraperjs dynamicScraper function or phantomjs。 它们都允许 运行 js 而无需加载整个浏览器。 这是
页上 how to wait for some events 的示例