从亚马逊上抓取超过 5,000 条评论

Scrape more than 5,000 reviews off amazon

在抓取亚马逊评论时,即使产品有 40,000 条评论,我总是在 5,000 条评论时碰壁。有什么方法可以越过这个障碍并获得更多收益吗?

要在直接从搜索结果中抓取时获得更多页面,您可以使用过滤器将搜索分成更小的部分。例如,星级评价的评论可能首先搜索一颗星,然后搜索两颗星,等等。这当然不能保证所有结果,但会增加您的机会。一些过滤器可能数量更多但更难实现,例如标签或用户名。

或者,直接通过他们的 API and/or become an affiliate through their Amazon Associates 程序访问数据。