抓取过程中是否可以增加Worker

Can I Increase the Workers during the crawl Processs

正在研究 Storm Crawler 1.10 和 Apache storm 1.2.2。在进行爬网过程时,如何更改工作线程和数字获取线程。

获取线程的数量不能即时改变,工人的数量也是如此。您可以简单地停止拓扑,更改配置并重新启动它。中断将是最小的,我们从它离开的地方开始抓取