Scrapy - 更改日志统计之间的间隔
Scrapy - Change intervals between logging stats
Scrapy 每 60 秒记录一次有关已抓取页面数量、抓取速度等的统计信息。有没有办法改变这些间隔？
2016-12-19 15:09:01 [scrapy] INFO: Crawled 0 pages (at 0 pages/min), scraped 0 items (at 0 items/min)
2016-12-19 15:10:01 [scrapy] INFO: Crawled 82 pages (at 82 pages/min), scraped 28290 items (at 28290 items/min)
2016-12-19 15:11:01 [scrapy] INFO: Crawled 167 pages (at 85 pages/min), scraped 57615 items (at 29325 items/min)
有一个名为 LOGSTATS_INTERVAL 的（未记录？）设置，默认为 60（秒）。
您可以在 settings.py 中更改您喜欢的间隔（以秒为单位）。例如
LOGSTATS_INTERVAL = 5 * 60.0 # log stats every 5 minutes
Scrapy 每 60 秒记录一次有关已抓取页面数量、抓取速度等的统计信息。有没有办法改变这些间隔？
2016-12-19 15:09:01 [scrapy] INFO: Crawled 0 pages (at 0 pages/min), scraped 0 items (at 0 items/min)
2016-12-19 15:10:01 [scrapy] INFO: Crawled 82 pages (at 82 pages/min), scraped 28290 items (at 28290 items/min)
2016-12-19 15:11:01 [scrapy] INFO: Crawled 167 pages (at 85 pages/min), scraped 57615 items (at 29325 items/min)
有一个名为 LOGSTATS_INTERVAL 的（未记录？）设置，默认为 60（秒）。
您可以在 settings.py 中更改您喜欢的间隔（以秒为单位）。例如
LOGSTATS_INTERVAL = 5 * 60.0 # log stats every 5 minutes