DNN 为抓取工具提供 "fresh" 个页面。如何让它为爬虫提供缓存页面?

DNN serves "fresh" pages to crawlers. How do I make it serve cached pages to crawlers?

根据 DNN 的说法,向 Googlebot 等爬虫提供未缓存 ("fresh") 的页面是 DNN 的默认行为。我们网站的许多页面都很重,我们广泛使用数据库缓存。

我可以调整什么设置来为抓取工具提供缓存页面?我在 web.config 或 rules.config 中找不到任何似乎与此相关的内容。这是我需要添加的东西吗?

我没有通过谷歌搜索找到它的文档。请帮忙。谢谢!

DNN 平台向爬虫提供的内容与网站的普通访问者所提供的内容没有任何不同,因此他们看到的内容应该与其他人看到的相同。