机器人是否打开文件并使用带宽

Do bots open files and use bandwidth

我们正在尝试降低带宽使用率,但在分解哪些文件使用的带宽最多后,我们有点困惑。虽然我们还没有正式推广我们的播客网站,但仅本月到目前为止,MP3 文件(每个约 10MB)就使用了 1-2 GB 的带宽。我用 Google 分析进行了一些测试,会使用一些带宽,但我认为它不会使用那么多。

机器人是否会抓取 MP3/MP4 文件并增加其带宽使用量?大多数文件都是 206 状态代码。

这当然是有可能的。您可以将 robots.txt 文件添加到您的网站并添加类似这样的内容以防止他们扫描(如果他们这样做了)。

User-agent: * Disallow: /folder/*.mp4