Python selenium 防止网站被阻塞

Question

我脑子里并没有真正的项目，只是在我开始想知道如何防止网站知道我反复访问它们时想弄清楚。

我不知道如何使用 selenium，这就是为什么我进行了大量尝试和错误的原因 - 网站突然阻止了我。我打开了 protonvpn（免费），但它仍然不让我进入那个网站。我在 chrome 和 Proxies 上读到过有关虚假用户代理的信息，但关键是什么？第二次进入之前需要做什么，才能让别人知道是我？

更改我的 IP 地址是否足够？这是要走的路吗？我找不到合适的 python 相关答案

Answer 1

这里的问题听起来有两点：

1. 许多网站都有用户代理检测方法，可以识别自动化工具，例如 Selenium。

2. 快速执行针对网站的操作通常会触发机器人检测工具，这也是不明智的做法。通常对于抓取站点，如果您不确定有什么样的反机器人或反垃圾邮件系统，您希望将抓取器配置为具有类似人类的操作执行时间。

最好的办法是检查 selenium 用户代理并将其配置为其他内容。