身份验证失败 - 999 - HTTP 状态代码未处理或不允许

Auth failing - 999- HTTP status code is not handled or not allowed

我使用 scrapy,我想得到忽略响应 URL.I 只需在输出控制台中看到:

调试:忽略响应 <999 https://www.mywebsite.com>:HTTP 状态代码未处理或不允许。

根据文档here,您可以添加一个 HTTP 状态代码列表,即使它们在默认情况下是不允许的,也应该由您的蜘蛛处理。

在您的情况下,您必须在蜘蛛定义中添加以下行:

handle_httpstatus_list = [999]

这将导致蜘蛛即使有此状态代码也能获得结果。

下次 在提问之前,请先通过 Whosebug 查看类似问题并阅读文档。放一些代码让我们知道您的错误发生在哪里是不会错的。没有这些信息,社区很少能给出任何答案。