为每个 HTTP 请求添加 header 和自定义 User-Agent
Add header with custom User-Agent for every HTTP request
是否可以让 python 在使用 urllib 时为每个 HTTP 连接使用带有特定 User-Agent 字符串的自定义 header?为了使以下内容在整个程序中持续存在并添加到每个 Request()、urllib.request.urlretrieve() 和建立 HTTP 连接的每个其他函数中:
.add_header('User-Agent', 'Mozilla/5.0')
或者是否可以在配置文件的某处将 python 的默认 User-Agent 字符串从 Python-urllib/3.5
更改为 Mozilla/5.0
?
您可以使用 requests.Session
更新 headers
import requests
session = requests.Session()
session.headers['User-Agent'] = 'my user agent'
response = session.get('http://google.com')
是否可以让 python 在使用 urllib 时为每个 HTTP 连接使用带有特定 User-Agent 字符串的自定义 header?为了使以下内容在整个程序中持续存在并添加到每个 Request()、urllib.request.urlretrieve() 和建立 HTTP 连接的每个其他函数中:
.add_header('User-Agent', 'Mozilla/5.0')
或者是否可以在配置文件的某处将 python 的默认 User-Agent 字符串从 Python-urllib/3.5
更改为 Mozilla/5.0
?
您可以使用 requests.Session
import requests
session = requests.Session()
session.headers['User-Agent'] = 'my user agent'
response = session.get('http://google.com')