我如何从完整的 URL 创建一个百分比编码的 URL？

Question

输入url是ascii和多字节代码的混合。而且我无法更改此字符串。我想下载这个 url，但是发生错误 ordinal not in range(128)。

input_url = "http://sample.jp/api?v1=aaa&v2=日本語&v3=ccc"

req = urllib.request.Request(input_url)
resp = None
try:
    resp = urllib.request.urlopen(req)
except UnicodeEncodeError as e:
    print(e.reason)  # I had an error `ordinal not in range(128)`
return resp

首先，我尝试了 urllib.parse.quote()，但结果是 http%3a%2f%2fsample%2ejp%2fapi%3fv1%3daaa%26v2%3d%93%fa%96%7b%8c%ea%26v3%3dccc。我有另一个错误 ValueError: unknown url type。我该如何解决这个问题？或者你有什么想法吗？

Answer 1

您需要将这些参数编码为 UTF-8 字节，并将字节编码为 URL 百分比编码。您可以使用 urllib.parse module:

来完成这一切

from urllib.parse import urlparse, parse_qs, urlencode

parsed = urlparse(input_url)
query = parse_qs(parsed.query)
fixed_url = parsed._replace(query=urlencode(query, doseq=True)).geturl()

演示：

>>> from urllib.parse import urlparse, parse_qs, urlencode
>>> input_url = "http://sample.jp/api?v1=aaa&v2=日本語&v3=ccc"
>>> parsed = urlparse(input_url)
>>> query = parse_qs(parsed.query)
>>> parsed._replace(query=urlencode(query, doseq=True)).geturl()
'http://sample.jp/api?v1=aaa&v2=%E6%97%A5%E6%9C%AC%E8%AA%9E&v3=ccc'
>>> import urllib.request
>>> urllib.request.urlopen(_)
<http.client.HTTPResponse object at 0x108f0f7b8>

Answer 2

urllib 和 urlparse 的组合应该为您完成：

>>> urllib.urlencode(urlparse.parse_qsl(urlparse.urlparse(input_url).query))
'v1=aaa&v2=%E6%97%A5%E6%9C%AC%E8%AA%9E&v3=ccc'

我如何从完整的 URL 创建一个百分比编码的 URL？

How can I create a percent encoded URL from complete URL?

python

python-3.x

urllib