python 如何从不在 sys.path 中的路径加载模块

Question

我正在调试一个 Python 导入问题，我无法在运行我的代码使用 pex 文件时正确加载 jinja2。

在我的代码中设置一个断点，发现自己处于一个非常有趣的情况

(Pdb) import jinja2
(Pdb) import jinja2.utils
(Pdb) jinja2.utils
*** AttributeError: 'module' object has no attribute 'utils'
(Pdb) sys.modules.get("jinja2")
<module 'jinja2' from '/home/xxx/.pex/install/Jinja2-2.10.3-py2.py3-none-any.whl.02f611acfe90225e024bd496a640e01844bf5a32/Jinja2-2.10.3-py2.py3-none-any.whl/jinja2/__init__.py'>
(Pdb) sys.modules.get("jinja2.utils")
<module 'jinja2.utils' from '/usr/local/lib/python2.7/dist-packages/jinja2/utils.pyc'>
(Pdb) [i for i in sys.path if "usr/local/lib/python2.7" in i]
[]

在断点之前，jinja2 已经部分加载了，因为我在 jinja2 的 __init__.py 中设置了断点，这里是堆栈跟踪：

-> exec code in run_globals
  /home/xxx/.pex/code/e7fe7e585c258eb7224ec5030b9d53b74cdfb06f/application/app.py(2)<module>()
-> from flask import Flask, abort, request
  /home/xxx/.pex/install/Flask-1.0-py2.py3-none-any.whl.abe8dd5f49600e54576b3360b7622e1cc97e86fc/Flask-1.0-py2.py3-none-any.whl/flask/__init__.py(19)<module>()
-> from jinja2 import Markup, escape
> /home/xxx/.pex/install/Jinja2-2.10.3-py2.py3-none-any.whl.02f611acfe90225e024bd496a640e01844bf5a32/Jinja2-2.10.3-py2.py3-none-any.whl/jinja2/__init__.py(58)<module>()
-> print("aaaaaaaaa")

问题是：

python 如何从 /usr/local/lib/python2.7/dist-packages 加载 jinja2.utils 而它甚至不是 sys.path 的一部分？
为什么python正确找到了jinja2的__init__.py路径，却找不到同目录下的utils.py？

~$ ls /home/xxx/.pex/install/Jinja2-2.10.3-py2.py3-none-any.whl.02f611acfe90225e024bd496a640e01844bf5a32/Jinja2-2.10.3-py2.py3-none-any.whl/jinja2/
asyncfilters.py  bccache.py  compiler.py   debug.py     environment.py  ext.py      _identifier.py  __init__.py  loaders.py  nativetypes.py  optimizer.py  runtime.py  tests.py  visitor.py
asyncsupport.py  _compat.py  constants.py  defaults.py  exceptions.py   filters.py  idtracking.py   lexer.py     meta.py     nodes.py        parser.py     sandbox.py  utils.py

Answer 1

已确认这是一个 pex 问题。

Pex 在开始时加载了 jinja2（其中还包括 jinja2.utils），然后它删除了 jinaj2 模块和路径，但未能删除 jinja2.utils。

最新版本的 pex 已修复该问题：https://github.com/pantsbuild/pex/commit/0f9bf622e1565dcdd27c3b79b788571c9608c272

python 如何从不在 sys.path 中的路径加载模块

How does python load a module from a path which is not in sys.path

python

jinja2

pex