将使用 pip 安装的 site-packages/modules 从旧版本迁移到 python 的 newer/latest 版本

Migrate site-packages/modules installed with pip from older to newer/latest version of python

起初,我手动将 /../python3.7/site-packages 中安装的 python 模块移动到新的 /../python3.8/site-packages 目录。

为了概括以下问题,我引入了以下术语:初始(较低)python 版本将由 3.x 表示,较新的版本将由 3.y 表示. 在我的例子中,x=7 和 y=8。

手动将 3.x 站点包移动到 3.y 站点包目录后,我发现在使用新的 python 执行 python 脚本时版本 3.y 调用特定模块时出现某些错误,如 numpyscipymatplotlib 等。 最后为我完成的非常不优雅的解决方法只是 python -m pip uninstall packagename 后跟 python -m pip install packagename,即简单地卸载,然后重新安装它。这样,错误就消失了。 幸运的是,我不必对我的 100 多个包裹都这样做,大约 10 个包裹就很有必要了。

不过,对于未来,我想知道如何更优雅地将包从以前的版本迁移到当前的 python 版本,并在需要的地方自动更新它们。


系统细节:

编辑:可以找到最优雅的解决方案


我找到了一个解决方案,结合了 和更改我的两个配置文件中的 PYTHONPATH

/home/user/.bashrc 
/home/user/.bash_profile

命名法:初始(较低)python-version 将由 3.x 表示,较新的 3.y.


注意 关于先前修改 PYTHONPATH:

的必要性

就我而言,由于有许多 python 版本以不同的方式和位置安装,因此需要将 目标站点包目录 添加到每个其他版本之前出现在整个 PYTHONPATH 中,因为只有这样,提取的 python 模块才会通过 python -m pip install --user -r packages_python_3_x.txt.

安装在正确的目录中

如果在您的系统上,PYTHONPATH 直接指向所需的站点包,即它们位于整个 PYTHONPATH 的第一个位置,则无需修改它。 此外,如果您正在使用虚拟环境(例如 pyenv) or other environment managers, you will be able to separate each site-packages associated to every virtual-environment automatically. Then, there should also be no need to modify the PYTHONPATH. By contrast, I didn't work with virtual, local and global python environments,这就是为什么我有必要将感兴趣的站点包目录添加到 PYTHONPATH 之前。现在,我正在工作不同项目的虚拟环境,我推荐给大家


1.) 准备 PYTHONPATH(如果需要)

继续上述配置文件,在其中插入以下行:

PYTHONPATH="/home/linuxbrew/.linuxbrew/lib/python3.x/site-packages:$PYTHONPATH"

如果有类似的行指向以前的 python-version 目录,请根据您的情况将其替换为最新版本(例如 3.73.8在目录路径中)。

此外,如果系统 python3-路径被添加到 PYTHONPATH 之前,请注释掉该注释以便提供您的 python 分发(无论是 homebrew , anaconda, 或任何你喜欢的) precedence.

# NOTE on the following commando: it is commented out on purpose (you could also delete it from the config-files, if you don't consider to use these site-packages again, but I kept it for playing safe)
#export PYTHONPATH="/usr/lib/python3/dist-packages:$PYTHONPATH"

为了使更改立即生效,请在您的 UNIX 终端中执行以下指令:

source /home/user/.bash_profile 
source /home/user/.bashrc

2.) 提取当前安装的模块并使用新版本重新安装它们 3.y

最后,将安装的所有 python 软件包提取到一个文本文件中。在我的例子中,这是用 pip 完成的,所以这将是:

python -m pip freeze --path /home/linuxbrew/.linuxbrew/lib/python3.x/site-packages > packages_python_3_x.txt

文本文件应包含如下行:

absl-py==0.11.0
access==1.1.1
affine==2.3.0
aiohttp==3.7.2
aiohttp-cors==0.7.0
...

最后,(重新)将所有这些包安装到最新的站点包文件夹中(此处使用 pip 完成):

python -m pip install --user -r packages_python_3_x.txt

包管理器 pip 应该选择正确的文件夹,因为您之前已经更新了 PYTHONPATH。 此示例中的新站点包目录应为 /home/linuxbrew/.linuxbrew/lib/python3.y/site-packages.