构建 Python 3.7 时 bz2 模块失败

bz2 module fails when building Python 3.7

我正在尝试为 Android 交叉编译 Python 3.7。我在输出中看到 bz2 如果失败并出现以下错误

building '_bz2' extension
/home/dematic/SPE/python3-android/sdk/android-ndk-r19c/toolchains/llvm/prebuilt/linux-x86_64/bin/clang -isystem /home/dematic/SPE/python3-android/build/19c-22-aarch64-linux-androideabi-4.9/include -isystem /home/dematic/SPE/python3-android/build/19c-22-aarch64-linux-androideabi-4.9/include/openssl -no-integrated-as -I. -I./Include -target aarch64-none-linux-androideabi22 -target aarch64-none-linux-androideabi22 -Wno-unused-result -Wsign-compare -Wunreachable-code -DNDEBUG -g -fwrapv -O3 -Wall -fPIC -fPIC -std=c99 -Wextra -Wno-unused-result -Wno-unused-parameter -Wno-missing-field-initializers -Wstrict-prototypes -Werror=implicit-function-declaration -I./Include -I. -I/home/dematic/SPE/python3-android/src/Python-3.7.3/Include -I/home/dematic/SPE/python3-android/src/Python-3.7.3 -c /home/dematic/SPE/python3-android/src/Python-3.7.3/Modules/_bz2module.c -o build/temp.linux-aarch64-3.7/home/dematic/SPE/python3-android/src/Python-3.7.3/Modules/_bz2module.o
/home/dematic/SPE/python3-android/sdk/android-ndk-r19c/toolchains/llvm/prebuilt/linux-x86_64/bin/clang -isystem /home/dematic/SPE/python3-android/build/19c-22-aarch64-linux-androideabi-4.9/include -isystem /home/dematic/SPE/python3-android/build/19c-22-aarch64-linux-androideabi-4.9/include/openssl -no-integrated-as -shared -target aarch64-none-linux-androideabi22 -fuse-ld=lld -L /home/dematic/SPE/python3-android/build/19c-22-aarch64-linux-androideabi-4.9/lib -target aarch64-none-linux-androideabi22 -fuse-ld=lld -L /home/dematic/SPE/python3-android/build/19c-22-aarch64-linux-androideabi-4.9/lib -target aarch64-none-linux-androideabi22 -fuse-ld=lld -L /home/dematic/SPE/python3-android/build/19c-22-aarch64-linux-androideabi-4.9/lib -fPIC -target aarch64-none-linux-androideabi22 build/temp.linux-aarch64-3.7/home/dematic/SPE/python3-android/src/Python-3.7.3/Modules/_bz2module.o -L. -L/home/dematic/SPE/python3-android/build/19c-22-aarch64-linux-androideabi-4.9/lib -lbz2 -lpython3.7m -o build/lib.linux-aarch64-3.7/_bz2.cpython-37m.so
ld.lld: error: /home/dematic/SPE/python3-android/build/19c-22-aarch64-linux-androideabi-4.9/lib/libbz2.a(bzlib.o) is incompatible with aarch64linux
clang: error: linker command failed with exit code 1 (use -v to see invocation)

我正在构建 bzip2 1.0.6 没有任何问题,但我假设我没有正确链接到它或其他一些问题。我应该构建某种其他架构吗?

这是我要构建的项目 https://github.com/GRRedWings/python3-android

I'm trying to cross compile Python 3.7 for Android. I see in my output that bz2 if failing with the following error

Bzip2 生成文件不是为 cross-compiles 编写的。他们有效地忽略了用户的标志,如 CFLAGSLDFLAGS。 makefiles 实际上吹走了用户的 CFLAGS 并将其设置为 CFLAGS=-Wall -Winline -O2 -g $(BIGFILES)。您的 -target aarch64-none-linux-androideabi22 之类的标记未被使用。

有两个 Makefile 正在运行。一个叫做 Makefile,如果我没记错的话,它会构建静态库。第二个是 Makefile-libbz2_so,它构建共享对象。您需要修复遗漏并将修复应用到两个 makefile。

您可能应该使用像 bzip2-noloader. It honors a user's CFLAGS, CXXFLAGS, LDFLAGS, etc. The check-in of interest is Commit 34d170f31106 这样的补丁 Bzip。

bzip2-noloader 中的 makefile 配方类似于以下内容。他们在 BZIP_CFLAGS 中保留了 Seward 的原始设置。但他们也利用 CPPFLAGS 并允许用户在 CFLAGS 中覆盖。覆盖将拾取您的标志,例如 -target aarch64-none-linux-androideabi22.

blocksort.o: blocksort.c
    $(CC) $(CPPFLAGS) $(BZIP_CFLAGS) $(CFLAGS) -c blocksort.c

程序按预期使用 LDFLAGS

bzip2: libbz2.a bzip2.o
    $(CC) $(CPPFLAGS) $(BZIP_CFLAGS) $(CFLAGS) $(LDFLAGS) -o bzip2 bzip2.o -L. -lbz2

最后,bzip2-noloader 分支也支持 PREFIXDESTDIR 等。因此您也可以执行分阶段安装。


I am building bzip2 1.0.6 without any issues ...

您可能正在为 i686 或 x86_64 而不是 Aarch64 构建。问题直到 link 时间才浮出水面。如果有兴趣,您可以使用 objdump 检查目标文件。


另请注意 makefile 执行此操作:

CC=gcc
AR=ar
RANLIB=ranlib
LDFLAGS=

您可能还需要调整这些变量赋值。有时 arranlib 使用不寻常的名称,例如 ranlib-5.0。还要确保工具是 on-path.


GNU 编码标准 7.2.3 Variables for Specifying Commands 中详细介绍了编写 makefile 以避免此类问题的方法。简而言之,(1)把CFLAGS(和朋友)留给用户; (2) 如果 需要一个标志,那么总是提供它。

GNU 编码标准以此为例:

CFLAGS = -g
ALL_CFLAGS = -I. $(CFLAGS)
.c.o:
    $(CC) -c $(CPPFLAGS) $(ALL_CFLAGS) $<

用户可以覆盖 -g 的默认 CFLAGS,并且总是添加 -I,因为编译需要它。