英特尔 MKL 和 JNI：如何添加 ld 从中搜索符号的共享库？

Question

我正在尝试使用我构建的 C++ 共享库 (libmine.so) 并使用来自 Java 使用 JNI 的英特尔 MKL 库。

我还创建了 libminejni.so，并从 Java 代码加载它，如下所示：

System.loadLibrary("minejni")

但是未能加载 MKL 库之一 (libmkl_avx2.so)

<path_to_lib>/libmkl_avx2.so: <path_to_lib>/libmkl_avx2.so:
undefined symbol: mkl_sparse_optimize_bsr_trsm_i8

符号在libmkl_gnu_thread.so

中定义

>nm <path_to_lib>/libmkl_gnu_thread.so | grep mkl_sparse_optimize_bsr_trsm_i8
00000000004fe240 T mkl_sparse_optimize_bsr_trsm_i8

所以我在加载有问题的库之前使用System.loadLibrary加载了库，但错误并没有解决。

我用 LD_DEBUG=bindings,symbols 执行了它，发现它没有搜索 libmkl_gnu_thread.so 符号。

     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/local/workspaces/JDK8-1.0/runtime/jdk1.8/bin/java [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/libpthread.so.0 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib/amd64/jli/libjli.so [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/libdl.so.2 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/libc.so.6 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/ld-linux-x86-64.so.2 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/jdk1.8/jre/lib/amd64/server/libjvm.so [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/libm.so.6 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib/libmkl_avx2.so [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/libdl.so.2 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/libc.so.6 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/ld-linux-x86-64.so.2 [0]
     [java]      11275: /lib/libmkl_avx2.so: error: symbol lookup error: undefined symbol: mkl_sparse_optimize_bsr_trsm_i8 (fatal)

如果我使用 C++ 创建可执行文件，该库就可以工作。我想将 libmkl_gnu_thread.so 添加到 ld 将搜索符号的库列表中，有人知道该怎么做吗？

注意：如果我将所有与 MKL 相关的库添加到 LD_PRELOAD，它可以工作，但我正在寻找不那么棘手的方法。 NOTE2: 示例中的一些路径被修改以删除个人信息。

Answer 1

JNI 库通过调用 dlopen with RTLD_LOCAL（即默认）加载对象。这意味着库的符号不可用于其他 dlopen 调用。如果您在同一个进程中使用 RTLD_GLOBAL 为 libmkl_gnu_thread.so 调用 dlopen 一次，它将被注入到全局范围，其他库（包括那些使用 [=11 加载的库） =]) 可以找到它的符号。

或者，应该可以 link minejni 反对 libmkl_gnu_thread.so，以便将其加载到相同的搜索范围内。请注意，在某些发行版上，您必须 link 和 -Wl,--no-as-neeeded，以防止优化掉这种依赖性，这在这一点上似乎是不需要的。

英特尔 MKL 和 JNI：如何添加 ld 从中搜索符号的共享库？

Intel MKL and JNI : How to add a shared library that ld searches symbols from?

java

c++

java-native-interface

ld

intel-mkl