英特尔MKL和JNI：如何添加从中搜索符号的共享库？

Question

我正在尝试使用我构建的C ++共享库（libmine.so）并使用JNI从Java使用Intel的MKL库。

我还创建了libminejni.so，并从Java代码加载它，如下所示：

System.loadLibrary("minejni")

但它无法加载其中一个MKL库（libmkl_avx2.so）

<path_to_lib>/libmkl_avx2.so: <path_to_lib>/libmkl_avx2.so:
undefined symbol: mkl_sparse_optimize_bsr_trsm_i8

符号在libmkl_gnu_thread.so中定义

>nm <path_to_lib>/libmkl_gnu_thread.so | grep mkl_sparse_optimize_bsr_trsm_i8
00000000004fe240 T mkl_sparse_optimize_bsr_trsm_i8

所以我在加载有问题的库之前使用System.loadLibrary加载了库，但是错误没有解决。

我用LD_DEBUG=bindings,symbols执行它，发现它没有搜索libmkl_gnu_thread.so的符号。

     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/local/workspaces/JDK8-1.0/runtime/jdk1.8/bin/java [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/libpthread.so.0 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib/amd64/jli/libjli.so [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/libdl.so.2 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/libc.so.6 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/ld-linux-x86-64.so.2 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/jdk1.8/jre/lib/amd64/server/libjvm.so [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/libm.so.6 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib/libmkl_avx2.so [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/libdl.so.2 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/libc.so.6 [0]
     [java]      11275: symbol=mkl_sparse_optimize_bsr_trsm_i8;  lookup in file=/lib64/ld-linux-x86-64.so.2 [0]
     [java]      11275: /lib/libmkl_avx2.so: error: symbol lookup error: undefined symbol: mkl_sparse_optimize_bsr_trsm_i8 (fatal)

如果我使用C ++创建可执行文件，该库可以正常工作。我想将libmkl_gnu_thread.so添加到ld将搜索符号的库列表中，有人知道该怎么做吗？

注意：如果我将所有与MKL相关的库添加到LD_PRELOAD，它可以正常工作，但我正在寻找更少的hacky方式。注意2：修改示例中的某些路径以删除个人信息。

Answer 1

JNI库通过调用dlopen with RTLD_LOCAL（即默认值）来加载对象。这意味着库的符号不可用于其他dlopen调用。如果你在dlopen中使用libmkl_gnu_thread.so在同一个进程中调用RTLD_GLOBAL，它将被注入全局范围，其他库（包括使用RTLD_LOCAL加载的那些库）可以找到它的符号。

或者，应该可以将minejni与libmkl_gnu_thread.so链接，以便将其加载到相同的搜索范围中。请注意，在某些发行版中，您必须与-Wl,--no-as-neeeded链接，以防止优化此依赖关系，此时似乎不需要。