在 docker 由 jib java 制作的图像中设置链接器
set linker in docker image made by jib java
好的,我在创建 jib docker 图像时遇到了链接问题。
我将我想要的文件复制到容器中
jib {
allowInsecureRegistries = true
extraDirectories{
paths{
path{
from = file('jnetpcap/jib')
into = '/native'
}
}
}
.
.
.
在其他任务中,我指向那些库
task cmdScript(type: CreateStartScripts) {
mainClassName = "cic.cs.unb.ca.ifm.Cmd"
applicationName = "cfm"
outputDir = new File(project.buildDir, 'scripts')
classpath = jar.outputs.files + project.configurations.runtime
defaultJvmOpts = ["-Djava.library.path=/native"]
}
我检查过,这些库已正确添加到容器中。不是复制库的问题,而是设置链接器的问题。
如果我使用 distTar 构建项目,cmdScript 会设置正确的链接器,但我不知道如何在使用 jibDockerBuild 构建项目时设置链接器。
我找不到我的问题的答案 here 所以决定寻求帮助。
更新
我找到了一些线索here。
我通过添加
更新了我的 jib 任务
jib {
allowInsecureRegistries = true
extraDirectories{
paths{
path{
from = file('jnetpcap/jib')
into = '/native'
}
}
}
container.jvmFlags = ["-Djava.library.path=/native/*"]
但我一直收到同样的错误。
错误信息是
exception in thread main java.lang.unsatisfiedlinkerror 'long com.slytechs.library.NativeLibrary.dlopen(java.lang.String)'
这个问题在很大程度上与 Jib 无关。根本原因是容器环境中缺少必需的库。
首先,它应该是 container.jvmFlags = ["-Djava.library.path=/native"]
(不是带星号的 /native/*
)。
现在,jNetPcap 是一个 Java 包装器,围绕在各种 Unix 和 Windows 平台上的 Libpcap and WinPcap 库。也就是说,在 Linux(也就是你正在构建的容器的 OS)上,它依赖于 Libpcap 并且需要在系统上安装它。大多数 OpenJDK 容器镜像(包括 Jib 用作基础镜像的容器镜像)不附带 Libpcap pre-installed,我怀疑第一个问题是您没有将 Libpcap 安装到容器中。
jNetPcap 还需要加载其他本机库。在我下面的示例中,它们是 jNetPcap 包附带的两个 .so
共享对象文件:libjnetpcap-pcap100.so
和 libjnetpcap.so
.
为了便于说明,下面是创建工作容器映像的完整示例。
Dockerfile
# This Dockerfile is only for demonstration.
FROM adoptopenjdk/openjdk11
# "libpcap-dev" includes the following files:
# - /usr/lib/x86_64-linux-gnu/libpcap.a
# - /usr/lib/x86_64-linux-gnu/libpcap.so -> libpcap.so.0.8
# - /usr/lib/x86_64-linux-gnu/libpcap.so.0.8 -> libpcap.so.1.8.1
# - /usr/lib/x86_64-linux-gnu/libpcap.so.1.8.1
RUN apt-get update && apt-get install -y libpcap-dev
# My machine is x86_64 running Linux.
RUN curl -o jnetpcap.tgz https://master.dl.sourceforge.net/project/jnetpcap/jnetpcap/1.4/jnetpcap-1.4.r1300-1.linux.x86_64.tgz
# The tar includes the following files:
# - jnetpcap-1.4.r1300/jnetpcap.jar
# - jnetpcap-1.4.r1300/libjnetpcap-pcap100.so
# - jnetpcap-1.4.r1300/libjnetpcap.so
RUN tar -zxvf jnetpcap.tgz
# .class file compiled with "javac -cp jnetpcap.jar MyMain.java"
COPY MyMain.class /my-app/
ENTRYPOINT ["java", "-cp", "/my-app:/jnetpcap-1.4.r1300/jnetpcap.jar", "-Djava.library.path=/jnetpcap-1.4.r1300", "MyMain"]
MyMain.java
import java.util.*;
import org.jnetpcap.*;
public class MyMain {
public static void main(String[] args) {
Pcap.findAllDevs(new ArrayList<>(), new StringBuilder());
System.out.println("SUCCESS!");
}
}
$ docker build -t test .
$ docker run --rm test
SUCCESS!
因此,只要复制必要的依赖库并正确配置,应该可以使它与Jib一起使用。
对于安装 Libpcap,我可以想到几个选项:
- 准备自定义基础镜像(例如,如上
apt-get install libpcap-dev
)并配置 jib.from.image
以使用它。
- 使用
extraDirectories
功能手动下载 libpcap.so
文件并将其复制到 /usr/lib
中。 (您甚至可以让您的 Gradle 项目在构建项目时动态下载文件。)
对于复制 jNetPcap 本机库(libjnetpcap-pcap100.so
和 libjnetpcap.so
),情况相同。但是,看起来您已经手动下载并尝试使用 extraDirectories
功能复制它们,所以我想您可以继续这样做。但是,准备自定义基础映像仍然是另一个可行的选择。请注意,在上面的示例中,我为 jNetPcap 配置了 -Djava.library.path=...
(顺便说一句,还有许多其他方法可以让 Linux 和 JVM 在任意目录中加载共享库),但是如果您复制 .so
文件到一些标准位置(例如,/usr/lib
),你甚至不需要设置 -Djava.library.path
.
对于上面的所有本机库(.so
文件),请确保下载与容器架构和 OS(可能是 amd64 和 Linux 兼容的正确二进制文件例)。
好的,我在创建 jib docker 图像时遇到了链接问题。 我将我想要的文件复制到容器中
jib {
allowInsecureRegistries = true
extraDirectories{
paths{
path{
from = file('jnetpcap/jib')
into = '/native'
}
}
}
.
.
.
在其他任务中,我指向那些库
task cmdScript(type: CreateStartScripts) {
mainClassName = "cic.cs.unb.ca.ifm.Cmd"
applicationName = "cfm"
outputDir = new File(project.buildDir, 'scripts')
classpath = jar.outputs.files + project.configurations.runtime
defaultJvmOpts = ["-Djava.library.path=/native"]
}
我检查过,这些库已正确添加到容器中。不是复制库的问题,而是设置链接器的问题。
如果我使用 distTar 构建项目,cmdScript 会设置正确的链接器,但我不知道如何在使用 jibDockerBuild 构建项目时设置链接器。 我找不到我的问题的答案 here 所以决定寻求帮助。
更新
我找到了一些线索here。 我通过添加
更新了我的 jib 任务jib {
allowInsecureRegistries = true
extraDirectories{
paths{
path{
from = file('jnetpcap/jib')
into = '/native'
}
}
}
container.jvmFlags = ["-Djava.library.path=/native/*"]
但我一直收到同样的错误。
错误信息是
exception in thread main java.lang.unsatisfiedlinkerror 'long com.slytechs.library.NativeLibrary.dlopen(java.lang.String)'
这个问题在很大程度上与 Jib 无关。根本原因是容器环境中缺少必需的库。
首先,它应该是 container.jvmFlags = ["-Djava.library.path=/native"]
(不是带星号的 /native/*
)。
现在,jNetPcap 是一个 Java 包装器,围绕在各种 Unix 和 Windows 平台上的 Libpcap and WinPcap 库。也就是说,在 Linux(也就是你正在构建的容器的 OS)上,它依赖于 Libpcap 并且需要在系统上安装它。大多数 OpenJDK 容器镜像(包括 Jib 用作基础镜像的容器镜像)不附带 Libpcap pre-installed,我怀疑第一个问题是您没有将 Libpcap 安装到容器中。
jNetPcap 还需要加载其他本机库。在我下面的示例中,它们是 jNetPcap 包附带的两个 .so
共享对象文件:libjnetpcap-pcap100.so
和 libjnetpcap.so
.
为了便于说明,下面是创建工作容器映像的完整示例。
Dockerfile
# This Dockerfile is only for demonstration.
FROM adoptopenjdk/openjdk11
# "libpcap-dev" includes the following files:
# - /usr/lib/x86_64-linux-gnu/libpcap.a
# - /usr/lib/x86_64-linux-gnu/libpcap.so -> libpcap.so.0.8
# - /usr/lib/x86_64-linux-gnu/libpcap.so.0.8 -> libpcap.so.1.8.1
# - /usr/lib/x86_64-linux-gnu/libpcap.so.1.8.1
RUN apt-get update && apt-get install -y libpcap-dev
# My machine is x86_64 running Linux.
RUN curl -o jnetpcap.tgz https://master.dl.sourceforge.net/project/jnetpcap/jnetpcap/1.4/jnetpcap-1.4.r1300-1.linux.x86_64.tgz
# The tar includes the following files:
# - jnetpcap-1.4.r1300/jnetpcap.jar
# - jnetpcap-1.4.r1300/libjnetpcap-pcap100.so
# - jnetpcap-1.4.r1300/libjnetpcap.so
RUN tar -zxvf jnetpcap.tgz
# .class file compiled with "javac -cp jnetpcap.jar MyMain.java"
COPY MyMain.class /my-app/
ENTRYPOINT ["java", "-cp", "/my-app:/jnetpcap-1.4.r1300/jnetpcap.jar", "-Djava.library.path=/jnetpcap-1.4.r1300", "MyMain"]
MyMain.java
import java.util.*;
import org.jnetpcap.*;
public class MyMain {
public static void main(String[] args) {
Pcap.findAllDevs(new ArrayList<>(), new StringBuilder());
System.out.println("SUCCESS!");
}
}
$ docker build -t test .
$ docker run --rm test
SUCCESS!
因此,只要复制必要的依赖库并正确配置,应该可以使它与Jib一起使用。
对于安装 Libpcap,我可以想到几个选项:
- 准备自定义基础镜像(例如,如上
apt-get install libpcap-dev
)并配置jib.from.image
以使用它。 - 使用
extraDirectories
功能手动下载libpcap.so
文件并将其复制到/usr/lib
中。 (您甚至可以让您的 Gradle 项目在构建项目时动态下载文件。)
对于复制 jNetPcap 本机库(libjnetpcap-pcap100.so
和 libjnetpcap.so
),情况相同。但是,看起来您已经手动下载并尝试使用 extraDirectories
功能复制它们,所以我想您可以继续这样做。但是,准备自定义基础映像仍然是另一个可行的选择。请注意,在上面的示例中,我为 jNetPcap 配置了 -Djava.library.path=...
(顺便说一句,还有许多其他方法可以让 Linux 和 JVM 在任意目录中加载共享库),但是如果您复制 .so
文件到一些标准位置(例如,/usr/lib
),你甚至不需要设置 -Djava.library.path
.
对于上面的所有本机库(.so
文件),请确保下载与容器架构和 OS(可能是 amd64 和 Linux 兼容的正确二进制文件例)。