如何访问 pod 中的磁盘设备？

Question

在我的 Kubernetes pods 中安装了卷，我似乎无法访问 /dev 文件夹中的底层磁盘设备。我需要 XFS 工具才能工作。我正在运行在 DigitalOcean 上安装集群。

示例卷安装在 /var/www 上。来自运行ning pod 的 df 的输出是：

$ df -h 
Filesystem                                                                Size  Used Avail Use% Mounted on
overlay                                                                   158G  9.7G  142G   7% /
tmpfs                                                                      64M     0   64M   0% /dev
tmpfs                                                                     3.9G     0  3.9G   0% /sys/fs/cgroup
/dev/disk/by-id/scsi-0DO_Volume_pvc-650ccba6-3177-45b5-9ffb-0ac2a931fddc  1.0M  1.0M     0 100% /var/www
/dev/vda1                                                                 158G  9.7G  142G   7% /etc/hosts
shm                                                                        64M     0   64M   0% /dev/shm
tmpfs                                                                     3.9G   12K  3.9G   1% /run/secrets/kubernetes.io/serviceaccount
tmpfs                                                                     3.9G     0  3.9G   0% /proc/acpi
tmpfs                                                                     3.9G     0  3.9G   0% /sys/firmware

但是，lsblk 的输出没有显示任何此类设备 /dev/disk/by-id/scsi-0DO_Volume_pvc-650ccba6-3177-45b5-9ffb-0ac2a931fddc；它显示的是 /dev/sdb 设备。

$ lsblk
NAME   MAJ:MIN RM  SIZE RO TYPE MOUNTPOINT
sda      8:0    0    1G  0 disk 
sdb      8:16   0    1G  0 disk /var/www
sdc      8:32   0    1G  0 disk 
sde      8:64   0    1G  0 disk 
vda    254:0    0  160G  0 disk 
|-vda1 254:1    0  160G  0 part /etc/apache2/sites-available
`-vda2 254:2    0    2M  0 part 
vdb    254:16   0  472K  1 disk

None 个设备在我的 pod 中可用：

$ ls -la /dev
total 4
drwxr-xr-x 5 root root  360 Oct 27 10:59 .
drwxr-xr-x 1 root root 4096 Oct 27 10:59 ..
lrwxrwxrwx 1 root root   11 Oct 27 10:59 core -> /proc/kcore
lrwxrwxrwx 1 root root   13 Oct 27 10:59 fd -> /proc/self/fd
crw-rw-rw- 1 root root 1, 7 Oct 27 10:59 full
drwxrwxrwt 2 root root   40 Oct 27 10:58 mqueue
crw-rw-rw- 1 root root 1, 3 Oct 27 10:59 null
lrwxrwxrwx 1 root root    8 Oct 27 10:59 ptmx -> pts/ptmx
drwxr-xr-x 2 root root    0 Oct 27 10:59 pts
crw-rw-rw- 1 root root 1, 8 Oct 27 10:59 random
drwxrwxrwt 2 root root   40 Oct 27 10:58 shm
lrwxrwxrwx 1 root root   15 Oct 27 10:59 stderr -> /proc/self/fd/2
lrwxrwxrwx 1 root root   15 Oct 27 10:59 stdin -> /proc/self/fd/0
lrwxrwxrwx 1 root root   15 Oct 27 10:59 stdout -> /proc/self/fd/1
-rw-rw-rw- 1 root root    0 Oct 27 10:59 termination-log
crw-rw-rw- 1 root root 5, 0 Oct 27 10:59 tty
crw-rw-rw- 1 root root 1, 9 Oct 27 10:59 urandom
crw-rw-rw- 1 root root 1, 5 Oct 27 10:59 zero

我还尝试更改 runAsUser、runAsGroup 并添加了 Linux 功能，例如 SYS_ADMIN 和 SYS_RESOURCE - 它没有帮助。

当我将容器设置为运行作为 privileged 时，我可以访问 /dev/sdb 然后我可以将它符号链接到 /dev/disk/by-id/scsi-0DO_Volume_pvc-650ccba6-3177-45b5-9ffb-0ac2a931fddc 以便 XFS 工具可以运行.

然而，手动创建符号链接感觉像是一种 hack，而且它只适用于特权容器：

SOURCE_LINK=$(df -h | grep -- "/var/www" | cut -d" " -f1)
TARGET_DEVICE=$(lsblk | grep -- "/var/www" | cut -d" " -f1)
mkdir -p $(dirname $SOURCE_LINK)
ln -s "/dev/$TARGET_DEVICE" "$SOURCE_LINK"

所以我的问题是：是否有某种配置/设置/方法可以显示 pod 中的 /dev/disk/by-id/scsi-0DO_Volume_pvc-650ccba6-3177-45b5-9ffb-0ac2a931fddc，最好是在非特权模式下？

（这与关于如何启用 XFS 配额的另一个有关。）

Answer 1

DigitalOcean 的 Timo 在另一个中回答了这个问题。

为了访问设备，您还需要将主机的 /dev 目录挂载到容器中。

volumes:
  - name: device-dir
    hostPath:
      path: /dev

对于容器：

volumeMounts:
  - name: device-dir
    mountPath: /dev

这消除了手动创建符号链接的需要，因为它已经存在于主机中。但是，该设备将不可写。如 Kubernetes documentation 中所述，容器需要运行作为 privileged 和 root 才能写入此类目录，否则主机的目录需要调整其权限。

如何访问 pod 中的磁盘设备？

How to get an access to the disk device in a pod?

xfs

digital-ocean

kubernetes