前言:
安全上下文(Security Context)定义 Pod 或 Container 的特权与访问控制设置。 安全上下文包括但不限于:
- 自主访问控制(Discretionary Access Control): 基于用户 ID(UID)和组 ID(GID) 来判定对对象(例如文件)的访问权限。
- 安全性增强的 Linux(SELinux): 为对象赋予安全性标签。
- 以特权模式或者非特权模式运行。
- Linux 权能: 为进程赋予 root 用户的部分特权而非全部特权。
- AppArmor:使用程序配置来限制个别程序的权能。
- Seccomp:过滤进程的系统调用。
allowPrivilegeEscalation
:控制进程是否可以获得超出其父进程的特权。 此布尔值直接控制是否为容器进程设置 no_new_privs标志。 当容器满足一下条件之一时,allowPrivilegeEscalation
总是为 true(一般是false的):
- 以特权模式运行,或者
- 具有
CAP_SYS_ADMIN
权能
- readOnlyRootFilesystem:以只读方式加载容器的根文件系统(一般是true的,true时,exec进容器不能更改文件系统,例如,在容器内touch文件,删除文件,新建文件夹等等操作都会被禁止)
一,
安全上下文的示例
没有配置安全上下文的pod:
[root@k8s-master ~]# cat nosecurity_pod.yaml apiVersion: v1 kind: Pod metadata: creationTimestamp: null labels: name: busybox-nosecurity spec: volumes: - name: sec-ctx-vol emptyDir: {} containers: - image: busybox name: busybox-nosecurity command: [ "sh","-c","sleep 1h" ] volumeMounts: - name: sec-ctx-vol mountPath: /data/demo dnsPolicy: ClusterFirst restartPolicy: Always status: {}
配置了安全上下文的pod:
cat security_pod.yaml apiVersion: v1 kind: Pod metadata: creationTimestamp: null labels: name: busybox-security spec: securityContext: runAsUser: 1000 runAsGroup: 3000 fsGroup: 2000 volumes: - name: sec-ctx-vol emptyDir: {} containers: - image: busybox name: busybox-security command: [ "sh","-c","sleep 1h" ] volumeMounts: - name: sec-ctx-vol mountPath: /data/demo2 resources: {} securityContext: allowPrivilegeEscalation: false readOnlyRootFilesystem: true dnsPolicy: ClusterFirst restartPolicy: Always status: {}
若要为 Container 设置安全性配置,可以在 Container 清单中包含 securityContext
字段。securityContext
字段的取值是一个 SecurityContext 对象。你为 Container 设置的安全性配置仅适用于该容器本身,并且所指定的设置在与 Pod 层面设置的内容发生重叠时,会重写 Pod 层面的设置。Container 层面的设置不会影响到 Pod 的卷。说人话就是pod和容器两个层面都可以设置securitycontext,如果是多容器,比如,某个pod内有A和B两个容器,pod和容器B分别设置了securitycontext,那么,A容器使用pod的securitycontext,B容器使用它自己设置的securitycontext(这一段比较绕口,是需要仔细阅读理解的哦)
上面这个示例就仅仅设置了pod的securitycontext,但容器是继承了pod的securitycontext
进入没有配置安全上下文的pod:
可以看到是使用的root权限,可以任意做手脚
[root@k8s-master ~]# kubectl exec -it busybox-nosecurity -- /bin/sh / # id uid=0(root) gid=0(root) groups=10(wheel) / # / # ps PID USER TIME COMMAND 1 root 0:00 sleep 1h 28 root 0:00 /bin/sh 35 root 0:00 ps / # rm -rf .dockerenv bin/ data/ dev/ etc/ proc/ root/ sys/ tmp/ usr/ var/ / # rm -rf .dockerenv / #
进入配置了安全上下文的容器
可以看到无法使用root权限,安全性大大的提高了
[root@k8s-master ~]# kubectl exec -it busybox-security -- /bin/sh / $ id uid=1000 gid=3000 groups=2000 / $ ps PID USER TIME COMMAND 1 1000 0:00 sleep 1h 25 1000 0:00 /bin/sh 33 1000 0:00 ps / $ rm -rf home/ rm: can't remove 'home': Read-only file system / $ ls -al /data/demo2/ total 0 drwxrwsrwx 2 root 2000 6 Jan 8 20:00 . drwxr-xr-x 3 root root 19 Jan 8 20:00 .. / $ touch aaa touch: aaa: Read-only file system
二,
精细化的安全上下文权限分配 capabilities
默认情况下 Docker 会删除必须的 capabilities
之外的所有 capabilities
,因为在容器中我们经常会以 root 用户来运行,使用 capabilities
后,容器中的使用的 root 用户权限就比我们平时在宿主机上使用的 root 用户权限要少很多了,这样即使出现了安全漏洞,也很难破坏或者获取宿主机的 root 权限,所以 Docker 支持 Capabilities
对于容器的安全性来说是非常有必要的,当然,kubernetes的底层是docker,所以kubernetes也是支持capabilities的
在说到这个capabilities之前,需要说一下特权容器,一般的容器是无法获取宿主机的内核参数的,但某些情况下,有和宿主机的内核交互的需求,容器中有些应用程序可能需要访问宿主机设备、修改内核等需求,在默认情况下, 容器没这个有这个能力,这个时候,就需要特权容器了,但这个特权容器是非常不安全的:
containers: - image: lizhenliang/flask-demo:root name: web securityContext: privileged: true
启用特权模式就意味着为容器提供了访问Linux内核的所有能力,这是很危险的,为了减少系统调用的供给,可以使用Capabilities为容器赋予仅所需的能力。
这个capabilities不是特别常见,coredns的部署里可以看到:
securityContext: allowPrivilegeEscalation: false capabilities: add: - NET_BIND_SERVICE drop: - all readOnlyRootFilesystem: true
具体的capabilities有哪些呢?capabilities(7) - Linux manual page 这个网站有比较详细的介绍,下图是一个简略的介绍:
例如下面这个示例,容器虽然是root用户,但只给了一个无关紧要的kill 进程权限,因此,这个pod是无法ping其它的pod的
cat security_pod.yaml apiVersion: v1 kind: Pod metadata: creationTimestamp: null labels: name: busybox-security spec: volumes: - name: sec-ctx-vol emptyDir: {} containers: - image: busybox name: busybox-security command: [ "sh","-c","sleep 1h" ] volumeMounts: - name: sec-ctx-vol mountPath: /data/demo2 resources: {} securityContext: capabilities: drop: - ALL add: ["KILL"] allowPrivilegeEscalation: false readOnlyRootFilesystem: true dnsPolicy: ClusterFirst restartPolicy: Always status: {}
进入容器后,虽然是root用户,但是是无法执行需要高网络权限的命令的(ping命令需要网络权限)
[root@k8s-master ~]# kubectl exec -it busybox-security -- /bin/sh / # id uid=0(root) gid=0(root) groups=10(wheel) / # ping 10.244.0.13 PING 10.244.0.13 (10.244.0.13): 56 data bytes ping: permission denied (are you root?)
上述文件修改成如下:
apiVersion: v1 kind: Pod metadata: creationTimestamp: null labels: name: busybox-security spec: volumes: - name: sec-ctx-vol emptyDir: {} containers: - image: busybox name: busybox-security command: [ "sh","-c","sleep 1h" ] volumeMounts: - name: sec-ctx-vol mountPath: /data/demo2 resources: {} securityContext: capabilities: drop: - ALL add: ["NET_ADMIN","NET_RAW"] allowPrivilegeEscalation: false readOnlyRootFilesystem: true dnsPolicy: ClusterFirst restartPolicy: Always status: {}
执行此文件后,就可以愉快的在容器内使用ping命令了:
[root@k8s-master ~]# kubectl exec -it busybox-security -- /bin/sh / # id uid=0(root) gid=0(root) groups=10(wheel) / # ping 10.244.0.13 PING 10.244.0.13 (10.244.0.13): 56 data bytes 64 bytes from 10.244.0.13: seq=0 ttl=62 time=1.142 ms 64 bytes from 10.244.0.13: seq=1 ttl=62 time=0.889 ms ^C --- 10.244.0.13 ping statistics --- 2 packets transmitted, 2 packets received, 0% packet loss round-trip min/avg/max = 0.889/1.015/1.142 ms
小结:
securitycontext是对于pod和容器的安全性提升有非常大帮助的一个选项,因此,如果没有测试的需求,最好还是启用securitycontext,并且禁用privileged特权容器,以免对宿主机造成破坏。