Kubernetes 安全策略：保护您的数据仓库并阻止黑客 _云计算

来源：哪吒编程

上一篇分享了Kubernetes 多云的架构设计，今天分享一下Kubernetes 安全策略，丰富个人简历，提高面试level，给自己增加一点谈资，秒变面试小达人，BAT不是梦。

一、什么是 Kubernetes？

Kubernetes 是一个开源的容器编排平台，最初由 Google 设计并捐赠给 Cloud Native Computing Foundation (CNCF) 孵化。Kubernetes 可以自动化地部署、扩展和管理容器化应用程序，并提供了许多便捷的特性，如服务发现、负载均衡、自我修复等。

Kubernetes 的核心理念是将应用程序和基础设施分离，以便更快、更安全、更灵活地开发和部署云原生应用程序。

Kubernetes 的组件可以分为两大类：控制平面和数据平面。

控制平面包括 Kubernetes API Server、etcd 存储、控制器管理器、调度器等，负责管理存储在 etcd 中的集群状态、决策运行环境中的容器位置、标记、限制等。

数据平面包括各种节点，包括容器运行时、kubelet 守护进程、kube-proxy 代理服务器，负责维护容器的生命周期、数据流量、负载均衡等。

Kubernetes 提供了一种能够轻松创建和部署容器的方式，其灵活性和可扩展性使其成为一种非常流行的应用程序部署和管理平台。

二、Kubernetes 为什么需要安全

虽然 Kubernetes 具有许多优点，但也有许多安全考虑因素必须被认真考虑。

以下是 Kubernetes 安全威胁的一些例子：

2.1 权限问题

一个被破坏的容器可以在多个 Pod 之间传播，导致 Kubernetes 集群的整体安全受到威胁。除非良好配置 Kubernetes 中的用户和角色，否则攻击者可能具有比他们应有的更多的权限。

2.2 网络问题

由于 Kubernetes 的高度自动化性质，容易使权限分配分散并产生混乱。这种情况下，攻击者可以利用 Kubernetes 上的漏洞横向移动和扩展他们在集群中的访问级别。另外，安全的网络策略在应用程序层面进行保护，包括服务发现和容器网络配置，保证应用程序和数据不被更容易受到攻击，也可能受到损害。

2.3 控制面

如果 Kubernetes API Server 面临攻击活动，则可以修改，添加或删除集群状态，从而危及整个集群的安全性。

此外，一个被攻击的 Pod 可以进行许多可能对其他 Pod 或主机产生灾难性后果的活动，例如嗅探流量并尝试修改 Pod 以增加攻击面。

2.4 镜像安全问题

容器的镜像可以随时被替换，而没有办法验证该镜像的内容和完整性。

因此，出现一个恶意镜像的情况下，整个特定容器中的数据和应用程序可以遭受严重威胁。

三、Kubernetes 安全秘籍简介

为了最大化您的 Kubernetes 集群的安全性，必须了解安全性相关的最佳做法和原则。

以下是几个基本的 Kubernetes 安全秘籍：

3.1 配置 Kubernetes 对象的 RBAC

为保护 Kubernetes 集群，必须对在 Kubernetes 中运行的对象、Pod 和状态对象进行身份验证和授权。Kubernetes Role-Based Access Control（RBAC）为应用于 Kubernetes API 对象的最佳做法之一，以管理访问 Kubernetes API 对象的授权和权限。

3.2 使用安全的容器基础映像

可以通过使用最佳安全实践，加强容器的安全性。而选择合适的基础镜像是实现此目标的重要部分，

例如，只使用来自可信源的映像，尽可能减少容器中的客户端库数量。

3.3 配置 Kubernetes 的网络和策略

安全的网络和防护策略可以保护 Kubernetes 集群免受威胁。通过配置网络插件实现网络隔离，并设置 Pod 和服务之间的网络策略以提高安全性。

3.4 使用 Kubernetes 安全扫描器进行安全审计

使用 Kubernetes 安全扫描器可以查找到容器映像中的潜在漏洞，确保每个大容器镜像都没有安全漏洞，需要及时修复。

四、配置 Kubernetes 集群

4.1 Minikube 安装

Minikube 是 Kubernetes 的一种轻量级实现，它可以在局域网内快速搭建一个 Kubernetes 集群用于测试、开发和学习。

4.1.1 Minikube 的安装步骤：

安装虚拟机软件：Minikube 需要在虚拟机中运行，建议使用 VirtualBox 或者 HyperKit。VirtualBox 是跨平台的免费软件，而 HyperKit 是 macOS 中提供的轻量级虚拟化解决方案。
安装 kubectl：kubectl 是 Kubernetes 的命令行工具，用于管理 Kubernetes 集群。可以通过以下命令安装：

curl -LO (curl -s )/bin/linux/amd64/kubectl
chmod +x ./kubectl
sudo mv ./kubectl /usr/local/bin/kubectl

在 macOS 上安装 kubectl 的命令如下：

brew install kubectl

安装 Minikube：可以通过以下命令安装 Minikube：

curl -LO 
sudo install minikube-linux-amd64 /usr/local/bin/minikube

在 macOS 上安装 Minikube 的命令如下：

brew install minikube

启动 Minikube 集群：

minikube start

运行示例应用：

kubectl run hello-minikube --image=k8s.gcr.io/echoserver:1.4 --port=8080
kubectl expose deployment hello-minikube --type=NodePort
minikube service hello-minikube

以上就是安装和使用 Minikube 的详细步骤了。

4.2 Kubernetes RBAC 的配置步骤：

Kubernetes RBAC（Role-Based Access Control）是基于角色的访问控制，它定义了一组角色、角色绑定和集群角色绑定，用于限制 Kubernetes 集群中用户、服务账号的权限范围。

4.2.1 创建角色：

apiVersion: rbac.authorization.k8s.io/v1
kind: Role
metadata:
 name: test-role
rules:
- apiGroups: [""] # "" 代表 core API 组
 resources: ["pods", "pods/log", "services"]
 verbs: ["get", "list", "watch", "create", "update", "patch", "delete"]

这里创建了一个名为 test-role 的角色，它拥有对 Kubernetes 集群中的 pods、services 资源的访问权限。

4.2.2 创建服务账号：

apiVersion: v1
kind: ServiceAccount
metadata:
 name: test-account
 namespace: test-namespace

这里创建了一个名为 test-account 的服务账号，它将被绑定在后面创建的角色上。

4.2.3 创建角色绑定：

apiVersion: rbac.authorization.k8s.io/v1
kind: RoleBinding
metadata:
 name: test-role-binding
 namespace: test-namespace
roleRef:
 apiGroup: rbac.authorization.k8s.io
 kind: Role
 name: test-role
subjects:
- kind: ServiceAccount
 name: test-account
 namespace: test-namespace

这里创建了一个名为 test-role-binding 的角色绑定，它将 test-role 与 test-account 绑定在一起，以授予 test-account 对 pods、services 资源的访问权限。

4.2.4 创建命名空间：

apiVersion: v1
kind: Namespace
metadata:
 name: test-namespace

这里创建了一个名为 test-namespace 的命名空间，用于隔离上述角色和服务账号的作用范围。

以上就是 Kubernetes RBAC 的配置步骤，通过创建角色、服务账号、角色绑定和命名空间来定义用户、服务账号的权限作用范围。

4.3 配置网络策略

网络策略是 Kubernetes 中用于定义网络访问控制策略的一种机制，它可以限制来自特定 IP 或标签的流量访问 Kubernetes 中的 Pod。

网络策略的配置步骤：

1、在 Kubernetes 运行网络插件，如 Calico 或者 Cilium，使得网络策略功能可以正常使用。

2、创建网络策略：

apiVersion: networking.k8s.io/v1
kind: NetworkPolicy
metadata:
 name: test-network-policy
 namespace: test-namespace
spec:
 podSelector:
  matchLabels:
   app: test-app
 policyTypes:
 - Ingress
 ingress:
 - from:
  - ipBlock:
    cidr: 10.0.0.0/24
  - namespaceSelector:
    matchLabels:
     name: test-namespace
  ports:
  - protocol: TCP
   port: 8080

这里创建了一个名为 test-network-policy 的网络策略，它定义了当访问属于 test-namespace 命名空间且包含 app=test-app 标签的 Pod 时，只允许来自 10.0.0.0/24 网段 IP 或 test-namespace 命名空间的 Pod 访问 Pod 的 TCP 8080 端口。

以上就是网络策略的配置步骤了，通过配置网络策略可以控制 Pod 之间的网络通信。

4.4 限制 Kubernetes API 访问

在 Kubernetes 中，可以使用网络策略来控制 Pod 之间和 Pod 与集群中其他资源之间的网络流量。

本文介绍如何配置网络策略，以限制 Kubernetes API 的访问流量。

4.4.1 创建一个命名空间：

kubectl create namespace example

4.4.2 创建一个 Label，该 Label 将用于标记要受网络策略保护的 Pod：

kubectl label namespace example name=example

4.4.3 创建 Pod：

apiVersion:v1
kind:Pod
metadata:
name:example-pod
namespace:example
labels:
app:example
spec:
containers:
-name:example-container
image:nginx

4.4.4 创建一个网络策略：

apiVersion:networking.k8s.io/v1
kind:NetworkPolicy
metadata:
name:api-policy
namespace:example
spec:
podSelector:
matchLabels:
app:example
policyTypes:
-Ingress
ingress:
-from:
-podSelector:
matchLabels:
app:kubernetes

上述策略将禁止任何与带有 label app=example 的 Pod 的入站流量，除非该流量始于带有 label app=kubernetes 的 Pod。请注意，该规则仅限制流量，因此不影响容器的运行状态。

4.4.5 验证策略是否生效：

kubectl run busybox --image=busybox -n example -- sleep 3600
kubectl exec -it busybox -n example -- wget -q -O - 
kubectl exec -it busybox -n example -- wget -q -O - kubernetes.default.svc.cluster.local

第一行使用 busybox 镜像创建一个名为 busybox 的 Pod，并执行一个长时间休眠的命令。
第二行调用 wget 命令将通过 Pod example-pod 执行 HTTP GET 请求。由于我们已经创建了一个网络策略，该请求将被阻止。
第三行调用 wget 命令将访问 kubernetes.default.svc.cluster.local，这是 Kubernetes API 的 DNS 名称。
由于我们已经在策略中选择了从 Kubernetes 组件 Pod 的流量，该请求将显示预期的结果。

五、保护 Kubernetes 网络

5.1 配置 Kubernetes 网络插件

Kubernetes 网络插件是一个 K8s 集群中的必要组件之一，它的主要目的是负责实现容器的网络功能，例如为容器分配 IP、实现容器间通信、提供网络隔离等。

不同的网络插件有不同的实现机制，不同的云平台和部署环境也有不同的网络要求，因此，使用哪种网络插件需要根据实际情况进行选择。

常用的 Kubernetes 网络插件有以下几种：

Flannel：Flannel 是一个简单而高效的容器网络解决方案，它使用了类似于 Overlay 网络的技术，为每个节点分配一个唯一的 IP 地址，并使用 VXLAN 或 UDP 封装来实现容器之间的通信。
Calico：Calico 是一个高性能的容器网络解决方案，可以实现高效的容器间网络通信和网络安全。它使用了 BGP 协议来实现路由，并通过网络策略实现容器访问控制。
Cilium：Cilium 是一种基于 eBPF (Extended Berkeley Packet Filter) 技术的容器网络解决方案，可以提供高效、安全和可靠的容器间通信。它可以实现网络隔离、网络策略和流量审计等功能。

在选择网络插件时，需要考虑以下几个方面：

性能：不同的网络插件有不同的性能表现，需要根据实际应用场景进行选择。
范围：一些网络插件只能为应用程序容器提供内部网络，而另一些则可以为外部服务提供网络服务。
安全性：一些网络插件提供内置的安全功能来保护容器和云基础设施。
易用性：一些网络插件提供图形化界面和易用的 API，方便用户部署和管理。

5.2 配置 Kubernetes Ingress 控制器

在 Kubernetes 中，Ingress 控制器是一种负责管理外部流量进入 K8s 集群的组件，它可以使用不同的负载均衡算法将外部流量路由到不同的后端服务。Ingress 控制器常常被用于实现 Web 应用程序等场景的负载均衡和流量控制。

使用 Ingress 控制器时，需要设置一些安全规则来保护集群免受恶意攻击。

例如：

访问控制：可以通过定义网络策略来控制从外部访问特定服务的权限，从而确保服务只能被授权用户和应用程序访问。
SSL/TLS 加密：可以使用 SSL/TLS 加密来保护传输的数据。可以为 Ingress 控制器配置自签名证书或购买权威证书。
限流：可以使用限流来控制流量，以防止 DDoS 攻击。
访问日志：可以启用访问日志来记录所有流量，以便进行安全审计和调查。

5.3 安全使用 Kubernetes 服务

Kubernetes 服务是一种允许容器之间互相通信的抽象机制，它可以为容器动态生成一个稳定的 IP 地址，并提供负载均衡等重要功能。

使用 Kubernetes 服务时，需要注意以下几个方面：

访问控制：可以使用 Kubernetes 的内置功能来设置网络策略，控制访问服务的权限。例如，可以禁止外部服务访问一些重要服务。
安全设置：需要设置安全设置来控制服务的访问权限。例如，可以为服务配置 TLS 证书。
日志记录：需要记录服务的日志以便于审计和追踪。
数据保护：需要设置备份和恢复策略以保护服务数据的完整性。

六、安全地运行 Kubernetes 工作负载

6.1 如何让 Kubernetes Pod 更安全

在 Kubernetes 中，“Pod”是最小的环境单元，是一个或多个容器的集合。

创建一个安全的 Pod 需要考虑以下几个方面：

6.1.1 限制资源

在 Kubernetes 中，可以利用 LimitRange 和在 PodLevel 中使用 resourceQuotas 实现资源的限制，并防止 Pod 超出其可用资源。通过设置资源限制，可以确保容器无法获得超过它应有的资源。

6.1.2 使用安全上下文

通过使用安全上下文，可以为某些容器设置用户 ID（UID）和组 ID（GID）。这可以防止攻击者访问系统级别的文件或进程，并限制容器的能力。

Kubernetes 还允许配置特权上下文机制，在容器中取消安全限制，但这应该谨慎使用，尽可能避免。

6.1.3 启用 Kubernetes pod 安全策略

Kubernetes Pod 安全策略（PodSecurityPolicy）可帮助管理员对 Pod 下的容器应用程序执行强制安全性措施。PodSecurityPolicy 的使用可以防止容器从容器内部攻击宿主机，也可以防止容器之间的攻击。

6.1.4 使用网络隔离

使用 Kubernetes 的网络插件或者其他链路层隔离技术，可以增强 Pod 的网络隔离性和安全性。通过流量隔离，可以限制容器访问其他容器或存储卷等敏感资源，减少网络攻击的发生。

6.2 Kubernetes 容器安全最佳实践

保护容器是保护 Kubernetes 集群的关键。下面介绍几个将有助于提高容器安全性的 Kubernetes 容器安全实践：

6.2.1 选择适当的容器基础映像

合理选择 Docker 容器镜像，标准镜像推荐使用官方的镜像仓库。也可以使用 Docker 的安全组件进行容器基础镜像验证。

6.2.2 确保容器镜像代码病毒和漏洞扫描

使用容器镜像扫描器，确保容器代码没有病毒和漏洞。扫描后把显示代码和漏洞进行修复，以致使用安全镜像。

6.2.3 配置容器安全策略

通过 Kubernetes 的容器安全策略 (PodSecurityPolicy) 配置容器安全策略，推荐使用 runtimeClass 策略限制特权容器在 Pod 中的使用以及不安全容器的访问权限。

6.2.4 使用容器日志记录

容器日志记录可以方便管理员为容器的活动作出诊断和调整。用标准输出优化容器日志并将其收集至安全中心或外部存储。

6.2.5 运行应用程序多个实例

容器运行时保障应用程序的可用性并提供弹性，如果一个容器在发生故障的情况下，它不会影响应用程序的其余部分。运行多个实例时，确保使用负载均衡器，可使流量通过非常安全的通道路由，从而达到更好的安全保护。

4.2.6 配置网络安全

Kubernetes 集群应该配置网络安全性保障，每个容器都应该拥有自己的 IP 和端口，网络策略可以配置，以限制容器间的流量。

6.3 使用 Kubernetes 操作系统安全性修补程序

除容器安全外，还需要对 Kubernetes 工作节点的本身进行保护。特别是，要定期更新操作系统的安全修补程序、Kubernetes 组件等。

此外，Kubernetes 工作节点应配置安全接入，以限制不必要的访问并保护集群免受未经授权的访问和攻击。可以使用 Kubernetes 各种安全组件，监视和警报安全事件，以及采取必要的措施和修复，以确保 Kubernetes 集群是可靠且安全的。

七、监控和日志管理

使用 Kubernetes 安全扫描器可以自动扫描 Kubernetes 集群中的容器映像和资源配置，查找潜在的安全漏洞和风险。

7.1 以下是一些常见的安全扫描器：

Aqua Security：一家提供容器安全和策略管理的公司，其 Aqua Security Scanner 可以扫描应用程序容器映像并提供漏洞分析、风险评估和建议。
Clair：一个开源的容器漏洞扫描器，它与 CoreOS、Docker、Kubernetes 等平台兼容。
Anchore：一个开源的容器映像分析工具，它可以评估映像的安全性、配置、性能等方面，并提供警报和建议。
Sysdig Secure：一种综合安全解决方案，它在 Kubernetes 中提供运行时扫描、攻击检测、一致性和符合性审计等功能。

7.2 在 Kubernetes 中启用日志记录

为了增强安全和故障排除能力，在 Kubernetes 中启用日志记录非常重要。以下是一些常见的日志记录解决方案：

Fluentd：一种开源的日志收集器和分发器，它可以集中管理多个 Kubernetes 集群中的日志，并将其发送到相应的后端存储、分析或可视化工具中。
Elasticsearch-Fluentd-Kibana（EFK）堆栈：一个流行的日志记录解决方案，它结合了 Elasticsearch、Fluentd 和 Kibana 三个工具，实现了日志的集中式管理、搜索和可视化。
Loki：一种开源的日志聚合器，它专门针对 Kubernetes 和容器环境进行了优化，提供高度可扩展和高效的日志收集和查询功能。

7.3 在 Kubernetes 中添加监视

监视 Kubernetes 集群和应用程序的状态可以帮助您及时发现和解决问题，并提高可靠性和可用性。

以下是一些常见的监视解决方案：

Prometheus：一种开源的时间序列数据库和监视系统，它可以监视 Kubernetes 中的各种指标和事件，并提供灵活的警报和查询功能。它还可以与 Grafana 等可视化工具结合使用，使您可以更容易地了解整个系统的状况。
Datadog：一种集成的监视和分析平台，它支持 Kubernetes、容器等多种技术栈，并提供实时指标、日志和跟踪数据的可视化和警报。
Sysdig Monitor：一个提供实时容器监视、安全性、性能和可靠性指标的解决方案，支持 Kubernetes、Docker、Mesos 和 Amazon Web Services 等平台。