Pentesting Kubernetes Services

Reading time: 8 minutes

Kubernetes utilise plusieurs services réseau spécifiques que vous pourriez trouver exposés à Internet ou dans un réseau interne une fois que vous avez compromis un pod.

Trouver des pods exposés avec OSINT

Une façon pourrait être de rechercher Identity LIKE "k8s.%.com" dans crt.sh pour trouver des sous-domaines liés à kubernetes. Une autre façon pourrait être de rechercher "k8s.%.com" sur github et de chercher des fichiers YAML contenant la chaîne.

Comment Kubernetes expose des services

Il pourrait être utile pour vous de comprendre comment Kubernetes peut exposer des services publiquement afin de les trouver :

Exposing Services in Kubernetes

Trouver des pods exposés via le scan de ports

Les ports suivants pourraient être ouverts dans un cluster Kubernetes :

Nmap

nmap -n -T4 -p 443,2379,6666,4194,6443,8443,8080,10250,10255,10256,9099,6782-6784,30000-32767,44134 <pod_ipaddress>/16

Kube-apiserver

C'est le service API Kubernetes avec lequel les administrateurs communiquent généralement en utilisant l'outil kubectl.

Ports communs : 6443 et 443, mais aussi 8443 dans minikube et 8080 comme non sécurisé.

curl -k https://<IP Address>:(8|6)443/swaggerapi
curl -k https://<IP Address>:(8|6)443/healthz
curl -k https://<IP Address>:(8|6)443/api/v1

Vérifiez la page suivante pour apprendre comment obtenir des données sensibles et effectuer des actions sensibles en communiquant avec ce service :

Kubernetes Enumeration

API Kubelet

Ce service s'exécute sur chaque nœud du cluster. C'est le service qui va contrôler les pods à l'intérieur du nœud. Il communique avec le kube-apiserver.

Si vous trouvez ce service exposé, vous pourriez avoir trouvé un RCE non authentifié.

API Kubelet

curl -k https://<IP address>:10250/metrics
curl -k https://<IP address>:10250/pods

Si la réponse est Unauthorized, cela nécessite une authentification.

Si vous pouvez lister les nœuds, vous pouvez obtenir une liste des points de terminaison kubelets avec :

kubectl get nodes -o custom-columns='IP:.status.addresses[0].address,KUBELET_PORT:.status.daemonEndpoints.kubeletEndpoint.Port' | grep -v KUBELET_PORT | while IFS='' read -r node; do
ip=$(echo $node | awk '{print $1}')
port=$(echo $node | awk '{print $2}')
echo "curl -k --max-time 30 https://$ip:$port/pods"
echo "curl -k --max-time 30 https://$ip:2379/version" #Check  also for etcd
done

kubelet (Lecture seule)

curl -k https://<IP Address>:10255
http://<external-IP>:10255/pods

API etcd

curl -k https://<IP address>:2379
curl -k https://<IP address>:2379/version
etcdctl --endpoints=http://<MASTER-IP>:2379 get / --prefix --keys-only

Tiller

helm --host tiller-deploy.kube-system:44134 version

Vous pourriez abuser de ce service pour élever les privilèges à l'intérieur de Kubernetes :

cAdvisor

Service utile pour recueillir des métriques.

curl -k https://<IP Address>:4194

NodePort

Lorsqu'un port est exposé sur tous les nœuds via un NodePort, le même port est ouvert sur tous les nœuds, proxifiant le trafic vers le Service déclaré. Par défaut, ce port sera dans la plage 30000-32767. Ainsi, de nouveaux services non vérifiés pourraient être accessibles via ces ports.

sudo nmap -sS -p 30000-32767 <IP>

Configurations vulnérables

Accès anonyme à Kube-apiserver

L'accès anonyme aux points de terminaison de l'API kube-apiserver n'est pas autorisé. Mais vous pouvez vérifier certains points de terminaison :

Vérification de l'accès anonyme à ETCD

L'ETCD stocke les secrets du cluster, les fichiers de configuration et d'autres données sensibles. Par défaut, l'ETCD ne peut pas être accessible anonymement, mais il est toujours bon de vérifier.

Si l'ETCD peut être accessible anonymement, vous devrez peut-être utiliser l'outil etcdctl. La commande suivante récupérera toutes les clés stockées :

etcdctl --endpoints=http://<MASTER-IP>:2379 get / --prefix --keys-only

Kubelet RCE

La documentation de Kubelet explique qu'en default, l'accès anonyme au service est autorisé :

Permet les requêtes anonymes au serveur Kubelet. Les requêtes qui ne sont pas rejetées par une autre méthode d'authentification sont traitées comme des requêtes anonymes. Les requêtes anonymes ont un nom d'utilisateur de system:anonymous, et un nom de groupe de system:unauthenticated

Pour mieux comprendre comment fonctionne l'authentification et l'autorisation de l'API Kubelet, consultez cette page :

Kubelet Authentication & Authorization

L'API du service Kubelet n'est pas documentée, mais le code source peut être trouvé ici et trouver les points de terminaison exposés est aussi simple que d'exécuter :

curl -s https://raw.githubusercontent.com/kubernetes/kubernetes/master/pkg/kubelet/server/server.go | grep 'Path("/'

Path("/pods").
Path("/run")
Path("/exec")
Path("/attach")
Path("/portForward")
Path("/containerLogs")
Path("/runningpods/").

Tous semblent intéressants.

Vous pouvez utiliser l'outil Kubeletctl pour interagir avec les Kubelets et leurs points de terminaison.

/pods

Ce point de terminaison liste les pods et leurs conteneurs :

kubeletctl pods

/exec

Ce point de terminaison permet d'exécuter du code à l'intérieur de n'importe quel conteneur très facilement :

kubeletctl exec [command]

Vérification de l'exposition des informations du Kubelet (Port en lecture seule)

Lorsqu'un port en lecture seule du kubelet est exposé, il devient possible pour des parties non autorisées de récupérer des informations de l'API. L'exposition de ce port peut conduire à la divulgation de divers éléments de configuration du cluster. Bien que les informations, y compris les noms des pods, les emplacements des fichiers internes et d'autres configurations, ne soient pas critiques, leur exposition pose néanmoins un risque pour la sécurité et doit être évitée.

Un exemple de la façon dont cette vulnérabilité peut être exploitée implique un attaquant distant accédant à une URL spécifique. En naviguant vers http://<external-IP>:10255/pods, l'attaquant peut potentiellement récupérer des informations sensibles du kubelet :

Références

Kubernetes Pentest Methodology Part 2

Threats & Research Archives - F-Secure Blog