Baccelli bloccati nello stato Terminazione

Ho provato a eliminare un ReplicationControllercon 12 pod e ho potuto vedere che alcuni dei pod sono bloccati nello Terminatingstato.

Il mio cluster Kubernetes è costituito da un nodo del piano di controllo e tre nodi di lavoro installati su macchine virtuali Ubuntu.

Quale potrebbe essere la ragione di questo problema?

NAME        READY     STATUS        RESTARTS   AGE
pod-186o2   1/1       Terminating   0          2h
pod-4b6qc   1/1       Terminating   0          2h
pod-8xl86   1/1       Terminating   0          1h
pod-d6htc   1/1       Terminating   0          1h
pod-vlzov   1/1       Terminating   0          1h

È possibile utilizzare il comando seguente per eliminare forzatamente il POD.

kubectl delete pod <PODNAME> --grace-period=0 --force --namespace <NAMESPACE>

Forza l'eliminazione del pod:

kubectl delete pod --grace-period=0 --force --namespace <NAMESPACE> <PODNAME>

La --forcebandiera è obbligatoria.

Elimina il blocco finalizzatori dalla risorsa (pod, distribuzione, ds ecc ...) yaml:

"finalizers": [
  "foregroundDeletion"
]

Risposta pratica: puoi sempre eliminare un pod di terminazione eseguendo:

kubectl delete pod NAME --grace-period=0

Risposta storica - Si è verificato un problema nella versione 1.1 in cui a volte i pod vengono bloccati nello stato Terminating se i loro nodi vengono rimossi in modo non pulito dal cluster.

Ho trovato questo comando più semplice:

for p in $(kubectl get pods | grep Terminating | awk '{print $1}'); do kubectl delete pod $p --grace-period=0 --force;done

Elimina tutti i pod nello stato Terminazione nello spazio dei nomi predefinito.

Nel mio caso l' --forceopzione non ha funzionato. Potrei ancora vedere il pod! Era bloccato in modalità Terminazione / Sconosciuto. Quindi dopo aver corso

kubectl delete pods <pod> -n redis --grace-period=0 --force

Ho corso

kubectl patch pod <pod> -p '{"metadata":{"finalizers":null}}'

Se --grace-period=0non funziona, puoi fare:

kubectl delete pods <pod> --grace-period=0 --force

Di recente mi sono imbattuto in questo quando ho rimosso lo spazio dei nomi di ceph di rook: è rimasto bloccato nello stato Terminating.

L'unica cosa che ha aiutato è stata la rimozione del finalizzatore di kubernetes chiamando direttamente api k8s con arricciatura come suggerito qui .

• kubectl get namespace rook-ceph -o json > tmp.json
• elimina il finalizzatore di kubernetes in tmp.json(lascia un array vuoto "finalizers": [])
• eseguire kubectl proxyin un altro terminale per scopi di autenticazione ed eseguire in seguito alla richiesta di arricciatura alla porta restituita
• curl -k -H "Content-Type: application/json" -X PUT --data-binary @tmp.json 127.0.0.1:8001/k8s/clusters/c-mzplp/api/v1/namespaces/rook-ceph/finalize
• lo spazio dei nomi è sparito

Demolizione dettagliata del rook qui .

La domanda originale è " Quale potrebbe essere la ragione di questo problema? " E la risposta è discussa su https://github.com/kubernetes/kubernetes/issues/51835 & https://github.com/kubernetes/kubernetes/issues / 65569 e vedi https://www.bountysource.com/issues/33241128-unable-to-remove-a-stopped-container-device-or-resource-busy

È causato dalla perdita della docker station in qualche altro spazio dei nomi.

È possibile accedere al pod host per indagare.

minikube ssh
docker container ps | grep <id>
docker container stop <id> 

Mi sono imbattuto in questo recentemente per liberare risorse nel mio cluster. ecco il comando per eliminarli tutti.

kubectl get pods --all-namespaces | grep Terminating | while read line; do 
pod_name=$(echo $line | awk '{print $2}' ) name_space=$(echo $line | awk 
'{print $1}' ); kubectl delete pods $pod_name -n $name_space --grace-period=0 --force; 
done

spero che questo aiuti qualcuno che ha letto questo