Previous incidents

Métriques (metrics) recovered.

console.france-nuage.fr recovered.

de 18h20 à 18h30 aujourd'hui, le DC02 est passé en 4G le temps de changer un câble RJ45 ça a perturbé plusieurs traitements sur cette plage. Tout est revenu en fonctionnement nominal.

console.france-nuage.fr recovered.

Métriques (metrics) recovered.

DC01 de noueavu UP, le courant est revenu, les batteries des onduleurs se rechargent.

Revenu à la normale

Les chaleurs sont revenues à la normale

Nouvelle occurence de l'incident du vendredi 15. Un noeud kube qui ne répond plus en DC04, kernel panic.

La root cause est le plus probablement côté matériel. Nous avons marqué le noeud comme non schedulable.

Les services qui tournaient dessus ont été relocalisés.

Début de l'incident 18h31 -> kernel panic du noeud c4-2
Fin de l'incident 18h40 -> tous les pods ont été relocalisés et le noeud cordonned + drained 

On laisse le noeud hors du cluster le temps d'investiguer l'instabilité matér...

Métriques (metrics) recovered.

Nous avons un noeud qui ne répond plus en DC04, tout les pods ont été relocalisés sur les autres noeuds automatiquement en quelques minutes.

Gestionnaire de mot de passe managé (vault) recovered.

Le certificat partagé a expiré, nous avons mis en place des ingress avec cert-issuer sur tous les endpoints pour que ça ne pose plus de problème à l'avenir.
Les challenges TLS sont tous passés.

Métriques (metrics) recovered.

Stockage d'objets (S3) recovered.

Stockage d'objets (S3) recovered.

Stockage d'objets (S3) recovered.

Métriques (metrics) recovered.