ClickHouse quitte pi3 pour pi1 : son volume y avait perdu son journal ext4 le 04/09, et Plausible n'écrivait plus rien #54

Merged
arcodange merged 1 commits from arcodange/incident-clickhouse into main 2026-09-15 12:17:06 +02:00
1 Commits
Author SHA1 Message Date
arcodangeandClaude Opus 5 ed377299bd ClickHouse quitte pi3 pour pi1 : son volume y avait perdu son journal ext4 le 04/09, et Plausible n'écrivait plus rien
Helm Charts / Detect changed charts (pull_request) Successful in 1m1s
Helm Charts / Library charts tool (pull_request) Skipped
Helm Charts / Application charts alloy (pull_request) Skipped
Helm Charts / Application charts chart (pull_request) Skipped
Helm Charts / Application charts crowdsec (pull_request) Skipped
Helm Charts / Application charts grafana (pull_request) Skipped
Helm Charts / Application charts hashicorp-vault (pull_request) Skipped
Helm Charts / Application charts loki (pull_request) Skipped
Helm Charts / Application charts minio (pull_request) Skipped
Helm Charts / Application charts pgbouncer (pull_request) Skipped
Helm Charts / Application charts pgcat (pull_request) Skipped
Helm Charts / Application charts prometheus (pull_request) Skipped
Helm Charts / Application charts redis (pull_request) Skipped
Le 04/09 à 02:42Z, ext4 a abandonné son journal sur le volume de
ClickHouse, attaché sur pi3. Depuis, onze jours d'`Input/output error`
sur les fusions et les lectures, et le migrateur de Plausible plante en
init (CrashLoopBackOff, application ArgoCD `plausible` Degraded). Un
redémarrage de conteneur ne démonte pas le volume.

Préférence de poids 100 pour pi1, pi2 toujours exclu : recréé sur un
autre nœud, le volume est détaché puis rattaché, et ext4 rejoue son
journal.

Refs arcodange-org/tools#53

Co-Authored-By: Claude Opus 5 <[email protected]>
2026-09-15 12:15:23 +02:00