· Asep Alazhari · DevOps
Kami Nemuin Outage Kubernetes yang Gak Pernah Ngasih Alert
Log DaemonSet yang berisik berujung ke certificate control plane yang udah expired 16 hari tanpa alert sama sekali. Ini ceritanya lengkap sama fix-nya.
Tag: Production Incident
· Asep Alazhari · DevOpsMySQL Gone Away: HAProxy, Galera, dan Ghost Processes
Jam 2 pagi, 80% koneksi database gagal setelah migrasi ke HAProxy. Root cause-nya ternyata proses yang sudah 83 hari berjalan dan tidak ada yang tahu.
· Asep Alazhari · DevOpsKubernetes Cluster Mati Setelah Node Reboot: Postmortem Lengkap
Cluster Kubernetes 6 node gue tiba-tiba gelap setelah master node reboot untuk pertama kalinya dalam 1 tahun 275 hari. Ini timeline insiden lengkapnya dan fix permanennya.