Kariyer
✍️ Bizzat
Bir Gece Depolama Sistemi Öldü ve Ben Yazılıma Bakışımı Değiştirdim
Bir gece depolama sistemi öldü; fark ettim ki sorun disk değil, hiçbir şeyin bozulmayacağını sanmaktı. Varsayımlar, güven ve sistemlerin gerçek karakteri.
#incident
14 yazı bulundu.
Teknoloji
✍️ Bizzat
VPS'te 3. Kez OOM: Paralel Build'ler ve flock Mutex Hikayesi
Blog otomasyonum başka projenin build'iyle çakıştı. RAM tükendi, sshd reset etti. Hard reboot + flock ile global build mutex çözümü.
Teknoloji
✍️ Bizzat
İlk OOM: kcompactd %92 CPU, sshd Reset, Hard Reboot
VPS'imde RAM tükendi, swap doldu, sshd connection reset etti. Astro build OOM'u tetikleyince katmanlı pipeline savunmasını kurmaya karar verdim.
Kariyer
✍️ Bizzat
Cleanup Script'im GitHub Runner'ı Öldürdü: Kendi Yarattığım İncident
Disk-cleanup.timer'ım runner'ın _work/_temp dizinlerini silmiş. 16 saat boyunca tüm cron'lar 'Missing file: set_output_*' ile patladı. Kazaya itirafım.
Teknoloji
✍️ Bizzat
Docker Bir Günde 56 GB Disk Yedi: Cleanup Otomasyonunu Kurma Hikayesi
VPS'imde disk %100 doldu, 5 saat blogum yayın atamadı. Docker build cache 33 GB, unused images 23 GB. Pruning + systemd timer ile kalıcı çözüm.
Kariyer
Incident Devrinde Karar Defteri ve Handoff Disiplini
Uzayan kesintilerde ekip değişimi sırasında bağlam kaybını önlemek için karar defteri, devralma ritmi ve net handoff akışı.
Rehberler
systemd-coredump ile Core Dump Yönetimi ve Gizlilik Runbook’u
Üretimde core dump toplamak: limit, saklama, şifreleme, erişim ve incident sırasında güvenli analiz için pratik runbook.
Kariyer
Major Incident Yönetimi: Incident Commander ve Runbook Pratikleri
Büyük kesintilerde en büyük risk teknik değil, koordinasyondur. IC rolü, iletişim ritmi ve pratik runbook yapısıyla MTTR’ı düşürme yaklaşımı.
Rehberler
Linux kdump ile Kernel Panic Crash Dump ve Triage Runbook'u
Kernel panic anında vmcore alıp hızlı triage yapmak için kdump kurulumunu, testini ve üretimde sürdürülebilir dump saklama akışını anlatır.
Rehberler
tcpdump ile Üretimde Paket Yakalama Runbook’u
Incident anında minimal ama yeterli paket kanıtı toplamak için tcpdump pratikleri: filtre, snaplen, ring buffer, gizlilik ve teslim süreci.
Kariyer
Değişiklik Öncesi Pre‑mortem ile Risk Haritalama
Üretime çıkmadan önce arızayı zihinde yaşayıp önlem üretmek: pre‑mortem ritmi, şablon, karar noktaları ve operasyonel liderlik pratiği.
Kariyer
Büyük Olaylardan Sonra Stabilizasyon Sprint'i (7 Gün)
Postmortem yazmak yetmez: 7 günlük odaklı bir sprint ile alert, runbook, risk ve iletişim borcunu kapatmanın operasyonel çerçevesi.
Kariyer
Incident Sırasında Delil Toplama Kiti ve Roller
Panik anında ‘tek sunucuya SSH’ refleksini bırakmak için kanıt seti, zaman standardı, rol dağılımı ve pratik kontrol listesi.
Kariyer
Minimum Viable Runbook Şablonu ve Incident Karar Noktaları
Runbook’u dokümantasyon yığını olmaktan çıkarıp incident anında karar üreten bir araca dönüştürmek için minimum şablon, eşikler ve pratik örnekler.