Tüm monitoring kaynaklarınızı, ekibinizin kaydedip paylaştığı alert görünümlerini ve on-call yönetimini tek merkezde toplayan bir ürün geliştiriyoruz. AI, ilişkili alert’leri gruplayacak ve olası root cause’u önerecek.
Geliştirme aşamasında. Fiyatlar lansmanda açıklanacak.
team:infrastatus:openseverity:≥warn/var at 96% on db-02Zabbix, 1 dk×38/tmp at 88% on web-07Alertmanager, 31 dk×5cache-03Prometheus, 44 dk×2payments-apiDatadog, 1 sa×9db-01Grafana, 2 sa×1ObserveHub monitoring araçlarınızdan gelen alert’leri toplayacak, duplicate’leri gruplayacak ve önemli olanı on-call mühendisine yönlendirecek.
Geliştirme aşamasında. Aşağıdaki ekranlar geliştirdiğimiz ürünün örnekleri.
Tek tıkla alert acknowledge edilecek, escalation duracak ve kanaldaki herkes alert’i kimin aldığını görecek.
Aynı sunucu ya da servisle ilgili alert’ler, kimse page edilmeden önce gruplanacak.
Escalation policy’leri, biri acknowledge edene kadar alert’i sıradaki kişiye taşıyacak.
Her gün kullandığınız filtreler bir isim alacak ve ekipteki herkes aynı listeyi açacak.
Kurallar aynı sunucunun alert’lerini gruplayacak. Bunun üstüne, aynı nedene bağlı farklı servislerin alert’lerini de birbirine bağlayan ve incident’ı neyin başlattığını kanıtlarıyla öneren bir AI geliştiriyoruz.
Geliştirme aşamasında. Aşağıdaki ekran geliştirdiğimiz ürünün bir örneği.
8 alert, 1 incident, Deniz’e 1 page
İlişkili alert’ler bekleniyor
8 alert inceleniyor…
db-02’de log rotation 09:12’de başarısız oldu. Eski log’lar /var dizinini doldurdu, disk beklemeleri arttı; checkout ve payments yavaşladı.
Kanıtlar
Önerilen adımdb-02’de /var/log altında yer açın, ardından log rotation job’ını düzeltin.
Önce hub: alert’ler bir kişiye ulaşmadan ayıklanacak, böylece on-call mühendisi yalnız insan gerektiren işi görecek.
Geliştirdiğimiz tasarım bu.
Bağlayabileceğiniz kaynak sayısında sınır yok.
214 alert girdi, 9 incident çıktı
Kurallar her incident’ı servise, host’a, tag’e ya da severity’ye göre doğru ekibe gönderir.
team = infraservice = paymentsseverity ≥ criticalSchedule’lar, rotation’lar ve çok seviyeli escalation kimin, nasıl haberdar edileceğine karar verir.
Push, e-posta, SMS, sesli arama, Slack ve Microsoft Teams. Herhangi birinden acknowledge edebilirsiniz.
Haftalık, günlük ve follow-the-sun rotation’ları olan on-call schedule’ları ve biri vardiyasını devrettiğinde kullanılacak override’lar geliştiriyoruz. Bütün ekip aynı takvimi görür.
Geliştirme aşamasında. Bugünden başlayan örnek bir schedule.
DDeniz şu an on-call’da. Sırada Arda var.
Örnek haftalık rotation: bu hafta Deniz on-call’da, sırada Arda var.
Normal alert’ler on-call mühendisine push ve e-postayla ulaşır. SMS ve sesli arama critical alert’lere ayrılır; telefon çaldığında gerçekten bir şey vardır.
Planlanıyor.
SMS yok, arama yok. Biri alana kadar uygulamada bekler.
4:12’de acknowledge edildi, aramalar durdu.
Kullandığınız monitoring araçlarını bağlayın. Planlarda sayı sınırı yok.
Slack ve Microsoft Teams bildirim kanalı olarak planlanıyor. Webhook ya da e-posta gönderebilen her araç bağlanabilecek; New Relic, Dynatrace, Elastic, Sentry, CloudWatch, Azure Monitor, Checkmk ve Uptime Kuma da bunlara dahil. Logolar sahiplerine aittir ve geliştirdiğimiz entegrasyonları gösterir.
Opsgenie tarihinde kapanıyor. Odaklı bir alerting ve on-call aracıyla devam etmek istiyorsanız, geçiş için şunları geliştiriyoruz.
Import aracı geliştirme aşamasında. Erken erişime katılırken bugün ne kullandığınızı bize yazın.
Sade ve şeffaf. Bir on-call aracının fiyatını tek satırda okuyabilmelisiniz.
Hayır. ObserveHub yalnız barındırılan (SaaS) bir servis olacak.
AB’de.
Özellikler hazır oldukça bekleme listesini gruplar hâlinde davet edeceğiz. Erken erişime katılın ve bugün ne kullandığınızı yazın; neyi önce bitireceğimize karar vermemize yardımcı olur.
Ekibinizi biraz anlatın. Bekleme listesini gruplar hâlinde davet edeceğiz; cevaplarınız neyi önce çıkaracağımıza karar vermemize yardımcı olacak.