Kanıt Öncelikli Öneriler

Her öneri yapılandırılmış kanıt ve sonuç takibiyle gelir, metrik, eşik, trend, güven puanı. Hangi önerinin gerçekten işe yaradığını ölçüyoruz.

"Veritabanında bellek baskısı var" gibi bir öneri ancak doğruysa işe yarar. Bu yüzden her öneri dayandığı kanıtı gösterir ve UptimeWarden ardından önerinin gerçekten işe yarayıp yaramadığını ölçer.

UptimeWarden her öneriyi yapılandırılmış kanıtlarla birlikte yayınlar ve uygulamanın sonucunu kaydeder. Karar verirken anlatıyı değil, sayıları okursunuz. Uygulanma oranı ve sonuç metrikleri kalitenin geri bildirim döngüsünü kapatır.

Bir öneri neleri içerir?

Her öneri şunları taşır:

AlanAnlamı
MetinÖnerinin kendisi, doğal dilde
KategoriPerformans, güvenilirlik, güvenlik, maliyet, yapılandırma, izleme veya altyapı
ÖncelikKritik, yüksek, orta veya düşük
Güven puanı0-100, modelin elindeki sinyale göre
KanıtÖneriyi gerekçelendiren veri (aşağıya bakın)
Tahmini etkiBeklenen etkinin doğal dilde açıklaması
Tetikleyici nedenÖneriyi üreten koşulun özeti
Aksiyon tipiOtomatik, manuel veya inceleme gerektiren

Her kanıt öğesi ise şunları taşır:

AlanAnlamı
MetrikHangi sinyal (yanıt süresi, uptime, hata oranı vb.)
Güncel değerŞu anki okuma
EşikAşılan eşik (varsa)
Trendİyileşiyor, kararlı veya kötüleşiyor
Veri noktasıHesaplamada kullanılan kontrol sayısı
Zaman aralığıKanıtın kapsadığı pencere (örn. "son 24 saat")

Kanıt, yapay zekânın serbest çıktısından değil, önceden hesaplanan istatistiklerden inşa edilir. Yani öneri sayılardan üretilir; sayılar öneriden değil.

Sonuç takibi

Her aktif öneri için bir geri bildirim kaydı tutulur:

  • Değerlendirme: faydalı, kısmen faydalı veya faydalı değil
  • Not: isteğe bağlı serbest metin
  • Uygulandı: "Uyguladım" işareti ve zaman damgası
  • Reddedildi: bir nedenle (bütçe, ilgisiz, zaten yapıldı, çok karmaşık, diğer) reddedildi
  • Sonuç: başarılı, kısmen başarılı, başarısız, uygulanmadı veya bekliyor
  • Sonuç notu: sonuç hakkında isteğe bağlı serbest metin
  • Uygulama öncesi/sonrası metrikler: yanıt süresi, uptime, hata oranı, sağlık skoru
  • Gerçek iyileşme: hesaplanan iyileşme yüzdesi

Bir öneriyi uyguladım olarak işaretlediğinizde UptimeWarden ölçümleri o anda dondurur. Takip eden pencerede yeniden ölçer ve gerçek farkı kaydeder. Öneri ya gerçekten bir iyileşme getirmiştir ya da getirmemiştir, sistem bunu hatırlar.

Kanıtı eleştirel okumak

Anlatı fazla iddialı olabilir. Kanıt yalan söyleyemez ama dikkatsiz okunduğunda yanıltabilir:

  • Güncel değer eşiği gerçekten aşıyor mu? Hâlâ eşiğin altındaysa öneri ölçüme değil, varsayıma dayanıyordur.
  • Trend güçlü mü? "Kötüleşiyor" sinyali 5 veri noktası ile zayıf, 200 ile güçlüdür.
  • Güven puanı düşük mü? 50'nin altında ise öneriyi kesin tavsiye değil, araştırma notu gibi okuyun. Sonraki döngü daha çok veri toplayacak.
  • Kategori monitör tipiyle uyumlu mu? Bir veritabanı TCP monitörü için "güvenlik" kategorisi büyük ihtimalle monitör tipinin yanlış sınıflandırıldığının işaretidir.

Önerileri nerede görürsünüz?

Pano üzerindeki Proaktif İçgörüler kartı, risk altındaki her monitör için önerileri kategori, öncelik ve güven puanı rozetleriyle birlikte listeler. Bir öneriye girdiğinizde kanıt öğeleri grafik üzerinde renkli bantlar olarak görünür.

Aksiyon butonları:

  • Faydalı / Kısmen / Faydalı değil: değerlendirmenizi kaydeder.
  • Uygula: öneriyi uygulanmış olarak işaretler ve mevcut metrikleri dondurur.
  • Reddet: açılır listeden bir neden seçmenizi gerektirir.
  • Sonucu kaydet: uyguladıktan sonra başarılı / kısmen / başarısız seçer ve metrikleri kaydeder.

Kalite metrikleri

Kategori başına şunlar toplanır:

  • Toplam, uygulanan, başarılı ve faydalı oy sayıları
  • Uygulanan öneriler arasındaki başarı oranı
  • Toplam önerilerin uygulanma oranı
  • Faydalı oy yüzdesi
  • Başarılı uygulamalardaki ortalama iyileşme

Başarı oranı düşük kalan kategoriler için içeride bir inceleme açılır; o kategorinin izlediği sinyalleri veya öneri metnini yenileriz.

Sınırlar

  • Öneri ikinci bir görüştür, son söz değildir. Planlar onay bekler ve onaylanan adımları uygulamak hesabınız için açılmadıkça kapalıdır; tek dar istisna için bkz: Korumalı Otomatik Düzeltme.
  • Kanıt o ana özeldir. Tahmin üretildikten sonra grafik canlı güncellenmez. Taze veri için monitörün canlı görünümünü açın.
  • Sonuç istatistiği zamanla olgunlaşır. Yeni bir hesabın ilk önerilerinde kalibrasyon verisi yoktur. Faydalı oy ve başarı oranları aylar içinde anlam kazanır.
  • Yazılı açıklama yanılabilir. Bir dil modelinden gelir ve en kırılgan parçadır. Güvendiğiniz koşu kitaplarıyla doğrulayın.

Sık sorulan sorular

S: Öneri metnini görüyorum ama kanıt yok. Neden? C: Kanıt listesi boşsa öneri ölçülen metriklerden değil, doğrudan modelin özetinden gelmiştir. Bu tür önerileri arayüzde filtreleriz; karşılaşırsanız geri bildirim notuyla bildirin.

S: Bir öneri kesintiye yol açacak bir aksiyon öneriyor. Ne yapayım? C: "İlgisiz" veya "diğer" nedeniyle reddedin ve serbest metinle açıklayın. Kategori başına yüksek reddetme oranı bir ürün incelemesi başlatır.

S: Tek bir monitör için önerileri kapatabilir miyim? C: Monitör başına değil; yalnızca hesap planı seviyesinde. Yöneticiler özel planda kapatabilir.

S: Güveni düşük öneriler neden gösteriliyor? C: Düşük güven kendi başına bir sinyaldir, "araştır, ama tam güvenme." Tamamen gizlemek bilgi kaybına yol açar.

İlgili konular