Decision Observability
Zaman içinde gözlemlenemeyen kararlar, sisteme hiçbir şey öğretemez.
Çoğu ekip kararların yanlış olduğu için başarısız olduğunu düşünür.
Çoğu zaman kararlar yanlış olduğu için değil,
hiç gözlemlenmedikleri için başarısız olur.
Verilirler. Uygulanırlar. Sonra zaman geçer.
Ve kimse neye bakacağını bilmez.
Gizli Varsayım
Çoğu sistem şunu varsayar:
Eğer bir şey önemliyse, metriklerde görünür.
Bu yüzden ekipler dashboard’lara odaklanır.
KPI’lar tanımlar. Takibi otomatikleştirir.
Ama en önemli kararların çoğu temiz sayılar üretmez.
Şunları değiştirir:
- algı
- güven
- davranış
- uyum
- sürtünme
Bunlar gerçektir.
Sadece ölçülmeleri zordur.
Observability Ölçüm Değildir
Ölçüm şu soruya cevap verir:
Ne kadar değişti?
Observability ise şunu sorar:
Bu kararın işe yarayıp yaramadığını nasıl anlayacağız?
Bir karar ölçülebilir olmadan da gözlemlenebilir.
Şunlarla değerlendirilebilir:
- kıyas
- insan yargısı
- önce/sonra karşılaştırması
- manuel inceleme
- zaman içindeki desenler
Otomasyon opsiyoneldir.
Gözlem zorunludur.
Gözlemlenemeyen Kararlar Neden Tehlikelidir
Gözlem yolu olmayan bir karar öğrenilemez.
Doğrulanamaz.
Sorgulanamaz.
Kapatılamaz.
Bu kararlar kaybolmaz.
Varsayıma dönüşür.
Davranışı sessizce şekillendirir.
Ve başarısız olduklarında ekipler sıfırdan tartışır.
Bu iterasyon değildir.
Bu hafıza kaybıdır.
Ertelenmiş Gözlemlenebilirlik
Her karar hemen gözlemlenemez.
Bazıları zaman ister.
Sinyaller geç çıkar.
Desenler bağlam ister.
Bu kararı geçersiz kılmaz.
Ama şunu zorunlu kılar:
Gözlemin ne zaman ve nasıl yapılacağının açıkça belirtilmesini.
Bir karar:
- şimdi gözlemlenebilir olabilir
- sonra gözlemlenebilir olabilir
Ama kalıcı olarak gözlemlenemez olamaz.
Bir Kararın Asgari Sözleşmesi
Bir kararın öğrenme sisteminde yeri olması için tek bir soruyu cevaplaması gerekir:
Bu kararın doğru olup olmadığını nasıl anlayacağız?
Cevabın sayısal olması gerekmez.
Niyet içermesi yeterlidir.
Gelecekte yapılacak bir kıyas içermesi yeterlidir.
İnancın tekrar ele alınacağı bir an tanımlaması yeterlidir.
Bunlar yoksa kararlar an olur.
Varlık olmaz.
Sistemlerin Genelde Yanıldığı Yer
Çoğu araç gözlemlenebilirliği takiple eşitler.
Otomatik değilse yok sayar.
Grafiğe dökülemiyorsa gürültü kabul eder.
Böylece ekipler kolay görüneni optimize eder.
Gerçekte önemli olanı kaybeder.
Sonuç
Kararlar var oldukları için öğretmez.
Zaman içinde gözlemlendikleri için öğretir.
Her şey ölçülemez.
Ama önemli olan her şey gözlemlenebilir — şimdi ya da sonra.
Bunu unutan sistemler öğrenmez.
Sadece hareket eder.
Afterchange Team
Ekiplerin kararları takip etmesine ve etkiyi ölçmesine yardımcı oluyoruz.