Model mi kayıyor, yoksa popülasyon mu değişiyor?

Bir izleme raporu sarıya döner: bu ayın başvuranlarının skor dağılımı, modelin üzerine kurulduğu dağılımdan uzaklaşmıştır. Akla ilk gelen yorum, modelin kaydığı ve yeniden kurulması gerektiğidir. Çoğu zaman gerekmez. Birbirinden epey farklı üç durum aynı sarı ışığı yakar ve her biri farklı bir yanıt ister.

Birbirine benzeyen üç durum

Popülasyon değişti. Gelen kişiler farklıdır: yeni bir satış kanalı, daha genç başvuranlara yönelik bir kampanya, yeni tür müşteri gönderen bir iş ortağı ya da değişen bir ekonomi. Girdiler kayar, ama bu girdilerle geri ödeme arasındaki ilişki hâlâ geçerli olabilir. Girdileri kaymış bir model yine de doğru olabilir.

İlişki değişti. Dar anlamıyla kavram kayması (concept drift) budur: aynı profil artık farklı sonuçlanır. Bir faiz şoku, taksidi kimin taşıyabileceğini değiştirir. Bir tahsilat süreci, kimin gecikmeden çıkacağını değiştirir. Yeni bir ürün koşulu, yüksek limit kullanımının ne anlama geldiğini değiştirir. Alanı tarayan bir derleme çalışması kavram kaymasını “akan verinin altta yatan dağılımında zaman içinde ortaya çıkan, öngörülemeyen değişiklikler” olarak tanımlar. İlişkinin kendisi kaydığında model geçen yılın dünyasını tahmin ediyordur.

Veri bozuldu. Dışarıda hiçbir şey değişmedi. Bir kaynak sistem taşındı, bir alanın anlamı değişti, eksik değer artık sıfırla dolduruluyor, bir büro dosyasının biçimi değişti ya da bir kategorinin adı değişti. Sarı ışığın en yaygın nedeni budur; düzeltmesi en kolay olan da budur.

İstikrar endeksi neyi söyler, neyi söylemez?

Popülasyon istikrar endeksi (PSI), skorun bir referans dönemde bantlara nasıl dağıldığını bugünkü dağılımla karşılaştırır. Değişken istikrar endeksi (CSI) aynı hesabı her seferinde tek bir girdi için yapar. Endeks üzerine yapılmış istatistiksel bir çalışma onu “bir değişkenin zaman içinde ne kadar kaydığını ölçen bir istatistik” olarak tanımlar. Aynı çalışma, alışılmış pratik eşik değerlerinin “I. tip ya da II. tip hata oranlarına başvurulmadan” uygulandığına dikkat çeker.

Bu yüzden PSI bir hüküm değil, bir sinyaldir. Değeri bantların nasıl çizildiğine ve örneklem büyüklüğüne bağlıdır: küçük bir segment yalnızca gürültü yüzünden ürkütücü görünebilir, büyük bir kayma da tek bir geniş bandın içinde saklanabilir. Hepsinden önemlisi, PSI sonuçlar hakkında hiçbir şey söylemez. Gelenlerin kim olduğundaki hareketi ölçer; modelin onların riskini hâlâ doğru tahmin edip etmediğini ölçmez. PSI değeri sakin bir model yanlış olabilir; PSI değeri kırmızı bir model de yine doğru olabilir.

Hangi sırayla bakılır?

Işık sarıya döndüğünde dört adımı sırayla izleriz; çünkü ucuz kontroller pahalı sonuçları baştan eler.

1. Önce veri hattına bakın. Eksik değer oranlarını, yeni ya da kaybolan kategorileri, değer aralıklarını, alan tanımlarını ve kaynak sistemlerdeki son değişiklikleri, canlıya alırken yazılan veri sözleşmesiyle karşılaştırın. Bir kırılma veride düzeltilir; etkilenen dosyalar bir kararda kullanıldıysa yeniden skorlanır.
2. Kaymanın nerede olduğunu bulun. Her girdi için CSI hesaplayın; skoru kanal, ürün, bölge ve iş ortağı kırılımında inceleyin. Sonra iş birimine neyin değiştiğini sorun: bir kampanya, bir kesme noktası, bir iş ortağı, bir süreç. Çoğu kaymanın, ekranda bir adı olmadan önce kurumun içinde bir adı vardır.
3. Sonuçları olgunlaştıkça okuyun. Yeni kuşaklarda banda göre kalibrasyona ve sıralama gücüne bakın. Tam performans penceresi henüz kapanmamışken ilk taksit temerrüdü ya da erken gecikme gibi erken göstergeleri izleyin.
4. Karar verin ve kararı yazıya geçirin. Ne bulundu, ne yapıldı ve kim onayladı.

Her bulgu neyi gerektirir?

• Veri hattında kırılma: modeli değil, veriyi düzeltin.
• Popülasyon değişmiş, ilişki korunuyor: izlemeye devam edin, yeni segmentte kalibrasyonu kontrol edin ve kesme noktalarını yeniden simüle edin; çünkü aynı eşikler artık farklı bir hacmi onaylar. Model hiç kurulmadığı bir segmentte kullanılıyorsa bu yeni bir kullanımdır ve kendi analizini gerektirir.
• Sıralama korunuyor, olasılıklar korunmuyor: yeniden kalibre edin.
• Sıralama gücü düştü: modeli, yeni dönemi de içeren veriyle yeniden geliştirin.

Bu sıra, denetim tarafının bakışıyla örtüşür. ABD'nin güncellenmiş model risk yönetimi rehberi (SR 26-2, Nisan 2026), kurumun kendi politikasına bağlı olarak “artık beklendiği gibi performans göstermeyen bir modelin model üstü düzeltmeleri (overlay), ayarlamayı ya da modelin yeniden geliştirilmesini gerektirebileceğini” söyler. Bu adımların her birini kurum onaylar; hiçbiri sessizce olmaz.

Canlıya aldıktan sonra izleme

İzleme planı ilk alarmdan sonra değil, canlıya almadan önce yazılır. Plan şunları adıyla belirtir: referans dönem, skor ve her ana girdi için endeksler, segment kırılımları, olgunlaşma pencereleriyle birlikte sonuç okumaları, alarm düzeyleri ve her alarmın kime gittiği, yeniden kalibrasyon ya da yeniden geliştirme yolu. SR 26-2 sürekli izlemeyi, “ürünlerde, risk tutarlarında, faaliyetlerde, müşterilerde, verinin ilgililiğinde ya da piyasa koşullarında olası değişiklikler karşısında bir modelin ne ölçüde beklendiği gibi performans gösterdiğinin” değerlendirilmesi olarak çerçeveler. Bu listedeki her madde, ışığın sarıya dönmesi için bir nedendir.

Plan yalnızca modeli değil, aksiyonları da izler. Skor, bantları ve bir aksiyon matrisini besler. Bir bantta onaylar tırmanıyorsa ya da bir inceleme kuyruğu taşıyorsa, model sağlam olsa bile stratejiye bakmak gerekir. Her aksiyonun sonuçları bir kontrol grubuyla karşılaştırılır; böylece sonuçlardaki bir değişikliğin kaynağı modele, popülasyona ya da stratejiye kadar izlenebilir.

Ekrandaki soru hiçbir zaman yalnızca “endeks kırmızı mı?” değildir. Soru, neyin nerede değiştiği ve modelin onu hâlâ doğru tahmin edip etmediğidir. Bu sorunun cevabı, sonraki adımın bir veri düzeltmesi mi, yeniden kalibrasyon mu, yeniden geliştirme mi, yoksa yalnızca bir ay daha izlemek mi olacağını belirler.