31 · Validasyon Lens — Market Risk

Faz 7 · Sentez

Bir validasyon yöneticisi nasıl düşünür?

Validasyon teknik bir egzersizden ibaret değildir. Teknik yeterlilik gerekli ama yeterli değil. Bankanın risk profilini şekillendiren modellere bağımsız bir perspektiften bakmak — bu bir bakış açısı, bir zihniyet meselesidir.

İlke 1

"Bu model ne söylüyor?" değil, "Bu model ne söylemek istedi ama söyleyemiyor?"

Modelin bildirdiği sonuç değil, bildirmediği şey validasyonun asıl meşguliyetidir. Model kapsam dışını tanımlar. Hangi risk faktörleri dışında? Hangi senaryo kurgulanamadı? Hangi ürünlerin fiyatlaması yaklaşık?

İlke 2

Her varsayım bir taraftır. Varsayım ne taraf tutuyor?

Modelin her gizli varsayımı — normal dağılım, sabit korelasyon, lineer geçişkenlik — bir yönde yanlılık üretir. Validatörün ilk görevi bu yanlılığın yönünü ve büyüklüğünü anlamaktır. Banka aleyhine mi, lehine mi?

İlke 3

Model doğru bile olsa yanlış kullanılıyor olabilir.

İstatistiksel olarak sağlam bir model, amacına uygun olmayan bir portföye uygulandığında tehlikeli olabilir. Fit-for-purpose testi teknik testten ayrıdır — model hangi koşullar için tasarlandı, o koşullar hâlâ geçerli mi?

İlke 4

Bulgu küçük görünse de zamanı gelince büyük olabilir.

Stres döneminde aktive olan varsayımlar normalin on katı etkiye yol açabilir. Kriz senaryosu altında bulgunun büyüklüğü nedir? Bu soruyu sormadan önem sırası tamamlanmış sayılmaz.

İlke 5

Bağımsızlık bir pozisyon değil, bir süreçtir.

Model sahipleriyle iyi ilişki kurmak bağımsızlıkla çelişmez. Bağımsızlık, sonuca bağlı olmadan süreci tamamlamak demektir: önceden belirlenmiş sonuç yoktur, bulgular nereye götürüyorsa oraya gidilir.

Soru Çerçevesi

Her modele sorulacak beş temel soru

Hangi model olursa olsun — VaR, NMD, SA-CCR, prepayment — bu beş soru validasyonun omurgasını oluşturur. Cevaplar bulunduktan sonra teknik derinlik başlar.

01

Model ne ölçmek için tasarlandı ve bu amaç hâlâ geçerli mi?

Portföy değişmiş olabilir. Regülasyon değişmiş olabilir. Model amacı ile kullanım arasındaki boşluk en temel model riski.

Kapsam & Amaç

02

Hangi varsayımlar gerçekleşmezse model anlamsızlaşır?

Kritik varsayımların kırıldığı koşullar neler? Bu koşullar ne kadar olası? Banka bu koşullara ne kadar hazır?

Varsayım Analizi

03

Kalibrasyon periyodu modelin kullanım dönemini temsil ediyor mu?

Piyasa rejimi değişebilir. Kalibrasyon verisi artık geçerli olmayabilir. Out-of-sample performans kalibrasyondan bağımsız test edildi mi?

Veri & Kalibrasyon

04

Model çıktısının hatası sermayeye, fiyata veya limite nasıl yansıyor?

Hata miktarı değil, hatanın maddiyet analizi şart. ₺100K hata bir portföyde önemsiz, başkasında kritik olabilir.

Maddiyet

05

Challenger model veya benchmark ile karşılaştırıldığında ne kadar farklı sonuç üretiyor?

Kendi içinde tutarlı bir model dış referanssız değerlendirilemez. Challenger analizi farklı metodolojinin nereye götürdüğünü gösterir. Fark açıklanamıyorsa, model riski yüksek.

Challenger & Benchmark

Bulgu Yönetimi

Bulguları nasıl sınıflandırmalı?

Her teknik gözlem otomatik olarak "bulgu" değildir. Bulgunun önem sıralaması ve model sahibine yansıtılma biçimi validasyonun etkinliğini belirler. Çok fazla yüksek öncelikli bulgu ciddiyetin dilüe olmasına yol açar.

🔴 Kritik

🟡 Yüksek

🔵 Orta

Tanım

Model kullanımını engelliyor veya sermaye/fiyat önemli ölçüde etkileniyor. Acil düzeltme olmadan model onaylanamaz.

Materyal hata veya eksiklik. Kısa vadede giderilmeli, izleme şart. Onay mümkün ama eylem planı zorunlu.

İyileştirme fırsatı. Mevcut kullanımı engellemez. Belirli döngüde gözden geçirilmeli.

Market Risk Örnekleri

PLAT kırmızı bölge veya kalıcı amber; ilgili %97,5/%99 backtesting eşiği ya da kümelenme sorunu; maddi NMRF kapsam hatası; stres dönemi seçiminin gerekçesiz olması.

Vol kalibrasyon 90+ gün güncellenmemiş; jump-diffusion eksik (TL için); NMD stres testi yapılmamış; SA-CCR floor kontrol edilmiyor.

Gözlem penceresi yenileme mekanizması iyileştirilebilir; segment bazlı pass-through modeline geçiş; convergence testi otomasyonu.

Eskalasyon

Model Risk Komitesi + CRO. Kullanım kısıtlaması veya durdurulması gündeme gelebilir.

Model sahibi + ilgili risk başkanı. Eylem planı ve tarih belirlenmeli.

Model sahibi. Yıllık validasyon döngüsünde takip.

Raporlama

Validasyon raporunun anatomisi

İyi yazılmış bir validasyon raporu teknik olarak doğru olmakla kalmaz — karar vericinin okuyabileceği ve eyleme geçirebileceği bir belgedir. Bu iki hedef arasındaki denge validasyon ekibinin yazarlık kalitesini gösterir.

📋

Yönetici Özeti (1 sayfa)

Model amacı, kapsam, validasyon tarihi. Genel görüş (onaylı / şartlı / onaysız). En kritik 3 bulgu ve eylem planı özeti. Karar vericinin bu sayfadan sonra okumaya devam etmeyebileceği varsayımıyla yazılır.

🎯

Model Amacı & Kapsam Değerlendirmesi

Modelin amacı neydi, ne için kullanılıyor, uygunluk değerlendirmesi. Portföy uyumu — model bu portföy için tasarlandı mı? Regülasyon uyumu — güncel FRTB / IRRBB çerçevesiyle örtüşüyor mu?

🔬

Metodoloji & Teori İncelemesi

Matematiksel çerçevenin değerlendirmesi. Varsayımların listelenmesi ve her birinin geçerliliği. Literatür ile karşılaştırma. Alternatif yaklaşımların tartışılması.

📊

Sayısal Test Sonuçları

Backtesting, P&L attribution, convergence, kalibrasyon testleri. Her testin yöntemi, veri kaynağı, sonuç, değerlendirme. Tablolar ve grafikler — sonuç açık okunabilmeli.

⚠️

Bulgular & Öneriler

Her bulgu: başlık, tanım, kanıt, önemi, önerim ve önerilen eylem adımları. Kritik → yüksek → orta sıralama. Model sahibinin katılıp katılmadığı notu.

✅

Validasyon Görüşü

Resmi görüş: onaylı / şartlı onaylı / onaysız. Sınırlamalar ve koşullar. Bir sonraki validasyon tarihi. İmza (bağımsız validasyon yöneticisi).

Validasyon Görüşü

Dört görüş türü ve tetikleyicileri

✓ Onaylı

Model amacına uygun, materyal bulgu yok

Tüm testler geçildi, kritik bulgu yok, orta bulgular için eylem planı kabul edildi. Sınırlama varsa raporun bir kopyasında belirtilir.

Tetikleyici: tüm kritik testler yeşil, PLAT ve backtesting geçildi, challenger uyumlu.

◈ Şartlı Onaylı

Onaylı ama belirli koşullarla

Model kullanılabilir ancak belirli koşullar altında. Koşullar: belirli sürede giderilecek bulgular, limit kısıtlaması, gelişmiş izleme, ek raporlama.

Tetikleyici: yüksek öncelikli bulgu var ama acil risk yok, model sahibi eylem planı taahhüt etti.

⚡ Onaylı (Sınırlı)

Belirli kullanımlar için onaylı

Model tüm amaçlar için değil, belirli portföy veya kullanım kapsamıyla onaylı. "Bu model yalnızca X ürünleri için onaylıdır, Y ve Z için kullanılamaz."

Tetikleyici: model bazı ürün sınıfları için uygun ama diğerleri için değil, NMRF listesi kapsamlı değil.

✗ Onaysız

Kritik hata — model kullanılamaz

Kritik bulgu giderilmeden model kullanılamaz. Mevcut kullanım derhal durdurulmalı veya kısıtlanmalı. Model Risk Komitesi kararı gerektirir.

Tetikleyici: PLAT kırmızı bölge ve hata sistemik, stres dönemi tamamen geçersiz, NMD vade kasten şişirilmiş kanıtı var.

Yönetişim

Validasyon bulgusu nasıl eskalasyon yolculuğu yapar?

Başlangıç

Validatör

Bulgu tespit edildi. Model sahibi ile tartışıldı. Gerekçe alındı.

Anlık

Orta bulgu

Model sahibi

Eylem planı hazırlanır, giderim tarihi belirlenir. Validasyon raporunda izlemeye alınır. Yıllık döngüde kontrol.

3-6 ay

Yüksek bulgu

İlgili Risk Başkanı

Resmi eylem planı onayı. İlerleme raporlaması aylık. Giderim gecikirse eskalasyon bir üst seviyeye.

1-3 ay

Kritik bulgu

Model Risk Komitesi

Komite gündemine alınır. Kullanım kısıtlaması kararı. Bağımsız inceleme olabilir. Model sahibi revizyon planı sunar.

Acil

Onaysız görüş

CRO + Yönetim Kurulu

Yönetim Kurulu Risk Komitesi bilgilendirilir. BDDK bildirimi gerekip gerekmediği hukuk ile değerlendirilir. Model derhal dondurulur.

Hemen

Pratik not: Eskalasyon yolculuğu kurumdan kuruma farklılaşır. Yapı ne olursa olsun kritik unsur: validasyon yöneticisi bulguyu belgeledi mi, tartıştı mı ve iletişim zincirini tamamladı mı? "Model sahibi kabul etmedi" geçerli bir durumdur — ama belgelenmeli ve üst yönetime bildirilmeli.

Regülasyon — Validasyonun Dayandığı Çerçeveler

Bu lens nereden geliyor? Model riski yönetimi standartları

Buraya kadar anlatılan validasyon disiplini havadan gelmez; uluslararası model riski yönetimi (MRM) standartlarına dayanır. Validatörün bunların hangisine atıf yaptığını bilmesi, hem dil birliği hem de denetçi beklentisi açısından önemlidir.

SR 11-7 (ABD Fed/OCC)

MRM'nin küresel referansı. Validasyonu üç sütuna oturtur: kavramsal sağlamlık, sürekli izleme, sonuç analizi (outcomes/backtesting). "Effective challenge" ve bağımsızlık ilkesi buradan gelir.

ECB TRIM / Internal Models Guide

AB'de içsel model onayı ve denetimi için detaylı beklentiler. TRIM (Targeted Review of Internal Models) saha incelemeleriyle bankaların IMA/IRB/IMM modellerini standardize etti.

BCBS & BDDK

Basel ilkeleri (use test, bağımsız validasyon, yönetişim) ulusal mevzuata BDDK yönetmelikleriyle aktarılır. Türkiye'de bağımsız validasyon fonksiyonu ve model envanteri beklentisi bu zincirden gelir.

İleriye dönük: AI/ML yönetişimi

Makine öğrenmesi modelleri MRM'ye yeni boyutlar ekliyor: açıklanabilirlik (explainability), veri/etiket kayması (drift), aşırı uyum (overfitting), ve model yorumlanabilirliği. Klasik validasyon üçlüsü hâlâ geçerli ama "kara kutu" modeller için kanıt çıtası daha yüksek.

Özü tek cümlede: Tüm bu çerçeveler aynı üç şeyi ister — model kavramsal olarak doğru mu, kullanımda izleniyor mu, ve sonuçları gerçeği tutuyor mu. Bu serinin her modülünde sorduğumuz "neye bakarım, nerede yanılır?" sorusu, işte bu üçlünün pratiğidir.

Özet

Bu sayfadan ne götürmelisin?

Anahtar çıkarımlar

Validasyon "ne söylüyor?" değil "ne söylemiyor?" sorusunu sorar — kapsam dışı, yakalanmayan risk, gizli varsayım yanlılığı
Beş temel soru: amaç, kritik varsayım, kalibrasyon periyodu, maddiyet, challenger farkı
Bulgu sınıflandırması: kritik (acil durdur) → yüksek (eylem planı) → orta (iyileştirme). Dilüsyon tehlikesi: her şeyin kritik olması hiçbir şeyin kritik olmadığı anlamına gelir
Rapor anatomisi: yönetici özeti → kapsam → metodoloji → testler → bulgular → görüş. Karar vericiye hitap eder
Dört görüş: onaylı / şartlı / sınırlı / onaysız. Her birinin net tetikleyicisi var
Eskalasyon zinciri belgelenmiş olmalı — "model sahibi kabul etmedi" geçerli ama üst yönetim bilgilendirmesi şart
Disiplin çerçevelere dayanır: SR 11-7 üçlüsü (kavramsal sağlamlık + sürekli izleme + sonuç analizi), ECB TRIM, BCBS/BDDK — AI/ML modelleri için kanıt çıtası daha da yüksek