AI yatırımının ROI’sini neden ölçemiyorsunuz? Çünkü simülasyon yapmıyorsunuz

Danışmanlık raporlarının en sık tekrarladığı cümle şu: “Şirketler AI’a yatırım yapıyor ama beklenen getiriyi alamıyor.” Tech harcaması var, sonuç yok. Yönetim kurulu soruyor: bu AI yatırımı ne kazandırdı? Ve çoğu zaman, kimse net bir cevap veremiyor.

Bu, bir ölçüm sorunu gibi görünür: “doğru metrikleri takip etmiyoruz.” Ama daha derin bir sorun var. ROI ölçülemiyor çünkü ölçülecek bir zemin yok. AI sistemi, gerçek operasyonel bağlamda ne yapacağı hiç simüle edilmeden üretime alınıyor; dolayısıyla değeri ne öncesinde tahmin edilebiliyor ne de sonrasında bir referansa göre kıyaslanabiliyor.

ROI bir karşılaştırmadır: “bu kararla ne oldu, bu karar olmasaydı ne olurdu?” Bu karşılaştırmayı yapabilmek için, bir referans noktası — bir baseline, bir karşı-senaryo — gerekir. Simülasyon yapılmadığında, bu referans noktası hiç oluşmaz. Ve referans noktası olmadan, ROI bir his olarak kalır, bir ölçü olarak değil.

Doğru soru “hangi metrikleri takip edelim?” değildir. Doğru soru şudur:

Bu AI’ın yarattığı değeri ölçmek için, neyle kıyaslayacağımız bir referans senaryomuz var mı?

ROI bir karşılaştırma gerektirir

Bir AI yatırımının getirisini ölçmek, tek başına bir sonuca bakmak değildir. “AI’dan sonra satış arttı” cümlesi, bir ROI kanıtı değildir — çünkü satış başka nedenlerle de artmış olabilir. Gerçek ROI, “AI’lı sonuç” ile “AI’sız sonuç” arasındaki farktır.

Bu fark, bir karşı-senaryo gerektirir: AI olmasaydı ne olurdu? İşte burası, çoğu şirketin tökezlediği yerdir. Karşı-senaryo kendiliğinden var olmaz; ya bir kontrol grubuyla ölçülür, ya da bir simülasyonla kurgulanır. Hiçbiri yapılmazsa, elde sadece “AI’lı sonuç” kalır ve bunun ne kadarının AI’dan geldiği bilinemez.

Bu yüzden ROI ölçememek, çoğu zaman metrik eksikliği değil, karşılaştırma zemini eksikliğidir. Metrik vardır; ama neyle kıyaslanacağı yoktur.

Simülasyon, kararı üretime almadan değerlendirir

Karar simülasyonu, bu eksik zemini iki yönde doldurur: öncesinde tahmin, sonrasında kıyaslama.

Öncesinde: AI sistemi üretime alınmadan önce, geçmiş veriler ve senaryolar üzerinde çalıştırılır. “Bu sistem geçen yıl bu kararları alsaydı, ne önerirdi ve sonuç ne olurdu?” Bu, yatırımın beklenen değerini, gerçek para riske girmeden tahmin etmeyi sağlar. Yönetim kurulu, “bu ne kazandıracak?” sorusuna, bir umut değil, bir simülasyon temelli tahminle cevap alır.

Sonrasında: Sistem üretimdeyken, simülasyon bir karşı-senaryo üretmeye devam eder. “Bu hafta AI bu kararı önerdi; AI olmasaydı, eski yöntemle ne karar verilirdi ve fark ne?” Bu, ROI’yi sürekli, somut ve kıyaslanabilir kılar.

Simülasyon olmadan, AI bir kara kutudur: içine yatırım girer, dışına “belki işe yaradı” çıkar. Simülasyonla, AI ölçülebilir bir karar katmanı olur.

“Tahmin edilemeyen” ROI’nin gizli maliyeti

ROI’yi ölçememenin sadece raporlama değil, karar maliyeti de vardır.

ROI gösterilemediğinde, AI yatırımları savunmasız kalır. İlk bütçe sıkışmasında, “getirisini kanıtlayamadığımız” proje olarak kesilir — değer üretiyor olsa bile. Tersine, değer üretmeyen bir AI projesi, ROI ölçülmediği için aylarca devam edebilir; kimse onu sorgulayacak bir zemine sahip değildir. Her iki durumda da, ölçüm zemininin yokluğu yanlış karara yol açar.

Simülasyon temelli ROI, bu kararları sağlıklı kılar: değer üreten proje korunur, üretmeyen erken durdurulur. Çünkü artık karar, “his” üzerine değil, kıyaslanabilir bir referans üzerine kuruludur.

Simülasyon kesinlik değil, kıyas zemini verir

Bir beklenti ayarı gerekir: simülasyon, ROI’yi kuruşu kuruşuna tahmin etmez. Geçmiş veriye dayalı bir karşı-senaryo, gelecek için kesinlik vermez; insan davranışı ve dış koşullar belirsizdir.

Ama simülasyonun değeri kesinlikte değil, kıyas zemini kurmasındadır. “AI’sız ne olurdu?” sorusuna yaklaşık ama gerçekçi bir cevap vermek, hiçbir cevap vermemekten çok daha değerlidir. Simülasyon, ROI’yi bir kesin sayıya değil, savunulabilir bir aralığa ve net bir kıyasa dönüştürür. Bu, GDP’nin “kanıtlayamadığını vaat etme” ilkesine uygun, dürüst bir ROI yaklaşımıdır.

Sonuç

“AI’a yatırım yaptık ama ROI’yi gösteremiyoruz” cümlesi, bir ölçüm aracı sorunu gibi görünür ama değildir. ROI ölçülemiyor çünkü ölçülecek bir kıyas zemini yok: AI sistemi, ne yapacağı simüle edilmeden üretime alındığı için, değeri ne öncesinde tahmin edilebiliyor ne de sonrasında bir karşı-senaryoyla kıyaslanabiliyor.

Karar simülasyonu, bu eksik zemini kurar: öncesinde geçmiş veride çalıştırarak beklenen değeri tahmin eder, sonrasında “AI olmasaydı ne olurdu?” karşı-senaryosuyla ROI’yi sürekli kıyaslanabilir kılar. Kesinlik değil, savunulabilir bir kıyas verir.

Doğru soru şudur:

AI’ın ROI’sini hangi metrikle ölçeceğimizi mi tartışıyoruz, yoksa onu neyle kıyaslayacağımız bir referans senaryomuz olup olmadığını mı?