Philip Tetlock ve "Süper Tahminciler": Geleceği Öngören Sıradan İnsanların Zihniyeti

Philip Tetlock Kimdir ve İşin Başlangıcı Neydi?

Philip Tetlock, Pennsylvania Üniversitesi'nde çalışan bir psikolog ve siyaset bilimcisidir. 1980'lerin ortasından itibaren yüzlerce uzmanın siyasi ve ekonomik tahminlerini topladi; yaklaşık yirmi yıl süren bu çalışma, 2005'te yayımlanan Expert Political Judgment kitabında ele alındı. Yaklaşık 28.000 tahmin içeren veri seti, sonuç olarak rahatsız edici bir bulguya işaret etti: Pek çok uzmanın tahmin başarısı, basit istatistiksel kuralların ve hatta rastgele tahminlerin yanında çok iddialı olmadı.

Ama aynı çalışma, bir ayrımı da ortaya koydu: Bazı uzmanlar diğerlerinden anlamlı ölçüde daha iyiydi ve bunun nedeni ne kadar çok bildikleri değil, nasıl düşündükleriydi.

Good Judgment Project: CIA Analistlerini Geride Bırakanlar Kimlerdi?

2011'de ABD'nin istihbarat araştırma kurumu IARPA, "ACE" (Aggregative Contingent Estimation) adı verilen bir tahmin turnuvası başlattı. Amaç, tahmin doğruluğunu artırmanın yöntemlerini sınamaktı. Birden fazla ekip yarıştı; Tetlock ve Barbara Mellers'in yönettikleri Good Judgment Project (GJP) dört yıllık süreç boyunca diğer ekiplere göre belirgin üstünlük sağladı.

Projeye katılanlar çoğunlukla gönüllülerdi: öğretmenler, mühendisler, emekliler ve farklı mesleklerden sıradan insanlar. Her yıl en iyi performans gösterenlerden yüzde ikilik bir grup "süper tahminci" olarak ayırt edildi. Kamuoyuna yansıyan anlatımlara göre bu ekip, sınıflandırılmış bilgilere erişimi olan analistleri bile bazı ölçülerde geride bıraktı. Bu karşılaştırmanın tam ayrıntıları resmi olarak açıklanmadığı için rakamları temkinle yorumlamak gerekir. Yine de GJP'nin sonuçları akademik literatürde önemli bir referans olmaya devam etmektedir.

"Kirpi" vs. "Tilki": Dünyaya Çok Pencereli Bakmanın Önemi

Tetlock, uzmanları düşünme biçimine göre iki gruba ayırmak için düşünür Isaiah Berlin'in ünlü benzetmesini ödünç aldı: Tilki birçok şey bilir, kirpi ise bir büyük şey bilir.

• Kirpiler: Tek bir büyük kuramı her duruma uygular. Çok emin ve ikna edicidirler; medyada sevilirler. Ama kuramı desteklemeyen veriyi görmezden gelme eğilimindedirler.
• Tilkiler: Birden fazla yaklaşımı ve veri kaynağını birleştirir. Daha temkinlidirler, "öte yandan" ifadesini sık kullanırlar ve görüşlerini güncellemekten kaçınmazlar.

Tetlock'un bulgularına göre tilki gibi düşünenler genel olarak daha isabetli tahminler yaptı. Bu, "çok pencereli bakış" ilkesinin temelidir: Bir olayı yalnızca bir mercekten değil, tarihsel, ekonomik, siyasi ve istatistiksel olmak üzere birkaç açıdan değerlendirin.

Olasılıkları Mikro Kırılımlarla Düşünmek (%60 Değil, %62)

Süper tahmincilerin en ayrıcı özelliklerinden biri tahminlerini ince ayrmlarla ifade etmeleridir. "Muhtemelen" ya da "yüzde 60" demek yerine "yüzde 62" gibi daha ayrıntılı bir sayı verirler. Bu bir gösteriş değildir; araştırmalar, tahminlerini daha ince ayrımla ifade edenlerin ortalamada daha isabetli olduğunu göstermiştir. Çünkü ince ayrım, düşünmenin de ince olduğunu yansıtır.

Bu mantığın arkasında şu zihinsel adımlar yatar:

1. Soruyu parçalara ayırmak: Fermi yöntemine benzer şekilde büyük bir soruyu küçük, ölçülebilir alt sorulara bölmek.
2. Dış bakış ile başlamak: Önce benzer olayların geçmişteki taban oranına bakmak, sonra özel ayrıntılara gelmek. Daniel Kahneman'ın "dış bakış" kavramı buna dayanır.
3. Küçük adımlarla güncellemek: Yeni bilgi geldiğinde tahmini tamamen değiştirmek değil, bilginin ağırlığı kadar kaymak.
4. Aşırı uçlardan kaçınmak: Yüzde 0 ve yüzde 100 yalnızca gerçekten kesin olaylar için kullanılır.

Tahminlerin doğruluğu çoğu zaman Brier skoru ile ölçülür. Skor, tahmin edilen olasılık ile gerçekleşen sonuç arasındaki farkın karesinin ortalamasıdır; düşük skor daha iyidir. Böylece hem doğru yönü hem de duyulan güven düzeyini ölçmek mümkün olur.

Süper Tahmincilerin Düzenli Bilgi Tüketim Rutinleri

Süper tahmincilerin sadece zeki olmadıkları, aynı zamanda belirli alışkanlıkları olduğu gözlemlenmiştir. Araştırmalara göre bu kişiler ortalamadan biraz daha yüksek sayısal becerilere sahip olsalar da özellikle "açık fikirli düşünme" eğilimleriyle öne çıkar. Öne çıkan rutinleri şunlardır:

• Çeşitli kaynak okumak: Farklı siyasi ve coğrafi bakışlardan haberleri takip ederler.
• Haber akışını süzmek: Gürültüyü değil, tahmin sorusuna etki eden bilgileri ayıklarlar.
• Tahmin günlüğü tutmak: Neyi neden tahmin ettiklerini yazıp sonradan kontrol ederler.
• Hatalardan ders almak: Yanlış bir tahminden sonra mazeret üretmek yerine nedenini analiz ederler.
• Ekip çalışması: Tartışarak düşünceyi sınarlar ve başkalarının kör noktalarını görür.
• Sürekli beta zihniyeti: Kendilerini her zaman "geliştirilmesi gereken bir sürüm" olarak görürler.

Bu rutinler kayıt, çeşitlilik ve geri bildirim ilkelerine dayanır; kişinin diploma ya da unvanından bağımsızdır.

İyi Bir Tahmincinin Özellikleri: Özet Liste

Tetlock ve Dan Gardner'ın 2015 tarihli Superforecasting kitabında öne çıkan özellikleri kısaca şöyle toplayabiliriz:

1. Soruları net ve ölçülebilir tanımlar.
2. Dış bakışla başlar, iç bakışla rafine eder.
3. Kanıtı haber gürültüsünden ayırır.
4. Olasılıkları ince ayrmlarla ifade eder.
5. Yeni bilgiye göre görüşünü günceller.
6. Hem aşırı hem yetersiz tepkiden kaçınır.
7. Kendi hatasını analiz eder ve öğrenir.

Sıkça Sorulan Sorular

Süper tahminciler kimlerdir? Good Judgment Project turnuvasında en yüksek isabeti gösteren, çoğu sıradan mesleklerden gelen ve istikrarlı biçimde iyi tahmin eden kişilerdir.

Geleceği tahmin etme becerisi öğrenilebilir mi? Araştırmalar, eğitim, geri bildirim ve düzenli pratikle tahmin isabetinin artırılabileceğini gösterir. Ancak sonuçların garantisi yoktur.

"Kirpi" ve "tilki" ne demektir? Kirpi tek bir büyük kuramı her yerde uygulayan, tilki ise çok sayıda bakış açısını birleştiren düşünme biçimidir.

Brier skoru nedir? Olasılık tahminlerinin isabetini ölçen bir puanlama yöntemidir; düşük skor daha iyi tahmin demektir.

Sonuç

Süper tahminciler, geleceksel bir sezgiye değil, düzenli bir zihinsel disiplinę dayanır: çok pencereden bakmak, olasılıkları ince ayrmlarla düşünmek, bilgiyi çeşitli kaynaklardan toplamak ve kendi hatalarını göz ardı etmemek. Bu alışkanlıklar sizin gündelik tahminlerinize de uygulanabilir. Kendi tahmin becerinizi geliştirmek için Tahmin Kafası'na katılabilir, görüşlerinizi kayıt altında tutabilirsiniz.

Yasal uyarı: Bu içerik bilgilendirme ve eğitim amaçlıdır; yatırım, finans veya hukuki tavsiye niteliği taşımaz. Araştırma bulguları genel eğilimleri gösterir; her kişi ya da durum için aynı sonuç garanti edilmez.

Kaynak önerileri: Philip E. Tetlock, Expert Political Judgment (2005); Tetlock ve Gardner, Superforecasting (2015); Mellers ve ark., Psychological Strategies for Winning a Geopolitical Forecasting Tournament, Psychological Science (2014); Isaiah Berlin, The Hedgehog and the Fox (1953).