Şans mı, Yetenek mi? Uzun Vadeli Başarılı Tahmincilerin Ortak Sırrı

Şans ve yetenek farkı nedir? Şans, bir sonucu etkileyen ama bizim kontrol edemediğimiz rastlantısal etkenlerin toplamıdır; yetenek ise tekrarlandığında sonucu sistematik biçimde iyileştiren beceridir. Tahminde ikisini ayırmanın tek güvenilir yolu, tek bir isabete değil, yeterince büyük bir örneklemde tutarlı performansa bakmaktır.

Bir arkadaşınızın seçim sonucunu, bir yatırımcının kur hareketini ya da bir yorumcunun maç skorunu üst üste doğru bildiğini gördüğünüzde ilk tepkiniz muhtemelen hayranlık olur. Oysa kısa vadeli başarı, çoğu zaman yetenekten çok olasılığın bir yan ürünüdür. Bu yazıda tesadüfi parlamalar ile sürdürülebilir tahmin isabeti arasındaki çizgiyi, Michael Mauboussin'in çerçevesi ve temel istatistik fikirleriyle birlikte inceliyoruz.

Michael Mauboussin'in "Şans-Yetenek Spektrumu"

Yatırım stratejisti ve yazar Michael Mauboussin, The Success Equation (Başarı Denklemi, 2012) adlı kitabında başarıyı tek bir kutuya sığdırmak yerine bir spektrum olarak ele alır. Spektrumun bir ucunda neredeyse saf şans (rulet, piyango), diğer ucunda neredeyse saf yetenek (koşu yarışı, satranç) bulunur. Çoğu gerçek hayat etkinliği, yani yatırım, spor tahmini ve siyasi öngörü bu iki ucun arasında bir yerdedir.

Mauboussin'in önerdiği pratik bir test vardır: "Bilerek kaybedebilir misiniz?" Rulette bilerek kaybetmeniz mümkün değildir, çünkü sonuç sizin becerinizden bağımsızdır. Satrançta ise isterseniz kolayca kaybedersiniz; demek ki kazanmak da beceri gerektirir. Bir etkinlikte bilerek kaybetmek mümkünse, orada yetenek payı vardır.

Spektrumun ilginç bir sonucu daha var: beceri paradoksu. Bir alanda herkes çok iyileştikçe, katılımcılar arasındaki beceri farkı daralır. Bu durumda sonuçları belirleyen şey giderek şansın payı olur. Profesyonel liglerde tek bir maçın tahmin edilmesi zor olmasının nedenlerinden biri budur. Tahmin dünyasında bu, bilgiye herkesin eriştiği alanlarda uzun vadeli üstünlüğün neden bu kadar nadir olduğunu açıklar.

Küçük Örneklem Yanılgısı: Üç İsabetli Tahmin Sizi Dahi Yapar mı?

Cevap kısaca hayır. Basit bir hesapla görelim. Her tahmini yazı-tura düzeyinde, yani yüzde 50 ihtimalle yapan biri üst üste üç doğru tahmin yapabilir; bunun ihtimali yüzde 12,5'tir. Bin kişilik bir toplulukta bu kişilerin sayısı yaklaşık 125'tir. On doğrunun art arda gelmesi daha nadirdir (1024'te bir), ama on bin kişilik bir toplulukta yine de on kişi civarında "mükemmel seri" yakalayan çıkar.

İşte büyük sayılar yasası burada devreye girer: örneklem büyüdükçe gözlenen başarı oranı, kişinin gerçek beceri düzeyine yaklaşır. Küçük örneklemde ise rastlantı, beceri gibi görünebilir. Bununla yakından ilişkili bir olgu da ortalamaya dönüştür (regresyon): olağanüstü iyi bir dönemin ardından performansın normale yaklaşması beklenir. Bu bir "düşüş" değil, şansın payının doğal olarak sönmesidir.

Bu yüzden bir tahmincinin gerçek seviyesini anlamak için şunlara bakmak gerekir:

Kaç tahmin yaptı? Otuz tahmin, üç tahminden çok daha anlamlıdır.
Tahminlerin zorluğu neydi? Zaten herkesin bildiği sonuçları doğru bilmek beceri kanıtı sayılmaz.
Olasılıkları kalibre mi? Yüzde 70 dediği olayların kabaca yüzde 70'i gerçekleşiyor mu?
Farklı konularda ve farklı dönemlerde tutarlı mı?

Sürecin Kalitesi vs. Sonucun Doğruluğu

Tek bir sonuç, kararın kalitesi hakkında şaşırtıcı derecede az bilgi taşır. İyi gerekçelendirilmiş bir tahmin yanlış çıkabilir; zayıf bir mantık ise tesadüfen tutabilir. Poker oyuncusu Annie Duke'un dile getirdiği "sonuçlama" (resulting) yanılgısı tam olarak budur: kararı, yalnızca sonucuna bakarak değerlendirmek.

Uzun vadede başarılı tahmincilerin ortak noktası, parlak sezgilerden çok disiplinli bir süreç izlemeleridir. Philip Tetlock'un yıllarca süren tahmin turnuvası çalışmaları (Good Judgment Project), bu isabetli kişilerin, yani "süper tahmincilerin" ortak alışkanlıklarını inceledi. Öne çıkan davranışlar şunlardır:

Büyük bir soruyu daha küçük, cevaplanabilir parçalara bölmek,
Başlangıçta geçmişteki benzer olayların temel oranlarına bakmak,
Yeni kanıt geldiğinde tahmini küçük adımlarla ve ego yapmadan güncellemek,
Hem lehte hem aleyhte argümanları ciddiye almak,
Tahminleri kaydedip hatalardan sistematik biçimde ders çıkarmak.

Burada ölçüm aracı da önemlidir. Brier skoru, olasılıksal tahminlerin isabetini ölçen yaygın bir yöntemdir: tahmin edilen olasılık ile gerçekleşen sonuç (0 ya da 1) arasındaki farkın karesinin ortalamasıdır. Skor ne kadar düşükse tahmin o kadar iyidir. Her soruya "yüzde 50" diyen biri 0,25 skor alır; bu, "hiçbir şey bilmiyorum" düzeyinin referansıdır. Cesur ama yanlış olmak, temkinli ve doğru olmaktan daha pahalıya patlar; bu da kişiyi dürüst olasılıklar vermeye iter.

Tahmin Kafası Liderlik Tablosunda Kalıcı Olmanın Matematiksel Yolu

Bir liderlik tablosunun tepesine çıkmak ile orada kalmak farklı işlerdir. Tabloya kısa sürede fırlayan birçok isim, şansın sağladığı bir serinin sonuçlarını yaşar; sonra ortalamaya döner. Kalıcılık ise ancak şu üç ilkeyle mümkündür:

Hacim: Yeterince çok soruda tahmin yapın. Örneklem büyüdükçe skorunuz şansın değil becerinizin aynası olur.
Kalibrasyon: Yüzde 90 dediğiniz olaylara gerçekten yüzde 90 emin olduğunuzda cesaret edin; emin değilseniz dürüstçe yüzde 60-70 aralığında kalın.
Güncelleme disiplini: Yeni bilgi geldiğinde tahmininizi yazılı gerekçeyle revize edin. Gerekçesini kaydettiğiniz bir yanılgı, ders olur; kaydetmediğiniz, tekrar eder.

Unutmayın: tek bir tahminin doğru çıkması sizi tebrik edilecek bir noktaya getirir, ama yüzlerce tahminde tutarlı bir isabet sizi güvenilir bir tahminci yapar.

Sonuç: Yetenek, Şansın Gürültüsünü Aşabilenlerin Adıdır

Tahminde şansı tamamen ortadan kaldıramazsınız; ama onu yönetebilirsiniz. Mauboussin'in spektrumu, hangi alanlarda ne kadar alçakgönüllü olmamız gerektiğini hatırlatır. Büyük sayılar yasası, küçük örneklemlerin bizi nasıl yanılttığını gösterir. Süreç odaklı düşünce ise sonuçların gürültüsü içinde doğru kararı korumamızı sağlar.

Tahmin Kafası'nda tahminlerinizi yazın, gerekçelendirin ve zaman içinde isabetinizi izleyin. İyi bir tahminci olmanın sırrı, bir kez haklı çıkmak değil; haklı çıkma alışkanlığını, kanıta ve sürece dayandırarak tekrarlamaktır.

Sıkça Sorulan Sorular

Şans ve yetenek farkı nasıl anlaşılır? Büyük bir örneklemde, farklı konularda ve dönemlerde tutarlı performans, yeteneğin göstergesidir. Tek bir isabet ya da kısa bir seri, şansla da açıklanabilir.

Tahmin başarısı şans mı? Her ikisinin de payı vardır. Pay, alana göre değişir: bilginin herkes tarafından erişilebildiği, sonuçların rastlantıya açık olduğu alanlarda şansın rolü büyüktür.

Büyük sayılar yasası tahminde neden önemli? Çünkü örneklem büyüdükçe gözlenen isabet oranı gerçek beceri düzeyine yaklaşır. Az sayıda tahmine bakarak yapılan değerlendirmeler yanıltıcı olabilir.

İyi bir tahminci olmak için ne yapmalı? Tahminlerinizi kaydedin, olasılıklarla düşünün, gerekçelerinizi yazın, yeni kanıta göre güncelleyin ve skorunuzu düzenli olarak takip edin.