Hayatta kalan yanlılığı

Açılış sahnesi

Bir danışmanlık görüşmesinde danışan telefonunu masaya bırakıyor. Ekranda bir sağlık forumunun sayfası açık: bir uygulama hakkında açılmış uzun bir başlık ve altında 80 paylaşım. Danışan parmağıyla aşağı kaydırıyor; paylaşımların 60'ı "benim işime yaradı" diyor, 20'si "bende bir şey değişmedi". "Dörtte üçü iyileşmiş," diyor, "bu oran bana yeter."

Sayım doğru: 60 ÷ 80 = 0,75. Paylaşımlar gerçek insanlardan geliyor ve hiçbiri uydurma değil. Yine de o sayfa, uygulamanın ne kadar işe yaradığı sorusuna cevap veremiyor, çünkü ekranda görünmeyen bir şey var: uygulamayı deneyip hiç yazmayanlar. Bu ders, bir kümeye kimlerin giremediğini sormadan o kümeden yapılan çıkarımın nasıl sistematik olarak saptığını anlatıyor.

Bu derste ne olacak

Önce yanlılığı ve onu taşıyan kavramı, görünmeyen paydayı tanımlayacağız ve forumdaki 80 paylaşımın ardındaki bin kişiyi sayacağız. Sonra kümeye girme koşulunun, seçim eşiğinin, ne zaman yanlılık ürettiğini ve ne zaman yalnız örneklemi daralttığını aynı sayılarla göreceğiz. Ardından sağlıkta bu yapının dört görünme biçimine, fark edilmemesinin nedenlerine ve ters yönüne geleceğiz. Son bölümde akademinin farklı adlarla gördüğün birkaç kavramını tek bir soruda birleştireceğiz.

Sıfır noktası

Adı yanıltıcı olabilir, çünkü buradaki "hayatta kalmak" mecazi. Koşulun ölüm olması gerekmiyor; görünür kalmak yetiyor. Bir uygulamayı bırakmamak, bir kayda girmiş olmak, ulaşılabilir olmak ya da deneyimini anlatmış olmak, hepsi kümeye girmenin koşulu olabilir.

Bu dersi modülün öteki derslerinden ayıran bir fark var. Öteki dersler zihnin işleyişindeki sapmaları anlatıyordu: bir çapaya takılmak, akla ilk geleni olası saymak, kararı sonucuna göre yargılamak. Burada ise veri zaten sapmış hâlde gelir. Zihnin katkısı yalnız eksikliği sorgulamamaktır ve bu, oldukça anlaşılır bir başarısızlıktır, çünkü olmayan bir şey dikkat çekmez.

Mekanizma

Forumun ardındaki bin kişi

Şimdi forum sayfasının ardındaki tabloyu kuralım. Uygulamayı toplam 1000 kişi denemiş olsun. Bunlardan 100'ü iyileşmiş ve 60'ı foruma yazmış; 900'ü iyileşmemiş ve yalnız 20'si yazmış. Danışanın ekranında 60 + 20 = 80 paylaşım görünüyor ve "başarı" 60 ÷ 80 = 0,75. Deneyenlerin tamamında ise iyileşme oranı 100 ÷ 1000 = 0,10.

Aradaki farkı yaratan, paylaşma olasılığının sonuca bağlı olması. İyileşenlerin 60 ÷ 100 = 0,6'sı yazmış, iyileşmeyenlerin ise 20 ÷ 900 ≈ 0,022'si. İyileşen biri, iyileşmeyen birinden yaklaşık yirmi yedi kat daha fazla yazmaya yatkın. Heyecanla yazılan bir teşekkür ile sessizce vazgeçilen bir deneme aynı sayfaya aynı sıklıkta düşmüyor ve 900 kişilik sessiz grup ekranda yalnız 20 kişiyle temsil ediliyor.

Bu sayımda kimse yalan söylemedi ve kimse bir şey saklamadı. Her paylaşım, sahibinin deneyimini doğru aktarıyor. Yanlılık tek tek paylaşımlarda değil, hangi paylaşımların var olduğunda. Forumdaki 0,75, "bu uygulamayı deneyenlerin kaçı iyileşti" sorusunun değil, "foruma yazanların kaçı iyileşti" sorusunun doğru cevabı.

Seçim eşiği: her seçim yanlılık üretmez

Forumun eşiği "yazmış olmak" ve bu eşik sonuçla güçlü biçimde ilişkili. Aynı bin kişide eşiğin sonuçla ilişkisiz olduğunu düşün: iyileşen de iyileşmeyen de aynı olasılıkla, örneğin 0,08 ile yazsın. İyileşenlerden 100 × 0,08 = 8, iyileşmeyenlerden 900 × 0,08 = 72 kişi yazar. Ekranda yine 80 paylaşım görünür, ama bu kez başarı oranı 8 ÷ 80 = 0,10 ve deneyenlerin tamamındaki oranla aynı.

İki senaryoda da ekranda 80 paylaşım var ve iki forum sayfası dışarıdan birbirinin aynısı görünüyor. Birinde küme gerçeği küçültülmüş bir ölçekte yansıtıyor, ötekinde yedi buçuk kat şişiriyor. Seçim yanlılığı dersinde (L01-P02-M02-D05) kurulan koşulun bu dersteki karşılığı bu: küme küçük diye yanlı olmaz, girme koşulu sonuçla bağlantılı olduğu için yanlı olur. Bu yüzden asıl soru "kaç paylaşım var" değil, "kim yazmaya daha yatkın".

Sağlıkta dört görünme biçimi

Aynı yapı sağlıkta dört farklı ölçekte karşına çıkar. İlki kullanıcı kitlesi: bir uygulamayı hâlâ sürdürenler, onu deneyenlerin temsili değildir, çünkü fayda görmeyenler ve yan etki yaşayanlar çoktan bırakmıştır. İkincisi anlatılar: bir deneyimi anlatanlar yaşayanların temsili değildir, çünkü anlatma kararı sonuca bağlıdır ve forum sayfası tam olarak buydu.

Üçüncüsü veri kümeleri. Bir hastane arşivinde görünmek için o hastaneye başvurmuş olmak gerekir; retrospektif kohort dersinde (L01-P02-M02-D02) bunu "kayda girmek bir seçim" başlığıyla görmüştün. Dördüncüsü literatür: yayımlanan çalışmalar yürütülenlerin temsili değildir, çünkü olumlu ve çarpıcı sonuçlar daha kolay yayımlanır. Yayın yanlılığı, hayatta kalmanın literatür düzeyindeki biçimidir. Dördünde de yapı aynı: bir eşik var, eşiği geçemeyenler görünmüyor ve eşiği geçmek sonuçla ilişkili.

Neden fark edilmiyor

Bu yanlılığı fark etmeyi zorlaştıran ilk şey, olmayan şeyin dikkat çekmemesi. Bir listede bulunanı görmek kolaydır; bulunmayanı fark etmek ise ayrı bir zihinsel iş ister ve kimse ondan istemedikçe o iş yapılmaz. İkinci neden erişilebilirlik sezgisi dersindeki mekanizma: elde olan örnekler akla gelir, olmayanlar gelmez ve "aklıma gelmedi" ile "yok" birbirinden ayırt edilmez.

Üçüncü neden en sinsi olanı. Görünen küme kendi içinde tutarlı bir hikâye anlatır ve eksik bir parça olduğuna dair hiçbir işaret taşımaz, çünkü işaret de eksik parçayla birlikte gitmiştir. Forumdaki 80 paylaşım birbirini doğruluyor: aynı uygulama, benzer anlatımlar, çoğunlukla olumlu sonuç.

Tanımın son cümlesini forum sayılarıyla okuyabilirsin. Bin kişinin tamamında iyileşme 0,10 ve bu grup oldukça karışık bir tablo verir; forumda ise 0,75 ve tablo çok daha tek sesli. Seçim, gürültüyü değil sessizliği ayıkladı ve geriye daha düzgün bir hikâye bıraktı. Bu yüzden beklenmedik ölçüde tutarlı bir bulgu kümesi, rahatlatıcı değil uyarıcı bir işaret olabilir; yayın yanlılığında küçük çalışmaların grafiğin bir yanında toplanması da aynı mantıkla okunur.

Ters yönü: yalnız kaybedenleri görmek

Aynanın daha az konuşulan yüzünde yalnız kötü sonuçlar kaydedilir. Kendiliğinden yan etki bildirim sistemleri böyle çalışır: bildirim, bir sorun yaşandığında yapılır ve sorun yaşamayanlar sisteme hiç girmez. Bu kümede bir uygulamanın yan etki profili, gerçek sıklığından çok daha kötü görünebilir; payda yine yoktur, ama bu kez ters yönde.

Kurgu bir sayıyla bak: sisteme bir uygulamayla ilgili 50 bildirim gelmiş olsun. Uygulamayı kullananlar 5.000 kişiyse bildirim oranı 50 ÷ 5.000 = 0,01; kullananlar 500.000 kişiyse 50 ÷ 500.000 = 0,0001. Pay aynı, sonuç yüz kat farklı ve sistem paydayı bilmiyor. Bu, zarar sinyallerinin düşük bir eşikle toplanmasının yanlış olduğu anlamına gelmez; bu kasıtlıdır ve doğrudur. Yalnız toplanan verinin oran hesabı için kullanılamayacağı ayrıca bilinmelidir.

Bu akademideki birleşme

Bu ders, akademide farklı adlarla karşılaştığın birkaç kavramın aynı yapının farklı yüzleri olduğunu gösteriyor. Aşağıdaki tabloda her biri, kümeye girişin başka bir noktasında duruyor.

Altısı da tek bir soruyla yakalanıyor ve bu, akademinin belki en ekonomik sorusu: bu kümede olmayanlar kimler ve neden yoklar? Forum sayfasında cevap 920 kişiydi, bunların 880'i iyileşmemişti ve yazmamalarının nedeni tam olarak iyileşmemiş olmalarıydı.

Klinik gerçeklik

Bir veri kümesine ya da bir anlatı derlemesine baktığında önce bu kümeye girmek için hangi koşulun gerektiğini sor. Sonra o koşulun incelenen sonuçla ilişkili olup olmadığına bak: ilişkiliyse yanlılık vardır, değilse yalnız küme küçülmüştür. Kümeye girmeyenler hakkında herhangi bir bilgi, bir sayı ya da bir tahmin olup olmadığını ara; forum örneğinde her şeyi değiştiren tek sayı, uygulamayı deneyenlerin toplamıydı.

Kümenin beklenmedik ölçüde tutarlı olup olmadığına da dikkat et, çünkü seçim tutarlılığı artırır. Son olarak verinin hangi amaçla toplandığını sor: oran hesabı için mi, yoksa bir sinyali erken yakalamak için mi? Aynı veri birinci amaçta işe yaramazken ikincisinde çok değerli olabilir. Açılıştaki danışanla konuşurken paylaşımları küçümsemen gerekmez; "bunları yazmayanlar kaç kişi olabilir" sorusunu birlikte sormak, kararın kendisine bırakılmasını sağlar.

Kendini sına

1. Hayatta kalan yanlılığını tanımla. Adı neden yanıltıcı olabilir?
2. Bu ders modüldeki öteki derslerden hangi bakımdan farklı?
3. Bir uygulamayı 2.000 kişi denemiş; 300'ü iyileşmiş ve bunların 150'si yazmış, 1.700'ü iyileşmemiş ve 50'si yazmış. Forumdaki başarı oranı ve gerçek oran nedir?
4. Aynı 2.000 kişide herkes 0,05 olasılıkla yazsaydı forumdaki oran ne olurdu? Bu, seçim eşiği hakkında ne söylüyor?
5. Sağlıkta dört görünme biçimini yaz ve her birinde eşiğin ne olduğunu belirt.
6. Tamamlanmış anlatı yanılsaması nedir? Seçim neden tutarlılığı artırıyor?
7. Bir bildirim sistemine 30 bildirim gelmiş. Kullanan sayısı 3.000 ve 300.000 olsaydı oranlar ne olurdu? Bu veri neden oran hesabı için uygun değil?
8. Akademideki altı kavramı birleştiren soru nedir?

Bir sonraki derse köprü

Bu derste yanılma, görülmeyen veriden geliyordu; eksik olan kümeye hiç girmemişti. Sıradaki derste veri eksiksiz ama ona sonradan bakılıyor ve sonucu bilmek, geçmişin nasıl hatırlandığını değiştiriyor. Orada belleğin her hatırlamada yeni bilgiyle uyumlu biçimde yeniden kurulmasını ve karar anındaki gerçek belirsizliğin, sonuç öğrenildikten sonra neden hatırlanamaz hâle geldiğini göreceksin.