Sonuç yanlılığı

Açılış sahnesi

Bir aile sağlığı merkezinde aynı hafta, aynı hekime iki hasta geliyor. İkisi de otuzlu yaşlarında, ikisinin de birkaç gündür süren bir baş ağrısı var. Muayene ikisinde de normal: ateş yok, nörolojik bulgu yok, ağrının karakteri tanıdık bir gerilim tipi baş ağrısına benziyor, uyarıcı işaretlerin hiçbiri yok. Hekim ikisine de aynı şeyi söylüyor: şu an görüntüleme gerekmiyor, şu belirtilerden biri çıkarsa hemen gelin, iki hafta sonra kontrol. Bu açıklamayı iki hastanın dosyasına aynı cümlelerle yazıyor.

Birinci hastanın ağrısı on günde geçiyor ve dosyası kapanıyor. İkinci hastada üç ay sonra, o gün hiçbir bulgu vermeyen nadir bir tanı konuyor. Birkaç hafta sonra merkezin vaka toplantısında ikinci dosya açılıyor ve biri "Keşke o gün görüntüleme isteseydik" diyor. Masadaki herkes başını sallıyor; birinci dosyayı ise kimse hatırlamıyor bile. Aynı bilgiyle, aynı gerekçeyle verilmiş iki karardan biri "isabetli", öteki "hatalı" sayılmaya başladı ve iki karar arasında sonuç dışında hiçbir fark yok.

Bu derste ne olacak

Önce karar ile sonuç arasındaki ilişkiyi kurup ikisinin neden iki ayrı eksen olduğunu göreceğiz. Sonra bu iki eksenin oluşturduğu dört bileşime ve yanlış ders üreten ikisine bakacağız. Ardından asıl zararın neden adaletten çok öğrenmede olduğunu, yani karar verenin deneyiminin nasıl yanlış yöne biriktiğini konuşacağız. Son bölümde bir kararı sonuçtan bağımsız değerlendirmenin yolunu ve bu akademinin bazı ilkeleriyle bağını kuracağız.

Sıfır noktası

İki tanım arasındaki köprüyü kuran gözlem basit ama sonuçları geniş: sağlıkta sonuçlar olasılıklıdır. İyi bir karar kötü bir sonuç verebilir, kötü bir karar da iyi bir sonuç. Bu bir istisna değil, alanın yapısı. Aynı belirtilerle gelen yüz kişiye aynı doğru karar uygulandığında bile, aralarından birkaçında o gün görülemeyen bir süreç ilerleyecektir.

Açılıştaki iki hasta arasındaki farkın tamamı bu alanda duruyordu. Hekimin kontrol edebildiği her şey, yani sorular, muayene, uyarıcı işaretlerin taranması ve hastaya verilen geri dönüş koşulları, iki dosyada aynıydı. Kontrol edemediği şey, ikinci hastanın içinde o gün hiçbir iz bırakmadan ilerleyen süreçti.

Mekanizma

Dört bileşim

Karar kalitesi ile sonuç iki bağımsız eksen olduğunda dört bileşim çıkıyor. İyi bir karar iyi sonuç verdiğinde övülür ve övgü haklıdır; kötü bir karar kötü sonuç verdiğinde eleştirilir ve eleştiri de haklıdır. Bu iki bileşimde değerlendirme ile gerçek örtüşür ve sorun yoktur.

Sorun kalan iki bileşimde. İyi bir karar kötü sonuç verdiğinde eleştirilir ve eleştiri haksızdır; açılıştaki ikinci dosya buydu. Kötü bir karar iyi sonuç verdiğinde ise övülür ve övgü haksızdır. Bu ikisi ters yönlerde zarar veriyor: birincisi doğru bir uygulamayı terk ettiriyor, ikincisi yanlış bir uygulamayı pekiştiriyor. Üstelik ikinci türü fark etmek çok daha zor, çünkü iyi bir sonuç hiçbir incelemeyi tetiklemez ve kimse "neden iyi gitti" diye toplantı yapmaz.

Kartın son cümlesi önemli: uzmanlık bu yanlılığa karşı koruma sağlamıyor. Vaka toplantısındaki herkes deneyimli bir hekimdi ve herkes aynı yöne kaydı. Yanlılık bilgisizlikten değil, sonucu bilmenin kendisinden doğuyor; sonuç bir kez görüldükten sonra onu görmemiş gibi düşünmek çok güç.

Asıl zarar: öğrenme ters yöne gidiyor

Sonuç yanlılığı ilk bakışta bir adalet meselesi gibi görünüyor: haksız yere suçlanan bir hekim. Asıl zarar ise başka yerde, karar verenin kendi deneyiminden öğrenme biçiminde. Bir hekim kararlarından öğrenir, ama neyi öğrendiği hangi sonuçların geri döndüğüne bağlıdır. Sonuçlar şans payı taşıdığı için bu öğrenme, düzeltilmezse, sistematik olarak sapar.

Sapmanın ilk yönü aşırı temkin. Açılıştaki hekim bir sonraki benzer baş ağrısında görüntüleme istemeye çok daha yatkın olacak; o tek dosya, ona "izlemek tehlikelidir" dersini verdi. Bu kural yerleşirse, uyarıcı işareti olmayan yüzlerce kişi gereksiz bir tetkikten geçer ve bu tetkikler kendi rastlantısal bulgularını, kendi ek incelemelerini ve kimi zaman aşırı tanı dersinde (L01-P05-M01-D04) göreceğin türden gereksiz tanıları üretir.

İkinci yön ters işliyor: kötü bir karar iyi sonuç verdiğinde uygulama doğrulanmış sayılır. Sonradan oldu yanılgısı dersinde (L01-P03-M02-D01) bir olayın ardından geleni onun sonucu sanmayı görmüştün; burada aynı yanılgı karar verenin kendi geri bildiriminde çalışıyor. Üçüncü yön de erişilebilirlik sezgisi dersindeki son vaka etkisiyle birleşiyor: nadir ama çarpıcı bir kötü sonuç bellekte yüzlerce sessiz iyi sonuçtan daha ağır basar ve etkisi çarpanlaşır.

Bu döngüyü sinsi yapan, içinde hiçbir sahte adım olmaması. Açılıştaki hekimin "izlem tehlikelidir" dersi gerçek bir hastadan, gerçek bir tanıdan geldi. Yanlış olan, tek bir gözlemden bir kural çıkarılması ve o kuralın karşısına konması gereken yüz sessiz dosyanın hiç sayılmaması.

İyi kararı nasıl değerlendiririz

Bir kararı sonuçtan bağımsız değerlendirmek, bütün soruları karar anına taşımak demek. İlk soru o anda elde olan bilginin ne olduğu; karar anında bilinen, sonradan öğrenilenden titizlikle ayrılmalı. Sonra o bilgiyle hangi seçeneklerin makul olduğu ve seçilen seçeneğin o bilgiyle uyumlu olup olmadığı sorulur. Son olarak sürecin kendisine bakılır: alternatifler düşünüldü mü, uymayan bulgular kaydedildi mi, hastaya ne zaman geri dönmesi gerektiği söylendi mi?

Bu dört sorunun ardından en belirleyici olanı gelir: kötü sonuç, karar anında bilinebilir miydi? Bilinemezse karar iyiydi ve sonuç kötüydü; bunlar iki ayrı cümledir ve ikisi de doğrudur. Bilinebilirse, yani o gün bir uyarıcı işaret atlanmışsa ya da bir soru hiç sorulmamışsa, karar gerçekten kusurluydu ve bu, üzerinde çalışılacak ayrı bir bulgudur.

Açılıştaki toplantı bu sınavı yapsaydı, ikinci dosyayı birinci dosyanın yanına koyarak başlardı. İki dosyada aynı sorular sorulmuş, aynı muayene yapılmış, aynı geri dönüş koşulları yazılmıştı; ikinci hastanın o gün taşıdığı ve atlanmış bir işaret yoktu. Sınavın cevabı "bilinemezdi" ve bu cevap, doğru kuralı korur.

Kartın notu yapısal bir önlem öneriyor: dosyayı inceleyen kişi, mümkünse sonucu bilmeden karar anındaki kayda bakmalı. Bu, çalışmalarda değerlendiricinin hangi grubu incelediğini bilmemesiyle aynı mantık. Bir yakın akraba da var: geri görüş yanlılığı dersinde (L01-P03-M03-D07) sonucu öğrendikten sonra karar anını yanlış hatırlamayı göreceksin. Sonuç yanlılığı bir yargı sapması, geri görüş bir bellek sapması; ve geçmişi yanlış hatırlayan kişi, kararı daha kolay haksız yere kusurlu bulur.

Bu akademideki karşılığı

Sonuç yanlılığı, bu akademinin birkaç ilkesini aynı anda açıklıyor. Tekil vakaların neden kanıt sayılmadığını açıklıyor: tek bir iyi ya da kötü sonuç, kararın kalitesi hakkında neredeyse hiç bilgi taşımaz. Karşılaştırma grubunun neden gerektiğini açıklıyor: şans payını ayırmanın tek yolu, aynı kararın çok sayıda kişide ve karşılaştırmalı olarak izlenmesidir. "Bende işe yaradı" tanıklığının neden yetmediğini de açıklıyor, çünkü tanıklık tek bir sonuçtan bir karara geri okur.

Tersten okunduğunda kılavuzların neden süreç önerdiğini de gösteriyor. Bir kılavuz sonucu garanti etmez; karar kalitesini standartlaştırır. Kılavuza uygun bir kararın ardından kötü bir sonuç gelebilir ve bu, kılavuzun yanlış olduğunu tek başına göstermez. Kılavuzu değiştirmenin yolu tek bir dosya değil, aynı kararın birçok kişideki sonuçlarını sayan bir karşılaştırmadır.

Klinik gerçeklik

Bir kararı geriye dönük değerlendirmen gerektiğinde, ister bir meslektaşının dosyası ister kendi geçmiş kararın olsun, önce kendine sonucu bilip bilmediğini sor; biliyorsan yanlılık zaten devrededir ve bunu hesaba katman gerekir. Sonra karar anındaki kayda dön ve o gün bilinenleri, sonradan öğrenilenlerden ayrı bir listeye yaz. Kötü sonucun o listeden öngörülüp öngörülemeyeceğine bak; öngörülemiyorsa kararı değil, yalnız sonucu üzülerek kaydet.

Son adım öğrenme tarafını koruyor. Tek bir dosyadan bir kural çıkarmak üzereysen, aynı kararla sonuçlanan ve sessizce kapanan dosyaları da say. Bir kural ancak birçok sonucun toplamından değişmeli; tek bir çarpıcı sonuç, arkasındaki yüz sessiz dosyayı silmeye yetecek kadar bilgi taşımaz. Bir danışan kendi geçmiş kararı için "o zaman başka türlü yapmalıydım" dediğinde de aynı soruları birlikte sormak, suçluluğu çoğu zaman gerçek bir derse dönüştürür.

Kendini sına

1. Sonuç yanlılığını tanımla. Karar kalitesi neye bakılarak değerlendirilir?
2. Şansın payı nedir? Sağlıkta neden büyük?
3. Dört bileşimi yaz. Hangi ikisi yanlış ders üretiyor ve hangi yönde? Hangisini fark etmek daha zor, neden?
4. Açılıştaki toplantı bilinebilirlik sınavını nasıl yapmalıydı? Sınavın cevabı neydi?
5. Asıl zarar neden adaletten çok öğrenmede?
6. Bozuk geri bildirim döngüsünün üç yönünü yaz. Her birinde bir adım gerçek bir gözlemden geliyorsa, döngüyü bozuk yapan ne?
7. Sonuç yanlılığı ile geri görüş yanlılığını ayır. Biri ötekini nasıl besliyor?
8. Kılavuzlar neden sonucu değil süreci standartlaştırıyor?

Bir sonraki derse köprü

Bu derste sonuç görülüyordu; görünmeyen, sonucun içindeki şans payıydı. Sıradaki derste bazı sonuçlar hiç görülmüyor, çünkü onları taşıyanlar sayılan kümeye hiç giremiyor. Orada kümeye giremeyenlerin sayısını ve özelliklerini, yani görünmeyen paydayı, bir öğenin görünür olması için aşması gereken eşiği ve eldeki verinin kendi içinde tutarlı olmasının neden eksiksiz olduğu anlamına gelmediğini göreceksin.