Gözlemsel çalışma ve klinik deney

Açılış sahnesi

İki araştırma ekibi aynı soruyu soruyor: bu bitkiyi düzenli kullananlarda belirli bir sorun daha az mı görülüyor?

Birinci ekip binlerce kişiyi yıllarca izliyor ve kimin ne kullandığını kaydediyor. Sonuçta kullananlarda sorunun belirgin biçimde daha seyrek görüldüğünü buluyor.

İkinci ekip katılımcıları kurayla ikiye ayırıyor; bir gruba ürünü veriyor, diğerine benzeri bir hazırlık veriyor ve kimin hangi grupta olduğunu kimseye söylemiyor. Sonuçta iki grup arasında anlamlı bir fark bulamıyor.

İki çalışma da düzgün yapılmış olabilir ve iki sonuç da gerçek olabilir.

Aradaki fark, ekiplerin bulduğu şeyden değil, sordukları sorunun yapısından geliyor.

Birinci ekip kimin bu ürünü kullandığını gözlemledi. İkinci ekip kimin kullanacağına kendisi karar verdi.

Bu tek farkın nereye kadar uzandığını göreceğiz.

Bu derste ne olacak

Önce iki çalışma biçimini tanımlayacağız ve aralarındaki tek yapısal farkı netleştireceğiz.

Sonra gözlemsel çalışmaların neden bu kadar çok kullanıldığını ve neyi iyi yaptığını konuşacağız; bu çalışmalar zayıf akraba değil.

Ardından karıştırıcıların gözlemsel düzende neden tamamen temizlenemediğini göreceğiz.

Sonra kuranın tam olarak ne yaptığına ve körlemenin neyi koruduğuna bakacağız.

Kapanışta iki çalışmanın çeliştiği durumlarda ne yapılacağını ve klasik metnin ortak etken düşüncesini konuşacağız.

Bu derste geçen durumların hiçbiri gerçek değildir; hepsi bir kavramı görünür kılmak için yazılmış kurgulardır.

Sıfır noktası

İki tanımı yan yana koyalım, çünkü aralarındaki fark tek bir sözcükte toplanıyor.

Fark burada bitiyor gibi görünüyor ama asıl sonuçları bundan sonra başlıyor.

Çünkü kimin ne alacağına karar veren şey, aynı zamanda o kişilerin başka hangi bakımlardan birbirinden ayrıldığını da belirliyor.

Mekanizma — gözlemsel çalışma neden vazgeçilmez

Şimdi bir yanlış anlamayı baştan kapatalım: gözlemsel çalışma zayıf bir çalışma değil.

Çok sayıda önemli soruda deney yapmak mümkün değil ve bazılarında mümkün olsa bile kabul edilemez.

Bir zararlı maddeye kimlerin maruz kalacağına kura ile karar verilemez. Yirmi yıl boyunca sürdürülecek bir beslenme düzenine kimse rastgele atanamaz. Nadir görülen bir yan etkiyi yakalamak için gereken kişi sayısına hiçbir deney ulaşamaz.

Bu soruların hepsinde gözlem tek yoldur ve verdiği bilgi gerçektir.

Mekanizma — ayarlama nereye kadar ulaşır

Gözlemsel çalışmalar bu sorunu biliyor ve karşısına bir araç koyuyor: bilinen farkları hesapta düzeltmek.

Yaş farklıysa yaşa göre düzeltiliyor. Sigara kullanımı farklıysa ona göre düzeltiliyor. Gelir, eğitim ve önceki hastalıklar aynı şekilde hesaba katılabiliyor.

Bu düzeltme gerçek bir iyileştirme sağlıyor ve iyi yapılmış çalışmalarda kapsamlı biçimde uygulanıyor.

Ama bir sınırı var ve o sınır matematiksel değil: düzeltme yalnızca ölçülmüş olan şeyler için yapılabiliyor.

Usta katmanı — kura ve körleme neyi çözer

Şimdi deney tarafına geçelim ve tek bir hareketin ne yaptığını görelim.

Bunun neden bu kadar önemli olduğunu görmek için ayarlamanın sınırına dönelim.

Ayarlama yalnızca ölçülen farkları kapatabiliyordu. Kura ise ölçülenleri de ölçülmeyenleri de aynı anda dağıtıyor, çünkü hiçbirine bakmıyor.

Yani kuranın gücü, ne yaptığından değil, neye bakmadığından geliyor.

Kura kimin ne alacağını çözüyor ama kimin ne bildiğini çözmüyor.

Şimdi iki çalışmanın çeliştiği duruma dönelim, çünkü açılıştaki sahne tam olarak buydu.

Yaygın hatalar ve yanlış bilinenler

Aklında kalsın

İki düzen arasındaki tek yapısal fark, kimin ne alacağına kimin karar verdiğidir; geri kalan her şey bu farkın sonucudur.

Gözlemsel çalışmalar gerçek yaşamı, uzun süreleri ve nadir sonuçları gösterir ve pek çok soruda tek yoldur.

İstatistiksel düzeltme yalnızca ölçülmüş farkları kapatır; ölçülmemiş bir fark hesaba hiç girmez.

Rastgele atama ölçülen ve ölçülmeyen bütün farkları aynı anda dağıtır, çünkü hiçbirine bakmaz; gücü tam olarak buradan gelir.

Körleme katılımcıyı, uygulayan kişiyi ve ölçen kişiyi kapsar; bilgi hangi tarafta kalırsa sonucu o taraftan etkiler.

Sonraki derse köprü

Buraya kadar tek bir çalışmayı okuduk ve nasıl kurulduğuna baktık.

Gerçek hayatta ise bir konuda tek bir çalışma bulunmuyor. Onlarca çalışma bulunuyor ve bir kısmı bir yönü, bir kısmı başka bir yönü gösteriyor.

Bu durumda hangi çalışmanın haklı olduğunu seçmek en kötü yoldur, çünkü seçen kişi genellikle kendi beklediğini seçer.

Sonraki ders bu yığını tek tek okumadan değerlendirmenin yolunu anlatıyor: sistematik derleme ve meta-analiz. Orada göreceğin şey, çalışmaları birleştirmenin nasıl bir yöntem hâline geldiği ve birleştirmenin kendisinin nerede bozulabildiği.