Kanıt etiketleri nasıl okunur

Açılış sahnesi

Gaziantep'te bir belediye kreşi, şubat ayında bir salı akşamı. Veli toplantısı küçük sandalyelerde yapılıyor; dizler yukarıda, çay bardakları yerde. Kreş müdürü Nermin Hanım gelecek dönem için üç değişiklik okuyor. Öğle uykusunda çocuklara Mozart dinletilecek, çünkü «klasik müzik zekâyı geliştirir». Cuma günleri bir saatlik dans saati eklenecek, çünkü «dansın kaygıyı azalttığı biliniyor». Öğretmenler de her akşam on dakika duygu günlüğü tutacak, çünkü «yazmak insanı rahatlatır».

Arka sıradaki Halil, bir lisede kimya öğretmeni, elini kaldırıp üç cümlenin de nereden geldiğini soruyor. Nermin Hanım biraz bozuluyor: biri bir çocuk gelişimi sitesinden, biri bir derginin sağlık ekinden, biri bir arkadaşının önerisinden. Halil'in yanında oturan Suriyeli anne Rasha, kızının dans saatine katılıp katılmayacağını değil, katılmazsa bir şey kaybedip kaybetmeyeceğini merak ediyor ve bunu Arapça bilen bir öğretmene fısıldıyor.

Üç cümle aynı tonla okundu. Ama birinin arkasında otuz yılı aşkın bir sınama geçmişi var ve o geçmiş beklenmedik bir yerde bitiyor. Ötekilerin arkasında başka türden, başka ağırlıkta bilgiler duruyor. Toplantıdaki kişiler kurgusal; üç cümlenin her biri ise bu dersin bir kartına dönüşecek.

Bu derste ne olacak

Önceki dersin dört kartı dört kısa adla bitiyordu; o adların ne söylediği açıklanmadan kaldı. Bu derste akademinin kullandığı on bir etiketin her birini tek tek adlandıracağız. Asıl ağırlığı iki etiketin arasındaki farka vereceğiz: sınandıktan sonra tutmayan bir bulgu ile hiçbir zaman sınanmamış bir görüş. Bu fark kâğıt üzerinde ince görünür, ama bir kreşin öğle uykusu için verdiği kararda somut bir karşılığı vardır.

Sonra aynı etiketi taşıyan iki kartı karşılaştırıp etiketin neyi söylemediğini göreceğiz. Usta katmanında etiketin bir yargı olduğunu ve okurun ondan daha fazlasını okuması gereken yerleri konuşacağız.

Sıfır noktası

Bir cümleyi okurken iki soru sorulabilir: bu doğru mu, ve buna ne kadar yaslanabilirim? İlk soru çoğu zaman tek bir okurun cevaplayamayacağı kadar büyüktür. İkinci soru ise cümlenin hangi yoldan geldiğine bakarak kısmen cevaplanabilir.

Mekanizma

On bir ad, iki ayrı soru

Etiketlerin yedisi aynı soruya cevap verir: bir iddia kontrollü bir düzenekle sınandığında ne çıktı? Akademi bunlara araştırma etiketleri diyor.

Güçlü destek bir sonucun birbirinden bağımsız ekiplerce, başka başka katılımcı gruplarında yeniden bulunduğu ve meta-analizlerin de onu doğruladığı durumlar içindir. Orta düzey destek sonucun yönü tutarlı göründüğünde ama büyüklüğü ya da kimlere genellenebileceği tartışılmaya devam ederken kullanılır; önceki dersteki depresyon derlemesi bu etiketi taşıyordu. Erken bulgu birkaç kontrollü çalışmanın umut verdiği ama bağımsız bir ekibin henüz yeniden aramadığı sonuçtur. Karma bulgu çalışmaların bir kısmı bir yöne, bir kısmı öteki yöne düştüğünde kullanılır. Tekrarlanamadı ünlü bir ilk sonucun sonraki, genellikle daha kalabalık ve daha sıkı tekrarlarda ortaya çıkmadığını söyler. Çürütüldü iddianın doğrudan sınandığını ve öngördüğü ilişkinin bulunmadığını ya da tersinin bulunduğunu bildirir. Tartışmalı ise sonucun kendisinden çok yönteminin, yorumunun ya da etiğinin ciddi biçimde sorgulandığı durumlar içindir.

Geriye kalan dördü ise bilginin, ölçüm dışında, hangi kapıdan geldiğini söyler. Vaka anlatımı terapistin kendi oturumlarından birini ya da bir grubun sürecini ayrıntısıyla yazıp yayımladığı metindir. Kuramsal görüş bir şeyin neden ya da nasıl olduğuna dair önerilmiş bir açıklamadır; önceki dersteki Aristoteles ve rolden çıkma kartları buradaydı. Uzman görüşü alanda uzun süre çalışmış kişilerin, mesleki derneklerin ya da düzenleyici kurulların vardığı yargıdır. Tarihsel kayıt geçmişte bir metnin yazıldığını, bir kişinin yaşadığını ya da bir olayın gerçekleştiğini gösterir.

İkinci gruptaki etiketler ilkinin alt basamakları sayılmaz. Bir hukuk düzenlemesinin varlığını öğrenmek için deney yapılmaz; bir oturumda ne olabileceğini anlamak için vaka anlatımı vazgeçilmez bir kaynaktır. Okuru yanıltan şey bu bilgilerin varlığı değil, bir sınamanın sonucu gibi aktarılmalarıdır.

Sınandı ve tutmadı

Nermin Hanım'ın ilk cümlesinin arkasındaki geçmiş, alanın en çok anlatılan sınama öykülerinden biridir.

Bu kartta dikkat edilecek ilk şey, ilk çalışmanın neyi ölçtüğüdür: üniversite öğrencilerinin, müziği dinledikten hemen sonra, uzamsal bir görevdeki başarısı. Çocuklardan, bebeklerden, kalıcı bir zekâ artışından söz edilmiyordu. Viyana Üniversitesi'nin duyurusu, bu ilk sonucun ardından bir ABD eyaletinin valisinin 1998'de yeni doğum yapan her anneye ücretsiz bir klasik müzik CD'si verilmesini sağlayan bir düzenleme çıkardığını da aktarıyor. Bebeklere yönelik bu politika, ölçülen şeyin çok ötesine geçmişti.

İkinci şey «tekrarlanamadı» etiketinin ne söylediğidir. İlk çalışma uydurma değildi; yazarlar gördüklerini bildirdi. Ama başka ekipler, başka öğrencilerle aynı soruyu sorduğunda tablo bulanıklaştı ve onlarca çalışma bir araya getirildiğinde Mozart'a özgü bir etki kalmadı. Etiket bir hatayı değil, bilimin olağan işleyişini kaydeder: bir sonuç tek başına çarpıcıdır, tekrarlar onu ya taşır ya da küçültür.

Hiç sınanmadı

Önceki dersteki rolden çıkma kartını hatırla. Drama terapisi yazınında, oturum sonunda üstlenilen rolün bırakılması gerektiği yaygın biçimde öğütleniyor; ama bu adımın etkisini bir karşılaştırma grubuyla ölçen bir çalışma yok. Kartın etiketi bu yüzden kuramsal görüştü.

Şimdi iki etiketi birbirinden ayıralım. Tekrarlanamamış bir bulgu, okurun elinde bir bilgi bırakır: bu soru soruldu, defalarca soruldu ve beklenen cevap gelmedi. Sınanmamış bir görüş ise okurun elinde bir soru bırakır: bu henüz sorulmadı. İlki beklentiyi bir kanıta dayanarak düşürür. İkincisi beklentiyi ne yükseltir ne düşürür; yalnız kararın hangi temele dayandığını, deneyime mi, bir kurama mı, bir geleneğe mi, açıkça görmeyi ister.

Bu ayrımın pratik bir sonucu var. Sınanmamış bir öneriyi uygularken okur kendi gözlemine daha çok dikkat eder, çünkü elindeki tek veri odur. Tekrarlanamamış bir bulgunun vaadini ise yeniden dile getirmek için yeni ve güçlü bir sınama gerekir; eski cümleyi tekrarlamak yetmez.

Mozart kartı ilginç biçimde iki etiketi aynı anda barındırır. Üniversite öğrencilerinde uzamsal başarı üzerine sav sınandı ve tutmadı. Bebeklere CD dağıtan politikanın dayandığı sav ise, yani bebeklikte klasik müzik dinlemenin zekâyı kalıcı biçimde artırdığı, ilk çalışmanın hiç ölçmediği bir şeydi. Bir sav ile ondan türetilen genişletme aynı etiketi paylaşmak zorunda değildir.

Aynı etiket, farklı ağırlık

Nermin Hanım'ın öteki iki cümlesi, hareket ve yazı, ilk bakışta aynı etiketi alır. Ama aynı etiketin altında birbirinden çok farklı tablolar durabilir.

İki kart aynı etiketi taşıyor, ama okurun onlardan çıkaracağı şey farklı. Yazı kartında çok sayıda çalışma var ve sonuç yönü tutarlı, ama ortalama etki o kadar küçük ki tek bir kişinin hayatında hissedilir bir fark yaratıp yaratmayacağı belirsiz. Hareket kartında daha az çalışma var, ama terapi kümesinde etki daha belirgin ve tutarlı; öte yandan dans müdahalelerinin büyük etkisi çalışmalar arasında dağınık ve gözlemcinin değerlendirdiği ölçümlerde şişiyor.

Etiket bu farkları tek kelimeye sıkıştırır. Kartın öteki satırları, özellikle «Sonuç» ve «Not», sıkıştırılan bilgiyi geri açar. Nermin Hanım'ın «dansın kaygıyı azalttığı biliniyor» cümlesi bu iki satırın hiçbirini taşımıyor: kreşteki dört yaşındaki çocukların bu meta-analizdeki gruplardan hangisine benzediğini, dans saatinin bir terapi mi yoksa bir dans etkinliği mi olduğunu söylemiyor.

Ölçüm olmayan bilgiler de kart taşır

Bir meslek kurulunun ne beklediği de bir karttır ve etiketi farklıdır.

Bu kart bir sınamadan gelmiyor ama bu dersin sorusuna dolaylı bir cevap veriyor: alanın kendisi, uygulayıcılarından etiketleri okumayı bekliyor. Vaka anlatımı ve tarihsel kayıt da bu gruptadır; vaka anlatımının neyi taşıyıp neyi taşıyamadığı ise bu modülün sıradaki konusu.

Usta katmanı

Etiket bir karardır

Her etiket, bir kişinin ya da ekibin birikmiş kanıtı tartıp verdiği bir karardır ve bu karar tartışılabilir. Frattaroli'nin bulgusuna orta düzey destek demek de bir karardır: çalışma sayısı büyük ve sonuç olumlu olduğu için güçlü destek denebilir miydi, yoksa etki bu kadar küçükken orta düzey bile cömert mi? İki okuma da savunulabilir. Akademi böyle durumlarda etiketi seçip gerekçesini «Not» satırına yazar. Okur etiketle anlaşmıyorsa, karttaki öteki satırlar ona kendi kararını verecek malzemeyi sunar.

Etiketler zamanın içindedir. Mozart kartı 1993'te yazılsaydı «erken bulgu» olurdu; 2010'dan sonra tekrarlanamadı oldu. Bugün erken bulgu olan bir müzik ya da hareket çalışması, birkaç büyük denemeden sonra yukarı da çıkabilir, aşağı da inebilir. Bir kartın hangi yıla kadar olan çalışmalara dayandığı bu yüzden «Kimde» satırında yazılıdır.

Ortalama ve kişi

Araştırma etiketleri gruplar hakkında konuşur. Bir meta-analiz, dans ve hareket terapisinin depresyon belirtilerini ortalamada azalttığını söylediğinde, bu, her katılımcının belirtilerinin azaldığı anlamına gelmez; bazılarında belirgin bir düşüş, bazılarında hiçbir değişiklik, kimilerinde kötüleşme olabilir. Tersi de geçerlidir: ortalamada küçük bir etki, belli koşullardaki belli kişiler için büyük bir fark olabilir. Frattaroli'nin tespit ettiği düzenleyici etkenler tam olarak bu soruya, kimde daha çok, kimde daha az, yöneliktir.

Bu yüzden «bana iyi geldi» cümlesi bir araştırma etiketiyle çelişmez; ikisi farklı düzeylerden konuşur. Rasha'nın kızı dans saatinde çok mutlu olabilir; bu, meta-analizi doğrulamaz, çürütmez de.

Örneklem kimdi

Hareket kartının notunda çalışmaların çoğunun Batılı ülkelerden geldiği yazıyor. Bu bir ayrıntı değildir. Hangi müziğin tanıdık geldiği, bir bedenin başkalarının önünde nasıl hareket etmeye alışkın olduğu, dokunmanın ve göz temasının ne anlama geldiği kültürden kültüre değişir. Bir sonuç başka bir toplulukta tekrarlanmadıkça, oraya genellenip genellenemeyeceği açık bir sorudur. Etiket bunu söylemez; «Kimde» satırı söyler.

Kanıtın sınırı

On bir etiket bu akademinin kendi sistemidir. Kardeş akademilerle paylaşılan dokuz etikete iki etiket daha, vaka anlatımı ve çürütüldü, eklenerek kuruldu; tıpta kanıt kalitesini derecelendiren uluslararası sistemlerle birebir örtüşmez ve onların yerine geçmez. Bir kartın etiketini o kartı yazan seçer; yazma meta-analizinde tartışıldığı gibi, aynı kanıta iki farklı etiket önermek mümkündür.

Bu dersteki kartların kendi sınırları da var. Mozart kartı, meta-analizin kendisinden çok onun üniversite duyurusundaki özetine ve veri setinin belgesine dayanıyor; çalışmalar arasındaki farkların ayrıntısı M12-D06'da açılıyor. Yazma meta-analizi 2006'ya kadarki çalışmaları kapsıyor ve sonraki derlemelerin ne bulduğu bu dersin konusu dışında. Hareket meta-analizi 2012–2018 arasını kapsıyor; daha önceki ve sonraki çalışmaların aynı tabloyu çizip çizmediği bilinmiyor. Bu üç kartın hiçbiri çocuklarla yapılmış bir kreş ortamını doğrudan ölçmüyor.

Kendin dene

Aklında kalsın

Etiketin bir kısmı bir sınamanın sonucunu adlandırır, bir kısmı bilginin sınama dışında nereden geldiğini. İkinci gruptakiler ilkinin altında değil yanında durur; sorun ancak bir uzman önerisi ya da bir vaka bir deney sonucu gibi aktarıldığında başlar.

Mozart'ı dinlemek uzamsal başarıyı artırır savı sınandı ve tutmadı; bu bir bilgi. Rolden çıkmanın etkisi hiç ölçülmedi; bu bir soru. İlki beklentiyi düşürür, ikincisi soruyu açık tutar ve okurdan kendi gözlemine dikkat etmesini ister.

Aynı etiket farklı ağırlıklar taşıyabilir. Yazma ve hareket kartları aynı adı aldı, ama birinin etkisi küçük ve yaygın, ötekinin daha belirgin ama daha dağınık. Etiketi gördükten sonra kartın «Sonuç», «Not» ve «Kimde» satırlarını okumak, tek kelimenin sıkıştırdığını geri açar.

Sonraki derse köprü

Bu dersteki on bir etiketten biri, vaka anlatımı, hiçbir kartta görünmedi; oysa bu alanın yazınında en sık karşılaşılan metin türlerinden biri. Bir terapistin tek bir çocukla ya da bir grupla yaşadığını ayrıntısıyla anlatan yayımlanmış bir metin, bir oturumda neyin olabileceğini gösterebilir. Ama aynı metin, değişimin oturumdan mı, zamandan mı, çocuğun hayatındaki başka bir şeyden mi geldiğini ayırabilir mi? Sıradaki adım bu metin türünü tek başına ele alıyor: bir terapistin anlatısının taşıyabildiği bilgiyi, bir karşılaştırma grubunun eklediği bilgiden ayırmak.