Bilime ne zaman güvenmeli? PERLS çerçevesiyle kanıtı tartın.

Bilim haberlerinde tavsiyeler sık sık yön değiştiriyor: bir süre yumurta zararlı, sonra faydalı; kırmızı şarap kalbi koruyor mu, yoksa değil mi? Karanlık çikolata, düşük yağlı diyetler, ayakta çalışma masaları, hatta bir pandemide maskeler… Öneriler değiştikçe “çalışmalar gösteriyor” sözüne duyulan güven aşınıyor. Yeni bir makale, sorunun bilimden değil, ön sonuçları nihaiymiş gibi duyurup uygulamaya koymaktan kaynaklandığını söylüyor ve kanıt olgunluğunu sınıflamak için PERLS adlı bir çerçeve öneriyor.

Sorun: Geçici sonucu “nihai” sanmak

Bilimde kanıt birikir; erken bulgular yeniden denenir, bazıları ayakta kalır, bazıları elenir. Buna rağmen gazeteciler, savunucular, pazarlamacılar ve hatta bazı araştırmacılar, zayıf erken aşama bulgularla yıllarca süren çalışmaların süzgecinden geçmiş birikmiş kanıtı aynı özgüvenle sunabiliyor. Siyasetçiler, eğitimciler ve halk sağlığı yöneticileri de umut verici bir ilk sonuca dayanıp “kanıta dayalı” diye politika yapıyor; bilim ilerledikçe o politika bekleneni vermiyor.

PERLS: Kanıt olgunluğunu sınıflamak

Makale, karar vericilere “bilimi takip et” çağrısının her düzeyde neye izin verdiğini görmek için PERLS (Policy Evidence Readiness Levels) çerçevesini öneriyor. Basit akıl yürütme kuralı şu: Bir iddia tek bir çalışmaya mı, çok sayıda çalışmaya mı dayanıyor, yoksa arada bir yerde mi? Eğer tek çalışma ya da birkaç çalışmaysa, sonucu “mümkün” sayın; “kanıtlanmış” değil. Aynı sonuç farklı laboratuvarlarda, farklı araştırma ekiplerinde ve gerçek hayat koşullarında, farklı insan gruplarıyla tekrar tekrar görülüyorsa güven artar. Tıpta bu süreç, meta-analizler, sistematik derlemeler ve saygın kurumların kılavuzlarıyla resmileşmiştir.

• Hızlı kontrol listesi: Bir bilim iddiasını tartarken

• - Kaç bağımsız çalışma aynı sonuca ulaşıyor?

• - Farklı gruplar ve bağlamlarda sonuç tekrarlanıyor mu?

• - Sonuç, laboratuvardan gerçek dünyaya ölçeklenince korunuyor mu?

• - Kısa vadede iyi görünen etkinin uzun vadede yan etkisi/sürdürülebilirlik sorunu var mı?

• - Çalışma tasarımında hata, raporlamada seçmecilik (cherry-picking) ya da düz yanlış olasılığı var mı?

• - “Şans” açıklaması ihtimal dışı mı (para beş kez tura gelebilir; çok atışta gerçek ortaya çıkar)?

Laboratuvardan gerçeğe: Ölçek ve zaman testi

Titizlikle yürütülen araştırmaların sonuçları bile ölçek büyüyünce değişebiliyor. Örneğin dört günlük çalışma haftası, gönüllü olup yakından izlenen motive takımlarda verimliliği artırabilir; ancak uygulama farklı çalışanlara ve kurumlara yayılınca aynı tabloyu görmek garanti değil. Bazı etkiler ise ancak zamanla gerçek yüzünü gösterir: Başta kilo verdiren bir diyet sürdürülmesi zor olduğu için bırakılabilir ya da daha uzun vadede yan etkilere yol açabilir.

Öte yandan, güven tek bir şaşırtıcı bulgudan değil, yinelenen ve biriken sonuçlardan doğar. Aynı deseni yıllar içinde, farklı ekipler ve ortamlarda gördükçe güven büyür ve uzman kılavuzlarına dönüşür.

Eğitimde fonik örneği: Bir U dönüşü

1980’ler ve 1990’larda birçok eğitimci, “çalışmalar gösteriyor” diyerek fonik (ses temelli okuma öğretimi) yerine tüm dil yaklaşımına geçti. Aradan geçen on yıllar, bu değişimin dayandığı ön kanıtın eleştirel incelemeye dayanmadığını gösterdi. Okullar şimdi sistematik derlemeler ve birikmiş kanıtla desteklenen fonik ve okuma bilimi yaklaşımlarına geri dönüyor. O dönemin hata payı, kanıtın olgunluğu yeterince sorgulanmadan büyük bir politika değişikliğine gidilmesiydi.

Şimdi harekete geç, ama esnek kal

Çoğu zaman, kanıt olgunlaşmadan karar vermek zorundayız: bir sağlık paniği, pazardaki ani kayma ya da zorlanan bir öğrenci söz konusu olabilir. Elimizdeki kanıtla hareket etmek yanlış değil; yanlış olan, ön sonuçlar değişmezmiş gibi bağlayıcı taahhütler vermek. Doğru soru şudur: Bu iddia tek çalışmaya mı dayanıyor, yoksa çoklu çalışmalardan oluşan bir gövdeye mi? Güveni ve eylemi buna göre ayarlayın; kanıt olgunlaştıkça kararınızı güncelleyin.

S: Meta-analiz nedir ve neden önemlidir? C: Bir konudaki çok sayıda çalışmanın sonuçlarını birlikte değerlendirir; tekil bulguların yerine birikmiş kanıta dayalı, daha dengeli bir tablo sunar.

S: Erken kanıta dayanarak politika yapmak yanlış mı? C: Değil; ancak karar geçici olmalı ve yeni kanıt geldikçe gözden geçirilmeye açık tutulmalıdır.