Kanıtlara ve Onları Bizim için Yorumlayan Uzmanlara Ne Zaman Güvenmeliyiz?

Yeni bir bilimsel araştırma manşetlere taşınır. Bu çalışma belirli bir diyetin işe yaradığını, bir gıda takviyesinin hafızayı güçlendirdiğini, yeni bir öğretim yönteminin okuma becerilerini geliştirdiğini veya bir yönetim yaklaşımının ekip verimliliğini artırdığını gösterir. Biz de beslenme alışkanlıklarımızı, ebeveynlik tarzımızı ya da çalışma düzenimizi hemen buna göre ayarlarız; bilimin yolundan gideriz.

Birkaç ay sonra bir başka haber başlığı çıkar ve ilkini tamamen çürütür. Örneğin yumurtanın sağlığa zararlı olduğu söylenirken birden faydalı olduğu ilan edilir. Kırmızı şarap kalbi korur mu, korumaz mı? Bitter çikolata, az yağlı diyetler, ayakta çalışma masaları veya bir salgın sırasındaki maske kullanımı gibi konularda bilimsel temelli olduğu belirtilen öneriler durmaksızın değişir. Sonunda insanlar “araştırmaların gösterdiği” iddialara güvenmeyi bırakır.

Halbuki bilimin doğası tam olarak böyledir; kanıtlar birikir, ilk sonuçlar sınanır ve bunların bir kısmı geçerliliğini korurken bir kısmı elenir. Asıl sorun, henüz gelişme aşamasındaki kanıtları sanki nihai birer gerçekmiş gibi aktarmamız ve buna göre hareket etmemizdir.

Ekonomist Christopher Cotton yeni yayımlanan bir makalesinde, ön bulguları kesin sonuçlarmış gibi ele alma eğiliminin aşırı özgüvenli politika iddialarına yol açtığını ve bilime duyulan güvenin azalmasına katkıda bulunduğunu savunuyor. Cotton, politika yapıcıların kanıt olgunluğunu sınıflandırmasına yardımcı olacak yeni bir kavramsal çerçeve öneriyor.

Yazarın sunduğu bu içgörüler, günlük hayatımızda karşımıza çıkan bilimsel kanıtları doğru yorumlayabilmemiz için bizlere de değerli bir yol haritası sunuyor.

Olgunlaşmış Kanıtlar ve Ön Bulgular

“Araştırmaların gösterdiği” yönündeki iddialar, zayıf ve erken aşamadaki bir çalışmaya dayansalar bile genellikle büyük bir özgüvenle dile getirilir. Oysa bazı iddialar henüz yolun çok başındayken bazıları farklı toplum ve koşullarda yıllar süren araştırmalarla doğrulanmış, uzman kılavuzlarına ve sistematik derlemelere dönüşmüştür.

Olgunlaşmış kanıtlar uzun yıllara yayılan titiz incelemeleri başarıyla atlatsa da şaşırtıcı bir ön bulgu yarın kolayca çürütülebilir. Ne var ki muhabirler, savunucular, pazarlamacılar ve hatta araştırmacılar her zaman bu iki durum arasındaki farkı gözetmez.

Siyasetçiler, eğitimciler ve halk sağlığı liderleri umut vadeden bir erken sonuca dayanarak politikalar geliştirir; bunları “kanıta dayalı” olarak nitelendirir ve ardından bilim ilerledikçe bu politikaların başarısızlığa uğramasını izlemek zorunda kalır.

Tek Bir Çalışma Neden Yeterli Değildir?

Cotton tarafından geliştirilen PERLS (Politika Kanıtı Hazırlık Düzeyleri) çerçevesi, politika yapıcılara kanıtların olgunluğunu sınıflandırmak için yapılandırılmış bir yöntem sunar. Bu model, “bilimi takip etmenin” her aşamada tam olarak neleri desteklediğini değerlendirmeye olanak tanır.

Bu yaklaşım aynı zamanda sezgisel bir temel kural da sağlar; bir iddiaya ne kadar güveneceğimize karar verirken o iddianın tek bir çalışmayla mı, çok sayıda araştırmayla mı yoksa ikisinin arasında bir kanıt düzeyiyle mi desteklendiğini sorgulamamız gerekir.

Bir iddia yalnızca tek bir çalışmaya veya birkaç araştırmaya dayanıyorsa sonuçları kanıtlanmış bir gerçek olarak değil, sadece olası bir bulgu olarak değerlendirmeliyiz. İlgili bulgu gelecekteki incelemelerde geçerliliğini koruyabilir; ancak çürütülme ihtimali de oldukça yüksektir.

Ön bulguların uzun vadede geçerliliğini yitirmesinin birçok nedeni bulunur. Bazı sonuçlar sadece tesadüf eseri ortaya çıkar. Yeterince çok sayıda araştırma yürütürseniz hilesiz bir madenî paranın art arda beş kez tura gelmesi gibi sırf şans eseri çarpıcı sonuçlar veren birkaç çalışmaya mutlaka rastlarsınız. Parayı atmayı sürdürdüğünüzde ise gerçek eninde sonunda açığa çıkar.

Kimi sonuçların elenme nedenleri ise daha az masumdur; yetersiz araştırma tasarımları, yöntemsel hatalar veya verilerin içinden yalnızca işe yarayanların seçilip aktarılması (cımbızlama) gibi etkenler bu duruma yol açabilir.

Uygulama Alanı Genişlediğinde Ne Olur?

Büyük bir dikkatle yürütülen çalışmalardan elde edilen sonuçlar bile geniş ölçekte uygulandığında sıklıkla geçerliliğini yitirir. Örneğin araştırmalar haftada dört gün çalışma düzenine geçmenin verimliliği artırdığını gösterebilir. Ancak bu sonuçlar genellikle çalışmaya kendi isteğiyle katılan, yakından gözlemlenen ve son derece motive ekiplerde elde edilir. Peki bu uygulama daha geniş bir çalışan kitlesine ve farklı kurumlara yayıldığında da aynı başarıyı sürdürebilir mi?

Bazı etkiler ise gerçek sonuçlarını ancak uzun vadede gösterir. Örneğin başlangıçta hızlı kilo kaybı sağlayan fakat sürdürülmesi imkânsız olan ya da uzun vadede yan etkilere yol açan bir diyet böyledir.

Ses Bilgisi Eğitimi Örneği

Bilimsel güven tek bir çalışmadan değil, kanıtların birikiminden doğar. Benzer sonuçlar farklı laboratuvarlarda, bağımsız araştırma ekiplerinde ve farklı insan gruplarının yer aldığı gerçek dünya koşullarında tekrar tekrar elde ediliyor mu? Birçok araştırmanın süzgecinden başarıyla geçen bir bulguya, manşetlere çıkan şaşırtıcı ve yeni bir sonuçtan çok daha fazla güven duymalıyız.

Tıp gibi alanlarda kurumsallaşan bilimsel süreç tam olarak bu şekilde işler. Tıpta bakım standartları belirlenirken kanıtların meta-analizler, sistematik derlemeler ve nihayetinde saygın uzman kurullarının kılavuzları hâline gelmesi şart koşulur.

Bu süreci atladığımızda ciddi sorunlar baş gösterir. Örneğin 1980'li ve 1990'lı yıllarda birçok eğitimci, “araştırmaların gösterdiği” iddiasına dayanarak ses bilgisi yöntemi yerine bütüncül dil yaklaşımını (İng: "whole language") benimsedi.

Aradan geçen onlarca yılın ardından, bu köklü değişimin dayandığı erken kanıtların titiz bilimsel incelemelere dayanamadığı açıkça anlaşıldı. Günümüzde okullar birikmiş kanıtlar ve sistematik derlemelerle desteklenen ses bilgisi yöntemine ve okuma bilimine geri dönüyor.

Geçmişte eğitim politikalarını belirleyen yetkililer, böylesine büyük bir kararı meşrulaştırmak için kullanılan kanıtların olgunluk düzeyini sorgulamakta ne yazık ki yetersiz kalmıştı.

Hemen Harekete Geçin ve Esnek Kalın!

Çoğu zaman kanıtlar henüz olgunlaşmadan harekete geçmek zorunda kalırız. Ortada acil bir sağlık tehdidi, ani bir piyasa dalgalanması veya o an öğrenme güçlüğü çeken bir çocuk olabilir. Elimizdeki mevcut kanıtlara dayanarak adım atmak bir hata değildir. Asıl hata, ön bulgular sanki hiç değişmeyecekmiş gibi kesin taahhütlerde bulunmaktır.

Öyleyse kanıtlara ve onları açıklayan uzmanlara ne zaman güvenmeliyiz? Bu durum bir ya hep ya hiç meselesi değildir. Ortaya atılan iddiaların tek bir çalışmaya mı yoksa birçok araştırmayla pekiştirilmiş birikimli bir kanıt gövdesine mi dayandığını sormalıyız. Güvenimizi ve attığımız adımları da bu olgunluk derecesine göre şekillendirmeliyiz.