İç ve Dış Geçerliliği Anlamak

İç ve dış geçerlilik, bir çalışmanın sonuçlarının güvenilir ve anlamlı olup olmadığını yansıtan kavramlardır. İç geçerlilik, bir çalışmanın ne kadar iyi yapıldığına (yapısı) ilişkin olsa da, dış geçerlilik bulguların gerçek dünyaya ne kadar uygulanabilir olduğuna ilişkindir.

İç geçerlilik, bir çalışmanın bir tedavi ile sonuç arasında güvenilir bir sebep-sonuç ilişkisi kurduğu ölçüdedir. Ayrıca, belirli bir çalışmanın bir bulgu için alternatif açıklamaları ortadan kaldırmayı mümkün kıldığı da yansıtılmaktadır. Örneğin, bir grup kişiyle bir sigara bırakma programı uygularsanız, tedavi grubunda görülen herhangi bir iyileşme uyguladığınız tedavi nedeniyle olduğundan nasıl emin olabilirsiniz?

İç geçerlilik, “evet veya hayır” bir kavram değildir. Bunun yerine, bulguları sorgulanabilir kılacak tuzaklardan kaçınıp kaçmadığına bağlı olarak, bir araştırmanın bulgularına ne kadar güvenebileceğimizi düşünüyoruz.

Bir çalışmada “şaşırtma” şansı ne kadar az olursa, iç geçerlilik o kadar yüksek olur ve bulgulara daha fazla güveniriz. Şaşırtma, bir araştırmanın sonucunu şaşırtan başka faktörlerin ortaya çıktığı bir durumu ifade eder. Örneğin, bir çalışma, yukarıdaki “sebep-sonuç” senaryosunu belirlediğimizden emin olup olmadığımızdan emin olmamamızı sağlayabilir.

Kısacası, bulgularınız için alternatif açıklamaları ekarte ederseniz, yalnızca çalışmanızın dahili olarak geçerli olduğundan emin olabilirsiniz. Kısa bir özet olarak, çalışmanızda aşağıdaki üç kriteri karşıladığınızda sadece sebep-sonuç olduğunu kabul edebilirsiniz:

1. Sebep, zaman açısından etkisinden önce geldi.
2. Sebep ve sonuç birlikte değişir.
3. Bu ilişki için gözlemlediğiniz başka olası bir açıklama yoktur.

İç Geçerliliği Artıran Faktörler

Bir araştırmanın iç geçerliliğini arttırmak istiyorsanız, alternatif hipotezleri reddetme olasılığınızı artıracak araştırma tasarımınızın özelliklerini düşünmek isteyeceksiniz. İç geçerliliği artırabilecek birçok faktör var.

• Randomizasyon , katılımcıları tedavi ve kontrol gruplarına rastgele atamak anlamına gelir ve gruplar arasında herhangi bir sistematik önyargı bulunmamasını sağlar.
• Katılımcıların Rasgele seçim rastgele ya da eğitim almak istediğiniz nüfusu temsil edecek şekilde olduğu bir biçimde katılımcılarınızı seçerek ifade eder.
• Bir çalışmada kör edici katılımcılar-ve bazen de böylece algıları ve davranışları ve çalışmanın sonucu eğme bu bilgiyi önlemek için (örneğin bir ilaç çalışmasında plasebo kullanarak gibi) almakta oldukları müdahale habersiz araştırmacılar-olma anlamına gelir.
• Deneysel manipülasyon , herhangi bir müdahalede bulunmadan (egzersiz ile sigara içme davranışı arasındaki ilişkiyi inceleyerek) sadece bir ilişkiyi gözlemlemek yerine, bir çalışmada (örneğin, sigara içenlere bırakma programı vermek) bağımsız bir değişkeni manipüle etmeyi ifade eder.
• Çalışma protokolü , bir tedavinin uygulanmasına yönelik özel prosedürlerin izlenmesi anlamına gelir; örneğin, örneğin, bir grup insanla başka bir insan grubuna göre farklı şeyler yapmanın etkilerini ortaya koymaz.

İç Geçerliliği Tehdit Eden Faktörler

Bir çalışmanın dahili olarak geçerli olmasını sağlamanın birçok yolu olduğu gibi, bir çalışmayı planlarken göz önünde bulundurulması gereken iç geçerliliği tehdit eden potansiyel bir liste de vardır.

• Etki Karışımı Bir sonuç değişkenindeki değişikliklerin, uyguladığınız tedaviyle ilgili bazı üçüncü değişkenlerden kaynaklandığı düşünülebilecek bir durumu ifade eder.
• Tarihsel olaylar , belli bir zaman diliminde gerçekleşen çalışmaların sonuçlarını etkileyebilir. Bu olaylara örnek olarak, çalışma katılımcılarının nasıl hissettiğini ve davrandığını etkileyen siyasi lider veya doğal afet değişikliği dahildir.
• Olgunlaşma Bir çalışmada zamanın değişken olarak etkisini ifade eder. Bir çalışma, katılımcıların bir şekilde doğal olarak değiştiği (yaşlandıkça, yorgunlaştığı) bir süre zarfında gerçekleştirilirse, çalışmada görülen etkilerin sadece etkiden kaynaklanıp kaynaklanmadığını ekarte etmek mümkün olmayabilir. Zamanın
• Test yapmak aynı önlemleri tekrar tekrar test eden katılımcıların etkisini ifade eder. Birisine aynı testi üç kez verirseniz, testi öğrendiklerinde daha iyi yapacakları veya farklı şekilde cevap vermeleri için test sürecine alışmaları muhtemel değil mi?

Dış geçerlilik, bir araştırmanın sonucunun diğer ortamlara ne kadar iyi uygulanması beklenebileceğini ifade eder. Başka bir deyişle, bu geçerlilik türü, bulguların ne kadar genelleştirilebileceğini ifade eder. Örneğin, bulgular diğer insanlar, ortamlar, durumlar ve zaman dilimleri için de geçerli midir?

Dış geçerliliğin bir yönü olan ekolojik geçerlilik, çalışmanın bulgularının gerçek dünyaya genelleştirilip genelleştirilemeyeceği anlamına gelir.

Aktarılabilirlik adı verilen bir başka terim dış geçerlilikle ilgilidir ve nitel araştırma tasarımına atıfta bulunur. Aktarılabilirlik, sonuçların benzer özelliklere sahip durumlara aktarılıp aktarılmadığını ifade eder.

Dış Geçerliliği Artıran Faktörler

Çalışmanızın dış geçerliliğini arttırmak için ne yapabilirsiniz?

• İçerme ve dışlama kriterleri , araştırmanız için çalıştığınız nüfusu açıkça tanımladığınızdan emin olmak için kullanılmalıdır.
• Psikolojik gerçekçilik , katılımcıların bir çalışmanın olaylarını gerçek bir olay olarak tecrübe etmelerini sağlamak ve onlara çalışmanın amacı hakkında “kapak hikayesi” söyleyerek elde edilebileceklerini ifade eder. Aksi halde, bazı durumlarda, araştırmanın amacının ne olacağını veya ne olacağını biliyorlarsa katılımcılar gerçek hayatta olacağından farklı davranabilirler.
• Çoğaltma , aynı sonuçları alıp almadığınızı görmek için çalışmayı farklı örneklerle veya farklı ortamlarda tekrar yürütmeyi ifade eder. Birçok çalışma yapıldığında, bağımsız bir değişkenin etkisinin güvenilir olup olmadığını belirlemek için meta-analiz de kullanılabilir (bir konudaki çok sayıda araştırmanın bulgularının incelenmesiyle).
• Saha deneyleri Laboratuvar dışında doğal bir ortamda bir çalışma yaptığınız da kullanılabilir.
• Yeniden işleme veya kalibrasyon , dış geçerlilikle ilgili problemleri ayarlamak için istatistiksel yöntemler kullanmak anlamına gelir. Örneğin, bir çalışmada bazı özellikler (yaş gibi) için dengesiz gruplar varsa, yeniden ağırlıklandırma kullanılabilir.

Dış Geçerliliği Tehdit Eden Faktörler

Bir araştırma gerçek dünyadaki değişkenlerin etkileşimlerini hesaba katmadığında dış geçerlilik tehdit altındadır.

• Günün saati, yer, gürültü, araştırmacı özellikleri ve kaç önlem kullanıldığı gibi durum faktörleri bulguların genelleştirilmesini etkileyebilir.
• Test öncesi ve sonrası etkiler , araştırma öncesi ve sonrası testin bir şekilde araştırmada görülen etki ile ilgili olduğu ve sebep-sonuç ilişkisinin bu ilave testler olmadan ortadan kalkacağı durumu ifade eder.
• Örnek özellikleri , belirli örneklemin bazı özelliklerinin etkiden (veya kısmen sorumlu) sorumlu olduğunu ve bu da bulguların genelleştirilebilirliğinin sınırlı olmasına yol açar.
• Seçim yanlılığı , bir araştırmadaki bağımsız değişkenle ilgili olabilecek gruplar arasındaki farklar sorununu ifade eder (bir kez daha, çalışmaya katılmak için motivasyon veya isteklilik gibi bir şey, bireylerin belirli bir demografinin çevrimiçi bir ankete katılması daha olası ). Bu aynı zamanda iç geçerliliği için bir tehdit olarak kabul edilebilir.

İç ve dış geçerlilik aynı madalyonun iki yüzü gibidir. İyi bir iç geçerliliği olan bir çalışmanız olabilir, ancak genel olarak gerçek dünyayla alakasız olabilir. Öte yandan, gerçek dünyayla oldukça alakalı bir alan araştırması yapabilir, ancak hangi değişkenlerin gördüğünüz sonuçlara neden olduğunu bilmek açısından güvenilir sonuçları yoktur.

benzerlikler

İç ve dış geçerlilik arasındaki benzerlikler nelerdir? Her ikisi de bir çalışma tasarlanırken göz önünde bulundurulması gereken faktörlerdir ve her ikisinin de çalışmanın sonuçlarının anlamlarının olup olmadığına dair sonuçları vardır. Her ikisi de “ya / veya” kavram değildir ve bu nedenle, çalışmanızın her iki geçerlilik türü açısından ne derece performans göstereceğine her zaman karar vereceksiniz.

farklılıklar

İç ve dış geçerlilik arasındaki temel fark, iç geçerliliğin bir çalışmanın yapısını ve değişkenlerini ifade etmesidir; dış geçerlilik ise sonuçların ne kadar evrensel olduğuna ilişkindir. İkisi arasında başka farklılıklar da var.

İç geçerlilik, yalnızca bağımsız değişkene bağlı bir fark göstermeye odaklanırken, dış geçerlilik sonuçları genel olarak dünyaya çevrilebilir.

İyi bir iç geçerliliği olan bir çalışmanın bir örneği, bir araştırmacı belirli bir dikkatlilik uygulamasının kullanılmasının olumsuz ruh halini azaltacağını varsaydığı takdirde olur. Bu hipotezi test etmek için araştırmacı rasgele iki gruba katılımcılardan bir örnek atar: uygulamayı belirli bir süre boyunca kullanacak olanlar ve bir kontrol görevine katılanlar.

Araştırmacı, katılımcıların gruplara nasıl atandığı konusunda sistematik bir önyargının bulunmadığından emin olur ve ayrıca araştırma asistanlarını, öğrencilerin deneme sırasında bulundukları gruplara kör eder.

Çalışmanın prosedürlerini ana hatlarıyla belirten sıkı bir çalışma protokolü kullanılmaktadır. Potansiyel karıştırıcı değişkenler, diğer faktörlerin yanı sıra katılımcıların sosyoekonomik durumu, cinsiyet, yaş gibi ruh hali ile birlikte ölçülür. Katılımcılar çalışmadan ayrılırsa, araştırmada kimin kaldığı konusunda sistematik bir önyargı bulunmadığından emin olmak için özellikleri incelenir.

İyi bir dış geçerliliği olan bir çalışmanın bir örneği yukarıdaki örnekte olacaktır; araştırmacı ayrıca, katılımcıların uygulamayı laboratuvarda değil de evde kullanmasını sağlayarak araştırmanın dış geçerliliğini sağlamıştır. Araştırmacı, ilgi popülasyonunu ve temsili bir örneklem seçerek açıkça tanımlamaktadır ve farklı teknolojik cihazlar için çalışmayı kopyalamaktadır.

Eniyi Düşünce’den Bir Kelime

Sağlam iç ve dış geçerliliği olan bir deneme kurmak, araştırmanızın her yönünü etkileyebilecek faktörler hakkında başlangıçta dikkatli olmayı içerir. Daha sonra sorunları keşfetmek için tasarım aşamasında hızla ilerlemek yerine, geniş kapsamlı etkileri olan yapısal olarak sağlam bir çalışmayı tasarlamak için fazladan zaman harcamak en iyisidir. Yalnızca hem iç hem de dış geçerlilik yüksek olduğunda, sonuçlarınız hakkında güçlü sonuçlar alınabilir.