Bir sonuç, makul başka kararlar verildiğinde de aynı yönde ve benzer büyüklükte kalıyor mu? Duyarlılık analizi; eksik veri varsayımı, değişken tanımı, model seçimi, aykırı değerlerin ele alınışı veya dahil etme ölçütü gibi tartışılabilir analiz kararları değiştirilerek ana bulgunun ne ölçüde değiştiğinin incelenmesidir. Sonuç geniş bir makul seçenek kümesinde korunuyorsa yorumun belirli bir tercihe bağımlılığı azalır; işaret, büyüklük ya da belirsizlik belirgin biçimde değişiyorsa kırılganlık görünür olur.
Bu analiz, her alternatifi deneyip en hoş sonucu seçme ruhsatı değildir. Hangi değişikliklerin neden makul sayıldığı, ana analizden nasıl ayrıldığı ve bütün sonuçların raporlanıp raporlanmadığı önemlidir. Önceden planlanması seçici sunum riskini azaltabilir; sonradan yapılması da açıkça keşfedici diye belirtilirse yararlı olabilir. Üstelik aynı sonuca ulaşan birçok model, ortak bir ölçüm hatasını veya karıştırıcıyı sihirle yok etmez. Duyarlılık analizi sonucun zırhını değil, hangi dikişten açılabileceğini gösterir.
14 entry
duyarlılık analizi
Duyarlılık analizi, bir sonucun makul fakat tartışmalı varsayımlar, veri işleme kararları veya model seçimleri değiştirildiğinde ne ölçüde değiştiğini sınayan analizler bütünüdür. Tek bir alternatif hesap yapmakla sınırlı değildir; eksik verinin ele alınışı, aykırı değer tanımı, karıştırıcı seçimi, sonuç ölçümü ya da model biçimi gibi kararlar gerekçelendirilebilir seçeneklerle yeniden değerlendirilir. Ana tahmin farklı makul seçimlerde benzer kalıyorsa bulgunun bu seçimlere dayanıklılığı artar; yönü, büyüklüğü veya belirsizlik aralığı belirgin değişiyorsa sonuç kendiliğinden yanlış sayılmaz, hangi varsayıma bağımlı olduğu görünür olur. Bu yöntem ölçülmemiş bütün yanlılıkları ortadan kaldırmaz ve çok sayıda analiz arasından elverişli olanı seçmenin makyajı değildir. Yararlı bir rapor, hangi kararların sınandığını ve pratik yorumun hangi koşulda değiştiğini birlikte gösterir.
Bir sonuç, makul analiz kararları değiştiğinde de ayakta kalıyor mu? Duyarlılık analizi, bir araştırma bulgusunun varsayımlar, değişken tanımları veya yöntem seçimleri değiştirildiğinde ne ölçüde farklılaştığını inceler. Eksik veriler için başka bir makul varsayım kullanmak, uç gözlemleri farklı kurallarla ele almak ya da modelin biçimini değiştirmek buna örnek olabilir. Amaç, hoşumuza giden sonucu ikinci kez üretmek değil, ana sonucun hangi kararlara bağımlı olduğunu haritalamaktır.
Sonucun benzer kalması belirli seçeneklere karşı sağlamlık gösterir; ölçüm hatasını, karıştırıcılığı veya yanlış araştırma tasarımını kendiliğinden ortadan kaldırmaz. Tersine, etkinin yönü ya da pratik büyüklüğü makul seçeneklerle kolayca değişiyorsa tek analizden kesin hüküm çıkarmak güçleşir. Değerlendirmede yalnız anlamlılık etiketine değil, etki tahmininin ve belirsizlik aralığının nasıl oynadığına bakmak gerekir; yalnız tercih edilen sonucun korunduğu denemeleri göstermek ise pusulayı sonradan kuzeye çevirmektir. Benim için iyi duyarlılık analizi, sonucu savunmaktan önce kırılabileceği yerleri görünür kılar.
Bir sonuç, makul varsayımlar değiştirildiğinde ayakta kalıyor mu? Duyarlılık analizi; eksik verinin ele alınışı, ölçüm tanımı, model seçimi veya dışlama ölçütü gibi savunulabilir kararlar değiştirildiğinde tahminin ne kadar değiştiğini inceler. Benzer sonuçlar dayanıklılığı destekler, fakat ölçülmemiş karıştırıcılığı ya da ortak bir yanlılığı ortadan kaldırmaz; bütün cetveller aynı eğriyse uyum, doğruluk değildir.
Bir bulgu yalnız tek analiz yolunda ayakta duruyorsa sağlamlığı henüz sınanmamıştır. Duyarlılık analizi, araştırma sonucunun makul alternatif varsayım, tanım veya analiz seçimleri altında ne kadar değiştiğini inceler. Eksik verinin farklı ele alınması, bazı katılımcıların ya da çalışmaların dışlanması, ölçüm eşiğinin değiştirilmesi, başka bir istatistiksel model kullanılması veya karıştırıcıların farklı biçimde seçilmesi buna örnek olabilir.
Yaygın varsayım, ana tahminin yanına birkaç alternatif sonuç eklenince güvenilirliğin kanıtlandığıdır. Oysa yalnız aynı sonuca çıkan seçenekleri denemek, sağlamlık görüntüsü üretir; seçeneklerin neden makul olduğu ve hangi kararları temsil ettiği açıklanmalıdır. Sonucun yönü, büyüklüğü ve belirsizliği makul analizler boyunca benzer kalıyorsa bulgunun belirli seçimlere bağımlılığı azalır, fakat yanlılıksız veya nedensel olduğu kanıtlanmaz. Sonuç değişiyorsa bu da çalışmayı otomatik olarak değersizleştirmez; yorumun hangi varsayımda kırıldığını gösterir. İyi duyarlılık analizi sonucu sigortalamaz, sonucu hangi varsayımların taşıdığını görünür kılar.
Tek bir analizden çıkan sonucun, verinin söyleyebileceği tek şey olduğu varsayılabilir. Duyarlılık analizi; eksik verinin ele alınışı, ölçüm tanımı, model seçimi, aykırı gözlemler veya karıştırıcılar gibi makul alternatif kararlar altında bulgunun ne kadar değiştiğini inceleyen analizler bütünüdür. Sonuç farklı makul seçimlerde benzer kalıyorsa belirli tercihlere bağımlılığı azalır; yönü, büyüklüğü ya da belirsizliği belirgin biçimde değişiyorsa ana bulgu daha ihtiyatlı yorumlanmalıdır.
Yine de istikrarlı sonuç otomatik olarak doğru sonuç değildir: bütün analizler aynı seçim yanlılığını, kötü ölçümü veya yanlış nedensel varsayımı paylaşabilir. Ayrıca yalnız istenen sonucu koruyan seçenekleri göstermek duyarlılık analizi değil, analiz menüsünden vitrin seçmektir. Daha kullanışlı yaklaşım alternatifleri önceden gerekçelendirmek, her birinde etki büyüklüğü ile güven aralığını birlikte göstermek ve hangi kararın sonucu değiştirdiğini açıkça yazmaktır. Benim için iyi bir duyarlılık analizi, sonucu cilalamaktan çok nerede kırılabildiğini gösterir.
Duyarlılık analizi, sonuçların makul varsayım ve analiz seçimleri değiştiğinde ne kadar değiştiğini sınar.
Duyarlılık analizi, bir sonucun makul alternatif varsayımlar, veri işleme kararları veya model seçimleri altında ne ölçüde değiştiğini sınar. Sonuç yalnız tek analitik yolda görünüyorsa sağlamlığı sınırlıdır; benzer kalıyorsa bu nedenselliği kanıtlamaz, fakat bulgunun belirli bir tercihe bağımlı olmadığını destekler.
Sonucun makul varsayım ve analiz değişiklikleri altında ne kadar değiştiğini sınamaktır.
Bir sonuç yalnız tek makul analiz tercihinde ayakta kalıyorsa, bence bulgudan çok o tercihe dayanıyordur; duyarlılık analizi bu bağı görünür kılar.
Bence sonucun hangi varsayıma yaslandığını görünür kılan dayanıklılık cetvelidir.
Sonucun makul varsayım ve analiz seçimleri değiştiğinde ne kadar değiştiğini sınar.
Duyarlılık analizi, ekolojik bir sonucun başlangıç yılı, eksik kayıtların ele alınışı veya tür teşhisindeki belirsizlik gibi makul seçimler değiştirildiğinde ayakta kalıp kalmadığını gösterir. Bir eğilim yalnız tek başlangıç tarihine bağlıysa, takvim biraz kaydırılınca hüküm de göç ediyor demektir.
Bir araştırma sonucunun, ölçüm varsayımları, olası karıştırıcılar veya analiz tercihleri değiştiğinde ne ölçüde ayakta kaldığını sınayan yaklaşımlar bütünüdür; sonuç yalnız belirli varsayımlar altında geçerliyse bu sınırları görünür kılar.