Bir araştırmada ölçülen her sonucun aynı görünürlükte yayımlanmaması, kanıtın görünen yüzünü değiştirebilir. Seçici sonuç raporlama; sonuçların, zaman noktalarının veya analizlerin, çoğu kez bulgunun yönü ya da istatistiksel dikkat çekiciliğine göre eksik verilmesi veya öne çıkarılmasıdır. Bunu yalnız makaledeki p değerlerinden teşhis etmek mümkün değildir; protokol, ön kayıt, analiz planı ve rapor karşılaştırması kaybolan ölçümleri gösterebilir, ancak her sapma yanıltma sayılmaz: değişikliğin zamanı, gerekçesi ve açıkça bildirilip bildirilmediği yorumu belirler.
2 entry
seçici sonuç raporlama
Bir araştırmada ölçülen her sonuç yayımlanan metne aynı şansla girer mi? Seçici sonuç raporlama, sonuçların istatistiksel anlamlılıkları, yönleri veya anlatıya uygunlukları gibi özelliklere göre eksik sunulması, farklı tanımlanması ya da analizler arasından tercih edilmesidir. Sorun yalnız olumlu çalışmaların yayımlanması değildir: tek bir çalışmada bazı zaman noktaları, ölçekler, alt gruplar veya analizler görünürken diğerleri kaybolabilir.
Bunu yalnız makaledeki p değerlerine bakarak kesinleştirmek güçtür. Önceden kaydedilmiş protokol ve analiz planı; yöntem bölümü, kayıt tarihi ve yayımlanan sonuçlarla karşılaştırıldığında daha güçlü bir değerlendirme sağlar. Her değişiklik yanlılık değildir; yöntemsel gerekçeyle yapılan değişiklik açıkça tarihlenip açıklanabilir. Kaygı, sonuç bilindikten sonra yapılan seçimin belirtilmemesi ve bu seçimin etkiyi olduğundan daha tutarlı ya da büyük göstermesiyle artar. Yorum, plan ile rapor arasındaki farkın yönü ve tahmine olası etkisi gösterilebildiği ölçüde güçlenir.