Araştırmaya kimin girdiği, kimin kaldığı ve kimin analiz edildiği karşılaştırmanın sonucunu değiştirebilir. Seçim yanlılığı, bu seçim sürecinin karşılaştırılan gruplarda sonuçla ilişkili özelliklerin dağılımını bozması ve gözlenen ilişkinin hedeflenen topluluğa ya da nedensel etkiye taşınmasını güçleştirmesidir.
Yalnız gönüllülerin katılması, izlem sırasında ayrılanların gruplara göre farklılaşması veya analizin belirli ölçümleri bulunan kişilerle sınırlandırılması farklı seçim yollarıdır. Sorun yalnız örneklemin küçük olması değildir; çok büyük bir örneklem de sistematik biçimde seçilmişse yanlış karşılaştırmayı daha hassas ölçebilir. Katılım ve kayıp nedenleri, gruplar arasındaki farklar ve hangi kişilerin analiz dışında kaldığı görülmeden örneklem büyüklüğü güvence sayılmaz.