etiket kalitesi, dosya sayısıyla değil, aynı örneğe bakan etiketçilerin ne kadar sık aynı sonuca vardığıyla anlaşılır. kolay örnekler çoğaldıkça genel uyum yüksek görünebilir; zor ve sınırdaki örnekler ayrıca incelenmiyorsa bu ortalama yanıltır. yönergenin belirsiz durumları nasıl ele aldığı, anlaşmazlıkların nasıl çözüldüğü ve hangi örneklerin yeniden denetlendiği görünür olmalıdır.