CVR Nedir?
CVR (Content Validity Ratio), ölçek geliştirme ve araştırmada maddelerin içerik geçerliliğini değerlendirmek için kullanılan istatistiksel bir göstergedir. 1975 yılında C. H. Lawshe tarafından geliştirilen bu yöntem, uzman panelinin puanlarına dayanarak, bir maddenin ne kadar "gerekli" veya "geçerli" olduğunu sayısal olarak ifade eder ve madde-ölçek uyumunu ölçer.
CVR yaygın olarak şu alanlarda kullanılır:
- Hemşirelik ve Sağlık Alanı: Hemşirelik ölçekleri, hasta değerlendirme araçları ve yeterlik ölçümleri
- Eğitim Alanı: Ders değerlendirme formları, öğrenci başarı ölçekleri, müfredatın geçerliliği
- Psikoloji: Kişilik testleri, anksiyete/depresyon ölçekleri, ruh sağlığı araçları
- İşletme: Iş değerlendirme formları, yeterlilik testleri, performans ölçümleri
- İnsan Kaynakları: Seçim testleri, sertifikasyon sınavları, iş tanımı geçerliliği
- Araştırma: Anket ve yargılama formları, envanter geliştirme, kontent analizi
CVR Neden Önemlidir?
Yeni bir ölçek veya anket geliştirirken, her maddenin gerçekten ölçülmek istenen özelliği/konuyu yansıtıp yansıtmadığı sorgulanmalıdır. CVR, bu soruya cevap vermede kritik rol oynar:
- Uzman Görüşünü Nicelleştirir: Nitel uzman yargılarını sayısal bir göstergede birleştirir
- Tutarlılığı Sağlar: Farklı araştırmalarda karşılaştırılabilir sonuçlar verir
- Veri Kalitesini Artırır: Geçerli olmayan maddeleri erkenden belirlemeyi sağlar
- Kaynak Tasarrufu: Gereksiz soruların veri toplamadan çıkarılmasını sağlar
- İstatistiksel Temelli: Rastgele anlaşmaya karşı koruma sağlar (istatistiksel anlamlılık testi)
CVR Formülü ve Hesaplama
CVR = (ne − N/2) / (N/2)
ne: Maddeyi "gerekli" olarak puanlayan uzman sayısı
N: Maddeyi puanlayan toplam uzman sayısı
N/2: Toplam uzman sayısının yarısı (rastgele anlaşma noktası)
Formülün Mantığı: Lawshe formülü basit ve elegandır. Payda (N/2), şans eseri ne kadar çok uzmanın "gerekli" diyebileceğini temsil eder. Pay ise, bu şanssal beklentinin ötesinde kaç uzmanın daha "gerekli" dediğini gösterir. Sonuç −1 ile +1 arasında değişir:
- +1: Tüm uzmanlar maddeyi gerekli sayıyor (mükemmel uzlaşma)
- 0 ile +0,99 arasında: Çoğunluk maddeyi gerekli görüyor (kısmi uzlaşma)
- 0: Uzmanların tam yarısı gerekli diyor, yarısı değil (fikir birliği yok)
- −1 ile 0 arasında: Çoğunluk maddeyi gerekli görmüyor (düşük ilgi)
- −1: Hiç kimse maddeyi gerekli sayımıyor (çıkarılması önerilir)
Lawshe'nin Minimum CVR Eşikleri
Bir maddenin geçerli sayılabilmesi için CVR değerinin, uzman sayısına bağlı olarak minimum bir eşiğe ulaşması gerekir. Bu eşikler, istatistiksel anlamlılık (p < 0.05) düzeyinde hesaplanmıştır:
| Uzman Sayısı (N) | Minimum CVR Eşiği | Gereken Gerekli Sayısı |
|---|---|---|
| 5 | 0.99 | 5 (tümü) |
| 6 | 0.99 | 6 (tümü) |
| 7 | 0.99 | 7 (tümü) |
| 8 | 0.75 | 7 veya 8 |
| 9 | 0.78 | 8 veya 9 |
| 10 | 0.62 | 8, 9 veya 10 |
| 11 | 0.59 | 8, 9, 10 veya 11 |
| 12 | 0.56 | 8, 9, 10, 11 veya 12 |
| 13 | 0.54 | 9 ve üzeri |
| 14 | 0.51 | 9 ve üzeri |
| 15 | 0.49 | 8 ve üzeri |
| 20 | 0.42 | 12 ve üzeri |
| 25 | 0.37 | 14 ve üzeri |
| 30 | 0.33 | 15 ve üzeri |
| 40 | 0.29 | 18 ve üzeri |
Eşikler Neden Değişir?
Az sayıda uzman (5-7) olduğunda eşik çok yüksektir (0.99), çünkü neredeyse mükemmel anlaşma gerekir. Uzman sayısı arttıkça eşik düşer, çünkü daha fazla veri noktası ile istatistiksel anlamlılık sağlanması daha kolaydır. 40 uzmanla, hatta 0.29 bile istatistiksel olarak anlamlı kabul edilir.
Pratik Örnekler
Örnek 1: Hemşirelik Ölçeği (10 Uzman)
Senaryo: Bir araştırma grubu, hasta bakım yeterliklerini ölçen 12 maddelik bir ölçek geliştirmiştir. 10 hemşirelik uzmanından maddelerin "gerekli" olup olmadığını 3 dereceli ölçek (1=Gerekli, 2=Yararlı fakat gerekli değil, 3=Gerekli değil) ile puanlaması istenmiştir.
Madde 1 Sonuçları:
- 8 uzman: "Gerekli" (1)
- 2 uzman: "Gerekli değil" (2 veya 3)
Hesaplama Adımı Adım:
- ne = 8 (gerekli diyen)
- N = 10 (toplam)
- N/2 = 5 (beklenen rastgele anlaşma)
- CVR = (8 − 5) / 5 = 3 / 5 = 0.60
Sonuç: 10 uzman için minimum eşik 0.62'dir. Bu maddenin CVR değeri (0.60) eşiğin 0.02 puan altındadır. Madde ya revize edilmeli (daha net ifadeler) veya çıkarılmalıdır.
Daha İyi Senaryo: 9 uzman "gerekli" deseydi:
- CVR = (9 − 5) / 5 = 4 / 5 = 0.80 ✓ GEÇERLI (0.62 > 0.80)
Örnek 2: Depresyon Ölçeği (15 Uzman)
Senaryo: Bir psikoloji araştırma grubu, depresyon semptomlarını ölçen 20 maddelik bir ölçek hazırladı. 15 klinik psikolog ve psikiyatrist maddeleri değerlendirecektir.
Madde "Enerji Kaybı" İçin Sonuçlar:
- 13 uzman: "Gerekli"
- 2 uzman: "Gerekli değil"
Hesaplama:
- CVR = (13 − 7.5) / 7.5 = 5.5 / 7.5 = 0.73
- Minimum eşik (15 uzman): 0.49
- Sonuç: 0.73 > 0.49 → GEÇERLI VE KUVVETLI UZLAŞMA
Bu maddenin CVR değeri eşiğin önemli ölçüde üzerindedir ve ölçeğe mutlaka dahil edilmelidir.
Örnek 3: Eğitim Ölçeği (20 Uzman)
Senaryo: Öğretmen yeterliği ölçeği için 20 eğitim uzmanı değerlendirme yapıyor.
Madde: "Sınıf Yönetimi Becerisi"
- 18 uzman: "Gerekli"
- 2 uzman: "Gerekli değil"
Hesaplama:
- CVR = (18 − 10) / 10 = 8 / 10 = 0.80
- Minimum eşik (20 uzman): 0.42
- Sonuç: 0.80 > 0.42 → GÜÇLÜ GEÇERLILIK
Bu madde kesinlikle ölçeğe dahil edilmeli ve raporlamada "mükemmel uzlaşma" olarak gösterilmelidir.
CVR'nin Yorumlanması ve Rehberi
Geçerli Maddeler (CVR ≥ Eşik)
CVR değeri eşiğe eşit veya eşikten yüksek olan maddeler geçerli kabul edilir. Bu maddeler:
- Ölçeğe ön seçimden geçer
- Pilot test aşamasına gider
- Sonraki geçerlilik ve güvenirlilik testlerine katılır
Revizyon Gerektiren Maddeler (CVR Eşiğin Hemen Altında)
CVR değeri eşiğin hemen yakınında olan maddeler (örneğin, eşik 0.62 ise CVR=0.58 gibi) dikkatlice gözden geçirilmelidir:
- Maddeyi Yeniden Yazın: Daha net, anlaşılır ifadeler kullanın
- Uzmanlardan Geri Bildirim Alın: Maddenin neden anlaşılmadığını sorun
- Terminolojiyi Değiştirin: Teknik jargon yerine daha basit ifadeler tercih edin
- Tekrar Test Edin: Revize edilen maddeyi aynı veya yeni uzman paneline sunun
Geçersiz Maddeler (CVR Eşiğin Çok Altında)
CVR değeri eşiğin önemli ölçüde altında olan maddeler (örneğin, CVR=0.20) çıkarılmalıdır:
- Bu maddeler ölçülmek istenen yapıyı yansıtmıyor
- Uzman fikir birliği yok
- Ölçeğe tutarlılık sorunları getiriyor
CVR'nin Avantajları
- Basitlik: Formülü anlamak ve hesaplamak kolaydır
- Uzlaşmayı Nicelleştirir: Nitel yargıyı tek sayıya dönüştürür
- Yaygın Kabul: Ölçek geliştirme araştırmalarında standart yöntemdir
- Esneklik: Herhangi bir uzman sayısı ile çalışır (en az 5 önerilir)
- İstatistiksel Temel: Eşikler istatistiksel anlamlılık testlerine dayanır
- Şeffaflık: Sonuçlar kolay raporlanır ve yorumlanır
CVR'nin Sınırlamaları
- Şiddet Farkını Görmez: "Gerekli" puanını veren 5 uzman ile 100 uzmanı aynı şekilde değerlendirir
- Uygun Uzman Panel Gerekli: En az 5 uzman tavsiye edilir; 40+ olabilir
- Madde Düzeyinde: Ölçek genelinde tek bir geçerlilik puanı vermez (bunun için CVI veya S-CVI/Ave kullanılır)
- Negatifleri Dikkate Almaz: Neden eksik kaldığı hakkında bilgi vermez
- Bağımsız Değildir: Diğer geçerlilik çalışmaları (yapı geçerliliği, yordayıcı geçerlilik) ile tamamlanmalıdır
CVR vs. Diğer Geçerlilik Ölçütleri
CVR tek başına yeterli değildir. Kapsamlı bir ölçek geliştirme sürecinde, şu diğer metrikler birlikte kullanılmalıdır:
| Metrik | Ölçü Nedir? | En İyi Kullanım Alanı | Formül |
|---|---|---|---|
| CVR | Madde düzeyinde uzman uzlaşması | İlk madde seçimi ve eleme | (ne − N/2) / (N/2) |
| I-CVI | Madde düzeyinde uzman anlaşması oranı | Detaylı madde değerlendirmesi | Gerekli diyen / Toplam |
| CVI | Tüm CVR değerlerinin ortalaması | Hızlı ölçek özeti | Σ CVR / Madde sayısı |
| S-CVI/Ave | Tüm I-CVI değerlerinin ortalaması | En güvenilir ölçek geçerliliği | Σ I-CVI / Madde sayısı |
| S-CVI/UA | Evrensel uzlaşma yüzdesi | Katı geçerlilik standardı | Evrensel anlaşma % / 100 |
Hangi Metriği Ne Zaman Kullanmalı?
- CVR: Geliştirilmiş ölçekten düşük puanlar alan maddeleri hızlı belirlemek için
- I-CVI: Her maddenin ayrıntılı değerlendirmesini yapmak isteyenler için
- CVI: Araştırma makalesinde ölçek geçerliliğinin hızlı özetini vermek için
- S-CVI/Ave: Ölçek geliştirilmesi için en güvenilir ve tavsiye edilen metrik
- S-CVI/UA: Çok katı geçerlilik standartları gereken uygulamalarda (tıbbi alet onayı, sertifikasyon vb.)
Yaygın Hatalar ve Kaçınılması Gerekenler
1. Hata: Çok Az Uzman Paneli Kullanmak
Problem: 3-4 uzman ile CVR hesaplamak istatistiksel geçerliliği azaltır.
Çözüm: En az 5, daha iyi ise 10-20 uzman kullanın.
2. Hata: Uzman Niteliklerine Dikkat Etmemek
Problem: Alanında gerçek uzman olmayan insanları panele almak sonuçları geçersiz kılar.
Çözüm: Açık bir "uzman" tanımı yapın (örn. "5+ yıl deneyim, doktora derecesi, yayınlanmış araştırmaları var").
3. Hata: Talimatları Açık Sunmamak
Problem: Uzmanlar "gerekli" tanımının ne olduğunu anlamazsa, değerlendirmeler tutarsız olur.
Çözüm: Açık tanımlar ve örnekler sağlayın. Pilot test yapın.
4. Hata: CVR Eşiğini Yanlış Uygulamak
Problem: Örneğin 15 uzman için eşik 0.49 iken, 0.50'yi geçmek yeterliymiş gibi davranmak.
Çözüm: Her zaman doğru uzman sayısı için doğru eşiği kullanın.
5. Hata: Düşük CVR Maddeleri İçerde Tutmak
Problem: "Çok çalıştık, maddeleri silmeyelim" diyerek geçersiz maddeler ölçekte kalmış olabilir.
Çözüm: Bilimsel standartlara sadık kalın. Geçersiz maddeler pilot test'te zaten sorun yaratacaktır.
6. Hata: CVR'yi Tek Başına Raporlamak
Problem: Sadece CVR değerlerini sunmak, diğer geçerlilik göstergelerinin eksikliğini ortaya koyar.
Çözüm: CVR, I-CVI, S-CVI/Ave ve S-CVI/UA birlikte raporlayın.
Kaynaklar
İlişkili Kavramlar
CVR genellikle diğer geçerlilik göstergeleriyle birlikte kullanılır:
- I-CVI (Item-level Content Validity Index): Madde düzeyinde uzman anlaşması oranı. Gerekli diyen uzman sayısının toplam uzman sayısına oranı.
- CVI (Content Validity Index): Tüm CVR değerlerinin basit ortalaması. Ölçek geneli için hızlı bir özet sağlar.
- S-CVI/Ave (Scale-level CVI/Average): Tüm I-CVI değerlerinin ortalaması. Ölçek düzeyinde en güvenilir geçerlilik göstergesi.
- S-CVI/UA (Scale-level CVI/Universal Agreement): Tüm uzmanların hemfikir olduğu madde yüzdesinin 100'e bölümü. Çok katı bir standart.
- Yapı Geçerliliği: Ölçeğin nihai formuyla pilot test yapılır, faktör analizi ile kontrol edilir.