ABCDEFGHIJKLMNOPQRSTUVWXYZ
1
Template Menghitung I-CVI, S-CVI, dan Kappa Termodifikasi
2
3
Cara menggunakan template ini
4
1) Sheet 'Data Rater': tiap reviewer memberi skor 1-4 untuk relevansi tiap item dengan konstruk (1 = sama sekali tidak relevan, 4 = sangat relevan). Isi hanya sel berwarna kuning. Baris 'CONTOH' adalah ilustrasi format pengisian (sesuai contoh di slide Pertemuan 11: dari 6 reviewer, 5 memberi nilai 3 atau 4, sehingga I-CVI = 0,83) dan tidak perlu dihapus atau diubah.
2) Sheet 'Perhitungan I-CVI & Kappa': terhitung otomatis dari sheet 'Data Rater'. Cek dulu sel Jumlah Rater (N) di bagian atas sheet ini sudah sesuai jumlah reviewer yang benar-benar dipakai kelompok Anda.
3) Sheet 'S-CVI': ringkasan S-CVI/Ave dan S-CVI/UA, terhitung otomatis.
5
6
Rumus I-CVI
7
I-CVI = (jumlah reviewer yang memberi skor 3 atau 4) / (jumlah seluruh reviewer). Dihitung untuk tiap item, satu angka per item, berkisar 0-1.
8
9
Kriteria kelulusan item (I-CVI)
10
Mengikuti Lynn (1986): dengan 3-5 reviewer, I-CVI harus = 1 (semua reviewer sepakat); dengan 6-8 reviewer, I-CVI minimal 0,83; dengan 9 reviewer atau lebih, I-CVI minimal 0,78. Kriterianya lebih ketat kalau reviewernya sedikit, karena peluang kesepakatan itu terjadi secara kebetulan justru lebih besar. Sheet 'Perhitungan I-CVI & Kappa' menerapkan ambang batas ini otomatis berdasarkan Jumlah Rater (N) yang diisi.
11
12
Kenapa perlu dikoreksi dengan kappa?
13
I-CVI saja bisa memberi kesan terlalu baik, karena sebagian kesepakatan tetap bisa muncul secara kebetulan (khususnya kalau reviewernya sedikit). Kappa termodifikasi (kappa*) mengoreksi I-CVI dengan memperhitungkan peluang kesepakatan yang terjadi karena kebetulan (Polit, Beck, & Owen, 2007):
14
 p_c (peluang kebetulan) = KOMBINASI(N, A) x 0,5^N
kappa* = (I-CVI - p_c) / (1 - p_c)
dengan N = jumlah reviewer, A = jumlah reviewer yang menilai item relevan (skor 3-4).
15
Patokan interpretasi kappa*: > 0,74 sangat baik; 0,60-0,74 baik; 0,40-0,59 cukup; di bawah 0,40 kurang.
16
17
Rumus S-CVI
18
S-CVI/Ave = rata-rata I-CVI seluruh item. Menggambarkan relevansi rata-rata skala. Patokan minimal yang lazim dilaporkan: S-CVI/Ave >= 0,90 (Polit & Beck, 2006).

S-CVI/UA = proporsi item yang disepakati SEMUA reviewer (universal agreement), yaitu proporsi item dengan I-CVI = 1,00. Jauh lebih ketat daripada S-CVI/Ave.

Kedua angka ini dihitung dari tabel yang persis sama, tetapi bisa memberi kesan yang sangat berbeda. Sebutkan SECARA EKSPLISIT cara perhitungan yang dipakai ketika melaporkan CVI di laporan kelompok Anda. Hindari hanya menulis 'CVI = 0,85' tanpa keterangan apapun.
19
20
Apa dimensi yang dinilai?
21
Umumnya, yang wajib dinilai reviewer adalah relevansi item dengan konstruk yang diukur. Tetapi, Anda boleh juga meminta reviewer menilai dimensi kejelasan/clarity dan derajat sentralitas/centrality atau importance item terhadap konstruk. Kalau ini yang Anda lakukan, pisahkan perhitungan I-CVI dan S-CVI untuk masing-masing dimensi.
22
23
Item yang tidak lolos
24
Perbaiki dulu, jangan langsung dibuang. Baca komentar reviewer, karena sering kali masalahnya ada pada penulisan/formulasi kalimatnya. Buang kalau item tersebut memang mengukur hal lain atau sudah diwakili oleh item lain yang lebih baik. Pertahankan kalau item itu penting secara konseptual dan tidak ada penggantinya, tetapi sertai dengan justifikasi yang jelas. Laporkan hasil sebelum dan sesudah perbaikan, beserta keputusan untuk tiap item.
25
26
Legenda
27
 Kuning = isi di sini
28
 Abu-abu = baris contoh, jangan diubah
29
30
Sumber
31
Lynn, M. R. (1986). Determination and quantification of content validity. Nursing Research, 35(6), 382-385.
Polit, D. F., & Beck, C. T. (2006). The content validity index: Are you sure you know what's being reported? Critique and recommendations. Research in Nursing & Health, 29(5), 489-497.
Polit, D. F., Beck, C. T., & Owen, S. V. (2007). Is the CVI an acceptable indicator of content validity? Appraisal and recommendations. Research in Nursing & Health, 30(4), 459-467.
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100