Validitas dan Reliabilitas dalam Evaluasi Tes

Validitas mengacu pada sejauh mana tes atau instrumen mengukur apa yang seharusnya diukur.

Salah satu ciri validitas adalah memiliki argumen dan teori yang logis.

Validitas adalah konsep yang bersifat unitary, artinya ia merujuk pada satu konstruk.

Validitas bukan hanya satu angka, tetapi didukung oleh bukti empiris.

Reliabilitas yang rendah TIDAK selalu berarti validitas rendah. Validitas dan reliabilitas adalah konsep yang berbeda.

Reliabilitas yang tinggi TIDAK selalu menjamin validitas tinggi. Validitas dan reliabilitas adalah konsep yang berbeda.

Interpretasi skor tes terkait dengan bukti validitas yang ditemukan.

Suatu tes dikatakan valid jika interpretasi skornya memiliki dasar yang kuat dan dapat dipercaya.

Upaya mengumpulkan bukti validitas dengan memastikan soal tes selaras dengan tujuan dan capaian pembelajaran yang diharapkan.

Menilai validitas tes berdasarkan struktur internal tes, seperti analisis faktor untuk mengukur apakah tes dikelompokkan sesuai teori.

Upaya mengumpulkan bukti validitas dengan menganalisis bagaimana responden berespons terhadap tes.

Mengukur tingkat keajegan atau konsistensi hasil tes, dapat diukur dengan analisis faktor.

Analisis faktor konfirmatori digunakan untuk menguji apakah tes dikelompokkan ke dalam sejumlah faktor sesuai dengan teori yang digunakan.

Analisis faktor eksploratori digunakan untuk menemukan faktor-faktor laten yang mendasari item-item tes.

Skor tes menghasilkan profil yang mencerminkan multidimensi.

Pengumpulan bukti validitas yang berkaitan dengan multidimensi tes, di mana skor tes menghasilkan profil tertentu.

Teknik yang melibatkan perbandingan item-item pada instrumen pengukur dengan skor total instrumen tersebut. Hal ini membantu mengidentifikasi item-item yang tidak konsisten dan berkontribusi pada validitas konvergen instrumen.

Teknik yang melibatkan perbandingan skor instrumen yang dibuat dengan skor instrumen lain yang telah valid. Hal ini menunjukkan seberapa baik instrumen baru tersebut mengukur konsep yang sama dengan instrumen valid yang sudah ada. Melalui ini, validitas konvergen dapat diukur.

Teknik yang melibatkan pengumpulan data melalui kuesioner dan kemudian wawancara untuk menggali proses kognitif responden saat mengisi kuesioner. Hal ini membantu memahami bagaimana responden menafsirkan dan merespon item-item pada kuesioner, serta validitas isi instrumen.

Teknik yang melibatkan perbandingan tanggapan responden terhadap item-item kuesioner dengan aspek-aspek motivasi dan strategi belajar yang diukur. Melalui analisis terhadap jawaban dan interpretasi responden, diperoleh gambaran yang lebih komprehensif tentang validitas konten kuesioner.

Suatu metode yang digunakan untuk menilai kualitas konten instrumen tes dengan melibatkan ahli di bidang terkait. Ahli menilai relevansi item-item tes dengan konstruksi yang ingin diukur.

Suatu metode yang digunakan untuk menilai validitas konten item tes berdasarkan penilaian ahli. Metode ini menghitung proporsi item yang dianggap relevan oleh setiap expert dan kemudian menghitung rata-ratanya.

Suatu metode yang memungkinkan pengumpulan data tentang relevansi item tes dengan konstruksi. Metode ini melibatkan pengamatan dan pencatatan suara dan perkataan peserta tes.

Suatu metode penilaian validitas konten yang menggunakan skala Likert untuk mengukur persetujuan ahli terhadap relevansi item tes dengan konstruksi yang ingin diukur.

Suatu metode penilaian validitas konten yang menggunakan analisis statistik untuk mengukur seberapa besar setiap item tes berkontribusi pada pengukuran konstruksi.

Suatu metode penilaian validitas konten yang membandingkan item tes dengan tujuan pembelajaran. Metode ini mengukur seberapa besar item tes sesuai dengan tujuan pembelajaran yang ingin dicapai

Suatu metode analisis data yang melibatkan pengumpulan informasi tambahan dari peserta tes untuk memahami lebih dalam jawaban mereka. Metode ini digunakan untuk mendapatkan data kualitatif tentang proses berpikir peserta tes.

Suatu proses yang melibatkan pencocokan item tes dengan tujuan pembelajaran dan konstruksi yang ingin diukur. Proses ini bertujuan untuk memastikan bahwa item tes relevan dan mewakili secara memadai konstruksi yang diukur.

I-CVI (Item Content Validity Index) adalah suatu indeks yang digunakan untuk menilai tingkat validitas konten item dalam suatu instrumen. I-CVI dihitung dengan menghitung proporsi ahli yang memberikan rating 3 atau 4 pada skala penilaian item. Nilai I-CVI yang ideal cenderung tinggi, mendekati 1, menandakan bahwa item tersebut dianggap relevan dan mewakili konstruk yang diukur.

S-CVI (Scale Content Validity Index) menunjukkan tingkat validitas konten keseluruhan instrumen, bukan hanya satu item. S-CVI dihitung dengan menghitung proporsi item dalam instrumen yang memiliki I-CVI yang memenuhi kriteria. Nilai S-CVI juga idealnya mendekati 1, menunjukkan bahwa instrumen secara keseluruhan dianggap valid dalam mengukur konstruk.

IOC (Item Objective Congruence) menunjukkan seberapa baik item dalam instrumen selaras dengan tujuan yang ingin diukur. Nilai IOC dihitung berdasarkan penilaian ahli terhadap relevansi item dengan tujuan. Nilai IOC yang lebih tinggi menandakan keselarasan yang lebih kuat antara item dengan tujuan.

Pada tahap pengembangan instrumen, jika nilai IOC suatu item berada di bawah batas minimum yang ditentukan, maka item tersebut perlu direvisi atau bahkan dihilangkan dari instrumen. Batas minimum IOC ditentukan oleh peneliti berdasarkan aspek-aspek seperti jumlah ahli yang terlibat dan tingkat kompleksitas konstruk yang diukur.

Confirmatory Factor Analysis (CFA) adalah metode statistik yang digunakan untuk menguji apakah model pengukuran suatu konstruk yang dibuat berdasarkan teori suatu konstruk sejalan dengan data yang diperoleh. CFA membantu peneliti dalam memastikan bahwa variabel-variabel yang digunakan dalam penelitian benar-benar mengukur konsep yang ingin diukur.

CFA digunakan untuk menguji apakah model pengukuran suatu konstruk yang dibuat berdasarkan teori suatu konstruk sejalan dengan data yang diperoleh. Dengan kata lain, CFA memungkinkan peneliti untuk memeriksa apakah variabel-variabel yang digunakan dalam penelitian benar-benar mengukur konsep yang ingin diukur.

Dalam CFA, peneliti memiliki hipotesis awal tentang bagaimana variabel-variabel dihubungkan dan bagaimana mereka membentuk faktor-faktor latent. Hipotesis ini berasal dari teori atau literatur penelitian yang ada. CFA kemudian menguji hipotesis ini dengan data yang dikumpulkan.

Salah satu fungsi utama CFA adalah untuk menyelidiki apakah model pengukuran yang diajukan sesuai dengan data yang dikumpulkan. Ini dilakukan dengan menguji kecocokan model (model fit) dengan menggunakan berbagai indeks statistik.

Salah satu contohnya, jika peneliti ingin mengukur konsep 'kecemasan' dengan menggunakan beberapa item pertanyaan, CFA dapat digunakan untuk melihat apakah item-item tersebut benar-benar mengukur konsep 'kecemasan' sebagaimana yang dihipotesiskan. Dengan kata lain, CFA membantu untuk memastikan bahwa instrumen penelitian (seperti kuesioner) valid dan dapat diandalkan untuk mengukur konsep yang ingin diukur.