IMPLEMENTASI SISTEM PENILAIAN ITEM RESPONSE THEORY (IRT) PADA UJIAN BERBASIS KOMPUTER PENERIMAAN CALON MAHASISWA PROGRAM PASCASARJANA USK

Tes Kemampuan dapat dinilai dengan pendekatan Classical Test Theory(CTT) dan Item Response Theory (IRT). Penilaian dengan metode CTT sudah umumdigunakan namun hasilnya kurang memperhatikan hubungan antara peserta dengankarakteristik butir soal. IRT merupakan teori yang dikembangkan untukmemperbaiki keterbatasan yang dimiliki oleh CTT. Berdasarkan kelebihan darimetode IRT tersebut, penelitian ini mengimplementasikan metode IRT pada sistempenilaian ujian berbasis komputer, membandingkan hasil CTT dan IRT,menganalisis fungsionalitas dan usability dari sistem ujian berbasis komputer.Sistem dibangun menggunakan framework Django, React, dan Safe Exam Browser(SEB). Sistem yang telah dibangun diujicoba terhadap 709 peserta calon mahasiswaProgram Pascasarjana (PPs) Universitas Syiah Kuala tahun 2020 periode 1 dengan20 butir soal. Hasil ujian kemudian dianalisis parameter butir soal dengan hasil 10butir soal tergolong sedang, 9 butir soal tergolong sulit dan 1 butir soal dieliminasikarena memiliki nilai daya pembeda negatif. Peringkat yang didapatkanmenggunakan metode IRT dibandingkan dengan peringkat dengan metode CTT.Hasil perbandingan tersebut menunjukkan bahwa peringkat peserta mengalamiperubahan. Sistem yang telah dibangun diuji fungsionalitasnya menggunakanmetode Blackbox Testing dengan hasilnya, seluruh fitur dan fungsi aplikasi yangtelah dibangun berhasil berjalan dengan baik. Selanjutnya pengujian usabilitydilakukan terhadap 537 responden menggunakan System Usability Scale (SUS)memperoleh skor akhir 74,7%. Berdasarkan skor tersebut dapat disimpulkan bahwasistem yang sudah dikembangkan berada pada skala C, dapat diterima dan memilikiadjective rating excellent.Kata kunci : Item Response Theory, Classical Test Theory, Ujian BerbasisKomputer, Black Box Testing, System Usability Scal