menggunakan alisjk (analisis lembar jawaban kompuer/analisis item soal)
TRANSCRIPT
Menggunakan AlisJKAnalisis Lembar Jawaban Komputer | Analisa Item Soal
http://wiki.openthinklabs.com/Products_and_Services/alisjk-analisis-lembar-jawaban-komputer
Wildan [email protected]
Mulai
Database Sudah ada ?
Buat Database Baru
Lanjutkan DatabaseYg sudah ada
(Lanjutkan)Import LJU
Belum
Sudah
Import Kunci Jawaban(Minimal Isi Kode Naskah
Pada Kunci Jawaban, data ini Diperlukan dalam proses validasi LJU)
Bersambung ... Import Peserta
Sudah
Validasi Data LJUData LJU OK ?
Belum
Sudah
Proses pengolahan nilai
Bersambung ...
● Nilai mentah rumus● Nilai mentah iteman● Nilai anchor
…......
Item Analysis (Analisa Item Soal)
Ada yang dianulir ?Ya
Tidak
Proses pengolahan nilai
Hitung :● Nilai mentah rumus● Nilai mentah iteman● Nilai anchor
Perlu lakukanPenyetaraan Naskah
(Equiting) Analisa KesetaraanAntar Naskah
(Equiting)
Ya
Tidak
Lakukan :● Transformasi Nilai Baku● Transformasi Nilai Nasional
Bersambung ...
Proses Alokasi
Selesai
Pintu Masuk
● Lanjut edit database yang ada, atau● Buat database baru (setiap satu proses seleksi,
databasenya tersendiri)
Pintu MasukPilih Database yang Sudah Ada
Setelah login
Koneksi/Database yang digunakan
Pintu Masuk… atau Buat Database Baru
● Administrator → Pengaturan → Database
Proses Input Data
● Konversi data hasil pembacaan LJU atau import dari sumber data Lainnya
● Konversi data kunci soal● Import Data Peserta Ujian
Proses Input DataKonversi Data Hasil Pembacaan LJU
● Jawaban → Utilitas
Proses Input DataImport dari Sumber Data Lainnya
● Buat File Job Transformasi Pentaho, dan tambahkan di Administrator → Pengaturan → File Transformasi Pentaho
Proses Input DataKonversi data kunci soal
● Gunakan menu Administrator → Kunci Jawaban → Tambah Kunci Jawaban
Proses Input DataPeriksa Ulang Soal Anchor
Proses Input DataPengaturan Jenis Soal
● Administrator → Pengaturan → Jenis Soal
Proses Input DataPengaturan Kelompok Soal
● Administrator → Pengaturan → Kelompok Soal
Proses Input DataPengaturan Kelompok Peserta
● Administrator → Pengaturan → Kelompok Peserta
Proses Pengolahan Data Mentah
● Validasi Data LJU dan LJU Fisik● Penilaian Sesuai dengan Algoritma yang Dipilih● Validasi data peserta (semua peserta yang ada
LJUnya ada data mentahnya)
Proses Pengolahan Data MentahValidasi Data LJU dan LJU Fisik
● Jalankan Utilitas/Menu Berikut :● LJU Utilitas Transformasi Pentaho → → →(Pilih) CariLJUGanda.kjb
● Laporan Validitas LJU LJU Tak Terbaca → →Oleh Scanner
● Laporan Validitas LJU LJU Ganda→ →● Laporan Validitas LJU Validasi LJU→ →● Laporan Validitas LJU Kode Soal Tidak → →Valid
● Laporan Validitas LJU Jumlah Peserta → →Per Wilayah
Analisa Kecurangan
● Laporan Analisa Kecurangan Pola → →Kode Soal
Proses Pengolahan Data MentahPenilaian Sesuai dengan Algoritma yang Dipilih
● LJU Utilitas –> (Tab) CLI → →(Pilih) alisjk:nilaijawabanKlik icon help, untuk
melihat informasi detailtentang perintah yg dpilih
Klik icon log, untukmelihat log progress
proses perhitungan nilai
CLI Help & Log
Proses Pengolahan Data MentahPenilaian untuk Kebutuhan Item Analysis (Analisa Item Soal)
● LJU Utilitas –> (Tab) CLI → →(Pilih) alisjk:nilaiiteman
Untuk informasi lebih lanjut tentang Analisas Item Soal, silahkan kunjungi : http://bit.ly/xPVYrA
Melihat Nilai Berdasarkan Rumusdan untuk Analisa Item Soal
Seorang Peserta● Pada data grid di menu LJU, klik tombol Lihat
pada peserta yang ingin dilihat nilainya.
Detail
Melihat Nilai Berdasarkan Rumusdan untuk Analisa Item Soal
Seorang Peserta
Resume, nilai per komponen uji
Proses Analisa Data Mentah
● Item Analysis /Analisa Item Soal - Validasi data mentah (bisa jadi ada soal yang dianulir)
● Selectivity Power - algoritma pembobotan nilai total (nilai total adalah jumlah dari setiap komponen yang telah dibobotkan)
● Dapat diproses per kode soal, ataupun langsung seluruh kode soal
● Menu : Analisis
Proses Analisa Data MentahItem Analysis
Proses Analisa Data MentahLaporan Analisa Item Soal
Proses Analisa Data MentahAda Soal yang Dianulir
● Edit Kunci Kode Soal yang dianulir, dan pilih nomor mana saja yang dianulir Administrator Kunci Jawaban→
Klik Edit
Proses Analisa Data MentahAda Soal yang Dianulir
Pilih soal yang dianulir
Menghitung Nilai MentahDengan Pembobotan
Proses Pengolahan Nilai
● Analisa kesetaraan antar naskah (equiting)● Transformasi nilai baku● Transformasi nilai nasional
Proses Pengolahan NilaiAnalisa kesetaraan antar naskah (equating)
● Equating procedures :● A design for collecting test data for equating● A clearly defined level of expected correspondence
among test scores● Spesific statistical procedures that are used to
estimate score correspondence
Proses Pengolahan NilaiAnalisa kesetaraan antar naskah (equating)
Menghitung Nilai Baku
Menghitung Nilai Nasional
Proses Analisa Curang
● Analisa kode soal● Analisa kesengajaan no ujian yang sama
Proses Alokasi
● Eliminasi yang tidak eligible (exception, tidak curang, nilai mati)
● Algoritma alokasi● Tambah dan Kurang
Laporan● Validitas LJU
● Rekapitulasi LJU Invalid● Peserta Tidak Memiliki LJU● LJU Tidak Bertuan● LJU Tidak Terbaca Oleh Scanner● LJU Tidak Dibulatkan● LJU Ganda● Validasi Jumlah LJU● Kode Soal Tidak Valid● Jumlah Peserta Per Wilayah
Laporan● Analisa Kecurangan
● Pola Kode Soal
● Pasca● Peserta Pasca● Nilai Pasca
● Nilai● Nilai Anchor● Nilai Rata-Rata per Mata
Uji Per Kode Soal● Nilai Mati
● Analisa Nilai● Analisis Item Soal● Grafik RBIS● Percentile Kumulative● Selectivity Power
– Kelompok IPA– Kelompok IPS– Kemampuan Bahasa
Inggris– Kemampuan TPA
● Log Perubahan
Terimakasih
[email protected]@wildanmaulana
http://www.openthinklabs.com@openthinklabs
Untuk berdiskusi, silahkan bergabung di milis AlisJK : http://groups.google.com/group/alisjk?hl=id