evaluasi imk

17
Evaluasi IMK Evaluasi IMK

Upload: abdul-fauzan

Post on 15-Aug-2015

58 views

Category:

Engineering


1 download

TRANSCRIPT

Evaluasi IMKEvaluasi IMK

PendahuluPendahuluanan Adanya perdebatan tentang penilaian sebuah tampilanAdanya perdebatan tentang penilaian sebuah tampilan Ada yang mengatakan “BAGUS”, “SEDANG”, atau Ada yang mengatakan “BAGUS”, “SEDANG”, atau

“JELEK”“JELEK” Adanya asumsi bahwa selama suatu software dapat Adanya asumsi bahwa selama suatu software dapat

digunakan, maka itu sudah cukup bagusdigunakan, maka itu sudah cukup bagus Kegiatan evaluasi suatu software atau tampilan Kegiatan evaluasi suatu software atau tampilan

merupakan kegiatan yang dihindari karena akan merupakan kegiatan yang dihindari karena akan menambah waktu pengembangan dan biayamenambah waktu pengembangan dan biaya

Kegiatan evaluasi merupakan sesuatu yang sangat Kegiatan evaluasi merupakan sesuatu yang sangat penting karena desainer dapat mengetahui apakah penting karena desainer dapat mengetahui apakah karyanya berguna dan diinginkan oleh userkaryanya berguna dan diinginkan oleh user

Pendahuluan (Pendahuluan (lanj.lanj.)) Evaluasi adalah sebuah proses yang secara sistematis Evaluasi adalah sebuah proses yang secara sistematis

mengumpulkan data yang menginformasikan kepada mengumpulkan data yang menginformasikan kepada kita tentang pendapat seseorang atau sekelompok user kita tentang pendapat seseorang atau sekelompok user mengenai pengalamannnya menggunakan sebuah mengenai pengalamannnya menggunakan sebuah produk untuk sebuah tugas tertentu dalam sebuah produk untuk sebuah tugas tertentu dalam sebuah lingkungan tertentulingkungan tertentu

Seorang user berkeinginan untuk menggunakan Seorang user berkeinginan untuk menggunakan sebuah sistem yang mudah dipelajari, dan sebuah sistem yang mudah dipelajari, dan penggunaannya sedapat mungkin efektif, efisien, penggunaannya sedapat mungkin efektif, efisien, aman, dan memuaskan. Selain itu, sedapat mungkin aman, dan memuaskan. Selain itu, sedapat mungkin menyenangkan, atraktif, menantang, dllmenyenangkan, atraktif, menantang, dll

Mengapa Evaluasi DibutuhkanMengapa Evaluasi Dibutuhkan

Desainer tidak dapat berasumsi bahwa orang lain Desainer tidak dapat berasumsi bahwa orang lain seperti dirinya, dan mengikuti seperti dirinya, dan mengikuti design guidelinesdesign guidelines menjamin bahwa karyanya pasti bagusmenjamin bahwa karyanya pasti bagus

Evaluasi dibutuhkan untuk memeriksa apakah user Evaluasi dibutuhkan untuk memeriksa apakah user dapat menggunakan produk tersebut dan dapat menggunakan produk tersebut dan menyukainyamenyukainya

Evaluasi kepuasan penggunaan terhadap sebuah Evaluasi kepuasan penggunaan terhadap sebuah produk dapat dilakukan menggunakan kuesioner dan produk dapat dilakukan menggunakan kuesioner dan atau interviewatau interview

Kapan Evaluasi DilakukanKapan Evaluasi Dilakukan Evaluasi dapat dilakukan pada:Evaluasi dapat dilakukan pada:

Selama proses pembuatan produk tersebut supaya selalu sama dengan Selama proses pembuatan produk tersebut supaya selalu sama dengan yang diminta atau dibutuhkan oleh user. Proses ini biasa disebut yang diminta atau dibutuhkan oleh user. Proses ini biasa disebut formative evaluationsformative evaluations

Saat produk tersebut telah jadi yaitu melalui Saat produk tersebut telah jadi yaitu melalui prototypeprototype Saat produk tersebut telah dipasarkan. Jika ada kekurangan atau Saat produk tersebut telah dipasarkan. Jika ada kekurangan atau

perubahan kebutuhan user, maka produk tersebut bisa dibuatkan versi perubahan kebutuhan user, maka produk tersebut bisa dibuatkan versi yang terbaruyang terbaru/upgrade,/upgrade, mis: program-program Windows, Winamp, dll. mis: program-program Windows, Winamp, dll. Evaluasi ini biasa disebut Evaluasi ini biasa disebut summative evaluations summative evaluations

Evaluasi produk dapat dilakukan melalui riset pasar, baik Evaluasi produk dapat dilakukan melalui riset pasar, baik melalui perorangan atau sekelompok usermelalui perorangan atau sekelompok user

Paradigma EvaluasiParadigma Evaluasi

““Quick and dirty” evaluationQuick and dirty” evaluation Usability testingUsability testing Field studiesField studies Predictive evaluationPredictive evaluation

““Quick and Dirty” EvaluationQuick and Dirty” Evaluation

Adalah umpan balik berupa keinginan dan Adalah umpan balik berupa keinginan dan yang disukai dari user atau konsultan yang yang disukai dari user atau konsultan yang disampaikan secara informal kepada desainer disampaikan secara informal kepada desainer tentang produk yang dibuatnyatentang produk yang dibuatnya

Evaluasi ini dapat dilakukan pada semua Evaluasi ini dapat dilakukan pada semua tahapan pembuatan produk dan penekanannya tahapan pembuatan produk dan penekanannya pada masukan yang cepat/sesingkat mungkin pada masukan yang cepat/sesingkat mungkin daripada temuan yang didokumentasikan daripada temuan yang didokumentasikan secara hati-hatisecara hati-hati

Usability TestingUsability Testing Evaluasi ini cukup dominan digunakan pada tahun 1980-anEvaluasi ini cukup dominan digunakan pada tahun 1980-an Melibatkan pengukuran kinerja user dalam mempersiapkan Melibatkan pengukuran kinerja user dalam mempersiapkan

tugasnya secara hati-hati, dari proses inilah maka dibuatkan tugasnya secara hati-hati, dari proses inilah maka dibuatkan desain sistemnyadesain sistemnya

Kinerja user umumnya diukur dalam jumlah kesalahan yang Kinerja user umumnya diukur dalam jumlah kesalahan yang dilakukan dan waktu yang dibutuhkan untuk menyelesaikan tugasdilakukan dan waktu yang dibutuhkan untuk menyelesaikan tugas

Cara yang umumnya digunakan untuk membuat sistem ini yaitu Cara yang umumnya digunakan untuk membuat sistem ini yaitu dengan cara:dengan cara: Melihat secara langsungMelihat secara langsung Merekamnya dalam videoMerekamnya dalam video

Evaluasi ini menggunakan kuesioner dan wawancara kepada user Evaluasi ini menggunakan kuesioner dan wawancara kepada user tentang kepuasannya menggunakan sistem tersebuttentang kepuasannya menggunakan sistem tersebut

Penelitian biasanya dilakukan di dalam sebuah laboratorium, Penelitian biasanya dilakukan di dalam sebuah laboratorium, dimana user diberi suatu dimana user diberi suatu treatmenttreatment tertentu (mis: cahaya, suara, tertentu (mis: cahaya, suara, warna, dll) atau bisa juga tanpa warna, dll) atau bisa juga tanpa treatmenttreatment

Field StudiesField Studies Berbeda dengan Berbeda dengan usability testingusability testing, evaluasi ini dilakukan di lingkungan asli , evaluasi ini dilakukan di lingkungan asli

dimana user bekerja, hal ini bertujuan untuk meningkatkan pemahaman dimana user bekerja, hal ini bertujuan untuk meningkatkan pemahaman tentang kerja user secara alami dan bagaimana teknologi tersebut tentang kerja user secara alami dan bagaimana teknologi tersebut berdampak padanyaberdampak padanya

Evaluasi ini dapat digunakan untuk:Evaluasi ini dapat digunakan untuk: Membantu mengidentifikasi kesempatan sebuah teknologi baruMembantu mengidentifikasi kesempatan sebuah teknologi baru Menentukan kebutuhan-kebutuhan untuk melakukan desainMenentukan kebutuhan-kebutuhan untuk melakukan desain Memfasilitasi pengenalan sebuah teknologiMemfasilitasi pengenalan sebuah teknologi Evaluasi teknologiEvaluasi teknologi

Teknik yang dapat digunakan:Teknik yang dapat digunakan: InterviewInterview Observasi (pengamatan yang hanya dilakukan oleh desainer)Observasi (pengamatan yang hanya dilakukan oleh desainer) Partisipatori (user dilibatkan dalam pembuatan desain)Partisipatori (user dilibatkan dalam pembuatan desain) Ethnography (penilaian berdasarkan budaya)Ethnography (penilaian berdasarkan budaya)

Dari data yang didapatkan tersebut, maka desainer dapat melakukan Dari data yang didapatkan tersebut, maka desainer dapat melakukan evaluasi, baik secara kuantitatif maupun kualitatif, terhadap produknyaevaluasi, baik secara kuantitatif maupun kualitatif, terhadap produknya

Predictive EvaluationPredictive Evaluation

Didasarkan pada pengalaman seorang ahli dalam Didasarkan pada pengalaman seorang ahli dalam menghadapi user, dan biasanya hal ini dijadikan menghadapi user, dan biasanya hal ini dijadikan patokan untuk memprediksi masalah-masalah patokan untuk memprediksi masalah-masalah penggunaan sebuah produkpenggunaan sebuah produk

Keuntungan evaluasi ini:Keuntungan evaluasi ini: User yang diinginkan tidak perlu untuk dihadirkanUser yang diinginkan tidak perlu untuk dihadirkan Proses pembuatannya relatif cepat, murah, dan cukup Proses pembuatannya relatif cepat, murah, dan cukup

disukai oleh perusahaandisukai oleh perusahaan Tahun-tahun terakhir ini, evaluasi ini cukup populerTahun-tahun terakhir ini, evaluasi ini cukup populer

Teknik-Teknik EvaluasiTeknik-Teknik Evaluasi

Observing usersObserving users Asking users their opinionsAsking users their opinions Asking experts their opinionsAsking experts their opinions Testing user’s performanceTesting user’s performance Modeling users’ task performance to predict Modeling users’ task performance to predict

the efficacy of a user interfacethe efficacy of a user interface

Hubungan Antara Paradigma dan Hubungan Antara Paradigma dan Teknik EvaluasiTeknik Evaluasi

TeknikTeknik ““Quick and Dirty”Quick and Dirty”

Observing usersObserving users Penting untuk melihat bagaimana user Penting untuk melihat bagaimana user berperilaku dalam lingkungan aslinyaberperilaku dalam lingkungan aslinya

Asking usersAsking users Diskusi dengan user dan user yang Diskusi dengan user dan user yang potensial, dalam suatu group atau potensial, dalam suatu group atau group yang khususgroup yang khusus

Asking expertsAsking experts Untuk mendapatkan kritik tentang Untuk mendapatkan kritik tentang kegunaan sebuah prototipekegunaan sebuah prototipe

User testingUser testing ======

Modeling users’ task performanceModeling users’ task performance ======

Hubungan Antara Paradigma dan Hubungan Antara Paradigma dan Teknik Evaluasi (Teknik Evaluasi (lanj.lanj.))

TeknikTeknik Usability TestingUsability Testing

Observing usersObserving users Melalui video dan catatan, dilakukan analisa untuk Melalui video dan catatan, dilakukan analisa untuk mengidentifikasi kesalahan, investigasi cara kerja mengidentifikasi kesalahan, investigasi cara kerja software, atau menghitung kinerja waktusoftware, atau menghitung kinerja waktu

Asking usersAsking users Dengan menggunakan kuesioner kepuasan, maka Dengan menggunakan kuesioner kepuasan, maka dilakukan pengumpulan opini user. Interview kadang dilakukan pengumpulan opini user. Interview kadang digunakan untuk mendapatkan opini yang lebih detaildigunakan untuk mendapatkan opini yang lebih detail

Asking expertsAsking experts ======

User testingUser testing Dilakukan di laboratoriumDilakukan di laboratorium

Modeling users’ Modeling users’ task performancetask performance

======

Hubungan Antara Paradigma dan Hubungan Antara Paradigma dan Teknik Evaluasi (Teknik Evaluasi (lanj.lanj.))

TeknikTeknik Field StudiesField Studies

Observing usersObserving users Dilakukan di lokasi manapun juga. Dalam studi Dilakukan di lokasi manapun juga. Dalam studi etnografi, evaluator turut serta dalam lingkungan useretnografi, evaluator turut serta dalam lingkungan user

Asking usersAsking users Evaluator dapat melakukan interview atau Evaluator dapat melakukan interview atau mendiskusikan apa yang dilihatnya kepada peserta. mendiskusikan apa yang dilihatnya kepada peserta.

Asking expertsAsking experts ======

User testingUser testing ======

Modeling users’ Modeling users’ task performancetask performance

======

Hubungan Antara Paradigma dan Hubungan Antara Paradigma dan Teknik Evaluasi (Teknik Evaluasi (lanj.lanj.))

TeknikTeknik PredictivePredictive

Observing usersObserving users ======

Asking usersAsking users === ===

Asking expertsAsking experts Seorang menggunakan patokannya dalam pembuatan Seorang menggunakan patokannya dalam pembuatan desain untuk memprediksi kemanjuran sebuah tatap desain untuk memprediksi kemanjuran sebuah tatap mukamuka

User testingUser testing ======

Modeling users’ Modeling users’ task performancetask performance

Model yang digunakan untuk memprediksi kemanjuran Model yang digunakan untuk memprediksi kemanjuran sebuah tatap muka atau membandingkan kinerja waktu sebuah tatap muka atau membandingkan kinerja waktu dengan versinyadengan versinya

Skala LikertSkala Likert Merupakan suatu skala yang cukup banyak digunakan Merupakan suatu skala yang cukup banyak digunakan

untuk melakukan evaluasiuntuk melakukan evaluasi Ukuran skala mulai dari 4 hingga 7Ukuran skala mulai dari 4 hingga 7 Ukuran 4 (1 = sangat buruk, 2 = buruk, 3 = bagus, 4 = Ukuran 4 (1 = sangat buruk, 2 = buruk, 3 = bagus, 4 =

sangat bagus) sangat bagus) Ukuran 5 (1 = sangat buruk, 2 = buruk, 3 = netral, 4 = Ukuran 5 (1 = sangat buruk, 2 = buruk, 3 = netral, 4 =

bagus, 5 = sangat bagus)bagus, 5 = sangat bagus) Ukuran 7 (1 = sangat buruk, 2 = buruk, 3 = agak Ukuran 7 (1 = sangat buruk, 2 = buruk, 3 = agak

buruk, 4 = netral, 5 = agak bagus, 6 = bagus, 7 = buruk, 4 = netral, 5 = agak bagus, 6 = bagus, 7 = sangat bagus)sangat bagus)

Penelitian umumnya menggunakan 5 skalaPenelitian umumnya menggunakan 5 skala

Contoh EvaluasiContoh EvaluasiBayangkan web site, kemudian berikan penilaiannya:Bayangkan web site, kemudian berikan penilaiannya:

KriteriaKriteria EvaluatorEvaluator Rata-Rata-ratarata11 22 33 44 55

LayoutLayout 55 44 44 33 44 44

Kecepatan aksesKecepatan akses 33 44 33 33 44 3.43.4

Prosedur akses, mis: KHS, KRSProsedur akses, mis: KHS, KRS 44 44 55 33 44 44

Perpaduan warnaPerpaduan warna 44 44 22 44 22 3.23.2

Informasi yang selalu Informasi yang selalu up to dateup to date 55 44 33 44 44 4.24.2

Rata-rataRata-rata 3.763.76

•Dari hasil tersebut, maka secara keseluruhan pendapat para evaluator adalah netral karena nilainya 3.76

•Kriteria yang paling bagus adalah informasi yang selalu up to date, sedangkan yang harus mendapat perhatian lebih baik adalah kriteria perpaduan warna