7/23/2019 IMK 9 - Evaluasi
1/30
7/23/2019 IMK 9 - Evaluasi
2/30
T
injauan
Evaluasi menguji daya guna (usability) dan fungsi
(functionality) dari sistem interaktif.
E
valuasi Evaluasi digunakan untuk melihat apakah hasil
rancangan dengan proses uji coba sistem yang
telah dibuat sesuai dengan permintaan pengguna.
Mengumpulkan data tentang daya guna dari
desain oleh kelompok pengguna tertentu untuk
kegiatan tertentu dalam lingkungan tertentu.
7/23/2019 IMK 9 - Evaluasi
3/30
T
ujuan Evaluasi
Menilai tingkat fungsionalitas sistem.
Menilai efek antarmuka pada pengguna.Mengidentifikasi masalah yang spesifik.
7/23/2019 IMK 9 - Evaluasi
4/30
Mengapa?
Memastikan kecocokan dengan permintaan
pengguna/tujuan pengguna.
Apa yang di evaluasi? Web browser : berapa cepat pengguna temukan
item pada produk.
Ponsel seri terbaru: warna yang paling disukai,
rangkain fitur yang disukai.
Online Catalog: kecepatan menampilkan hasil,
variasi fitur pencarian.
7/23/2019 IMK 9 - Evaluasi
5/30
Di mana evaluasinya ?
1. Di laboratorium (Studi Laboratorium)
Keuntungan:
- Peralatan khusus tersedia
- Lingkungan yang terinterupsi
Kerugian:
- Kekurangan konteks- Sulit untuk mengamati beberapa pengguna
bekerjasama.
7/23/2019 IMK 9 - Evaluasi
6/30
Di mana evaluasinya?2. Di tempat alami pengguna produk (Studi
Lapangan)
Keuntungan:- Lingkungan natural / alami
- Konteksnya terjaga (walaupun observasi
mungkin mengubahnya)
Kerugian:
- Banyak yang mengganggu
-Noise(kegaduhan)
7/23/2019 IMK 9 - Evaluasi
7/30
Kapan evaluasi?
Produk baru
Perbaikan produk
7/23/2019 IMK 9 - Evaluasi
8/30
Formatif
Evaluasi yang dilakukan selama desain, untuk
memastikan produk sesuai dengan yang
diinginkan pengguna. Sumatif
Evaluasi yang dilakukan untuk menguji
kesuksesan suatu produk yang sudah selesai,
yaitu mencapai standar yang ditentukan
sebelumnya (ISO, NIST, BSI).
7/23/2019 IMK 9 - Evaluasi
9/30
Usability Testing
Field Study
Analytical Evaluation
7/23/2019 IMK 9 - Evaluasi
10/30
Observasi pengguna
Interview pengguna
KuesionerInterview ahli
Pengujian oleh pengguna
Pemodelan kinerja pengguna
7/23/2019 IMK 9 - Evaluasi
11/30
Memastikan konsistensi struktur navigasi,
penggunaan istilah, dan bagaimana sistem
merespon pengguna.
Mengukur kinerja pengguna untuk selesaikan tugastertentu.
Metode:
- Mengamati pengguna menggunakan sistem dan
merekam kesalahan, waktu.- Interview/kuesioner untuk memperoleh pendapat
pengguna.
7/23/2019 IMK 9 - Evaluasi
12/30
Dilakukan di laboratorium
Contoh aplikasi: wordprocessor, spreadsheet,
database.
7/23/2019 IMK 9 - Evaluasi
13/30
Memahami apa yang orang lakukan dan bagaimana
produk terlibat/berperan dalam kegiatan mereka.
Identifikasi kesempatan adanya teknologi baru
Membangun kebutuhan desain
Fasilitasi pengenalan teknologi baru atau meluncurkan
teknologi dalam konteks yang beda.
Evaluasi teknologi
Metode- Interview
- Observasi
7/23/2019 IMK 9 - Evaluasi
14/30
Evaluasi tanpa melibatkanend-user
Metode:
Inspeksi Heuristic Evaluation
Menggunakan standar untuk identifikasi masalah
usability.
Walkthrough
Melibatkan ahli untuk menjalankan skenario pada
prototipe aplikasi.
Gunakan simulasi penyelesaian masalah oleh
pengguna.
Fokus pada evaluasi desain kemudahan sistem
untuk dipelajari.
7/23/2019 IMK 9 - Evaluasi
15/30
Paradigma
Evaluasi Usability Testing Field Studies
AnalyticalEvaluation
PeranpenggunaJalankanserangkaian tugas Berlaku alami Tidak terlibat
Pengontrol Evaluator
mengontrolEvaluator danpengguna
Evaluator ahli
Lokasi Laboratorium Situasi alamiLaboratorium
dengan situasipengguna
Digunakan Dengan prototipe
atau produkDesain awal untukcek kebutuhan
Prototipe ataumodel
Tipe data Kuantitatif, statistik,hasil kuesioner
Kuantitatif, sketsa,skenario, dll
Studi kasus dari ahli
Umpan balikuntuk desain
Laporan pengujian Deskripsi/penjabar
anDaftar masalah dariahli
Filosofi Pendekatan aplikatifdengan eksperimen Observasi yangobjektif
7/23/2019 IMK 9 - Evaluasi
16/30
Kombinasi Pendekatan
Field Studyuntuk evaluasi ide desain awaldan dapatkan umpan balik.
Membuat perubahan pada desain.
Usability Test untuk cek fitur desain khusus.
Field Study untuk melihat apa yang terjadi
pada lingkungan alaminya.
Membuat perubahan akhir.
7/23/2019 IMK 9 - Evaluasi
17/30
Jenis Evaluasi
1.Evaluasi Eksperimen / Observasi
Mengumpulkan pendapat pengguna
Mengamati penggunaan
Eksperimen spesifikasi kegunaan
2. Evaluasi Prediktif
3. Evaluasi Interpretatif
7/23/2019 IMK 9 - Evaluasi
18/30
Evaluasi Prediktif
Dasar :
- Mengamati pengguna dapat memakan
waktu dan mahal.
- Mencoba untuk memprediksi penggunaan
daripada mengamati secara langsung.
- Melestarikan sumber daya (biaya rendah
dan cepat).
7/23/2019 IMK 9 - Evaluasi
19/30
Evaluasi Prediktif
Pendekatan:
- Ulasan pakar (sering digunakan)
Ahli IMK berinteraksi dengan sistem dan
mencoba untuk mencari potensi masalah danmemberikan umpan balik preskriptif.
Baik jika:
- Tidak digunakan sebelumnya prototipe.- Dikenal dengan domain atau tugas.
- Memahami perspektif pengguna.
7/23/2019 IMK 9 - Evaluasi
20/30
1 evaluasi Heuristik
Dikembangkan oleh Jakob Nielsen.
Kriteria pegunaan diidentifikasi. Beberapa ahli evaluator menilai sistem
berdasarkan heuristik sederhana dan
umum (prinsip-prinsip atau aturan
praktis).
7/23/2019 IMK 9 - Evaluasi
21/30
Prosedur:- Mengumpulkan input
- Mengevaluasi sistem
- Tanya jawab dan koleksi
- Peringkat kesederhanaan
Contoh:
- Perilaku sistem dapat diprediksi
- Perilaku sistem adalah konsisten- Umpan balik tersedia
Evaluasi heuristik men-debug (menulusuri
kesalahan) desain.
7/23/2019 IMK 9 - Evaluasi
22/30
2 Discount Usability Testing
Hibrida dari pengujian kegunaan
empiris dan evaluasi heuristik.
Memiliki dua atau tigathink-aloud, sesi
pengguna dengan kertas atau
dihasilkan model prototipemock-up.
7/23/2019 IMK 9 - Evaluasi
23/30
3 Cognitive Walkthrough
Menilai pembelajaran dan kegunaan melalui
simulasi cara pengguna menjelajahi danmenjadi familiar dengan sistem interaktif.
7/23/2019 IMK 9 - Evaluasi
24/30
ProsesCognitive Walkthrough
- Tugas konstruksi dirancang dari model
spesifikasi sistem atau layar mock-up.
- Menelusuri melalui kegiatan (kognitif danoperasional) yang diperlukan untuk berpindah
dari satu layar ke layar yang lain.
- Meninjau kembali tindakan yang diperlukan
untuk tugas, mencoba untuk memprediksibagaimana perilaku pengguna dan masalah
apa yang mereka temui.
7/23/2019 IMK 9 - Evaluasi
25/30
Persyaratan- Deskripsi pengguna dan latar belakang mereka.
- Deskripsi tugas pengguna untuk dilakukan.
- Daftar lengkap tindakan yang diperlukan untuk
menyelesaikan tugas.
- Prototipe atau deskripsi sistem.
7/23/2019 IMK 9 - Evaluasi
26/30
Asumsi:- Pengguna memiliki rencana kasar.
- Pengguna mengeksplorasi sistem, mencari
tindakan untuk berkontribusi terhadap kinerjatindakan.
- Pengguna memilih tindakan yang tampaknya
terbaik untuk tujuan yang diinginkan.
- Pengguna menafsirkan respon dan menilaikemajuan yang dibuat dalam mencapai
tugas.
7/23/2019 IMK 9 - Evaluasi
27/30
Metodologi:- Langkah melalui urutan tindakan
Action 1
Response A, B,
Action 2
Response A
-Untuk masing-masing, ajukan empat pertanyaandan mencoba untuk membangun sebuah cerita
yang memiliki kebenaran.
U
7/23/2019 IMK 9 - Evaluasi
28/30
U
4 user/Cognitive Modeling
Membangun model pengguna untuk
memprediksi penggunaan.
- Pengguna sebagai model prosesor
GOMS dan model keystroke.
- Model kontekstual
Activity theory, distributed cognition.
7/23/2019 IMK 9 - Evaluasi
29/30
Anda dapat memilih 2 aplikasi
Temukan hal-hal yang perlu di evaluasi dari
aplikasi berikut:Antivirus
Zip Tools
Instant Messenger
Search Engine
Email Application
7/23/2019 IMK 9 - Evaluasi
30/30