IMK 9 - Evaluasi

7/23/2019 IMK 9 - Evaluasi

1/30


2/30

T

injauan

Evaluasi menguji daya guna (usability) dan fungsi

(functionality) dari sistem interaktif.

E

valuasi Evaluasi digunakan untuk melihat apakah hasil

rancangan dengan proses uji coba sistem yang

telah dibuat sesuai dengan permintaan pengguna.

Mengumpulkan data tentang daya guna dari

desain oleh kelompok pengguna tertentu untuk

kegiatan tertentu dalam lingkungan tertentu.


3/30

T

ujuan Evaluasi

Menilai tingkat fungsionalitas sistem.

Menilai efek antarmuka pada pengguna.Mengidentifikasi masalah yang spesifik.


4/30

Mengapa?

Memastikan kecocokan dengan permintaan

pengguna/tujuan pengguna.

Apa yang di evaluasi? Web browser : berapa cepat pengguna temukan

item pada produk.

Ponsel seri terbaru: warna yang paling disukai,

rangkain fitur yang disukai.

Online Catalog: kecepatan menampilkan hasil,

variasi fitur pencarian.


5/30

Di mana evaluasinya ?

1. Di laboratorium (Studi Laboratorium)

Keuntungan:

- Peralatan khusus tersedia

- Lingkungan yang terinterupsi

Kerugian:

- Kekurangan konteks- Sulit untuk mengamati beberapa pengguna

bekerjasama.


6/30

Di mana evaluasinya?2. Di tempat alami pengguna produk (Studi

Lapangan)

Keuntungan:- Lingkungan natural / alami

- Konteksnya terjaga (walaupun observasi

mungkin mengubahnya)

Kerugian:

- Banyak yang mengganggu

-Noise(kegaduhan)


7/30

Kapan evaluasi?

Produk baru

Perbaikan produk


8/30

Formatif

Evaluasi yang dilakukan selama desain, untuk

memastikan produk sesuai dengan yang

diinginkan pengguna. Sumatif

Evaluasi yang dilakukan untuk menguji

kesuksesan suatu produk yang sudah selesai,

yaitu mencapai standar yang ditentukan

sebelumnya (ISO, NIST, BSI).


9/30

Usability Testing

Field Study

Analytical Evaluation


10/30

Observasi pengguna

Interview pengguna

KuesionerInterview ahli

Pengujian oleh pengguna

Pemodelan kinerja pengguna


11/30

Memastikan konsistensi struktur navigasi,

penggunaan istilah, dan bagaimana sistem

merespon pengguna.

Mengukur kinerja pengguna untuk selesaikan tugastertentu.

Metode:

- Mengamati pengguna menggunakan sistem dan

merekam kesalahan, waktu.- Interview/kuesioner untuk memperoleh pendapat

pengguna.


12/30

Dilakukan di laboratorium

Contoh aplikasi: wordprocessor, spreadsheet,

database.


13/30

Memahami apa yang orang lakukan dan bagaimana

produk terlibat/berperan dalam kegiatan mereka.

Identifikasi kesempatan adanya teknologi baru

Membangun kebutuhan desain

Fasilitasi pengenalan teknologi baru atau meluncurkan

teknologi dalam konteks yang beda.

Evaluasi teknologi

Metode- Interview

- Observasi


14/30

Evaluasi tanpa melibatkanend-user

Metode:

Inspeksi Heuristic Evaluation

Menggunakan standar untuk identifikasi masalah

usability.

Walkthrough

Melibatkan ahli untuk menjalankan skenario pada

prototipe aplikasi.

Gunakan simulasi penyelesaian masalah oleh

pengguna.

Fokus pada evaluasi desain kemudahan sistem

untuk dipelajari.


15/30

Paradigma

Evaluasi Usability Testing Field Studies

AnalyticalEvaluation

PeranpenggunaJalankanserangkaian tugas Berlaku alami Tidak terlibat

Pengontrol Evaluator

mengontrolEvaluator danpengguna

Evaluator ahli

Lokasi Laboratorium Situasi alamiLaboratorium

dengan situasipengguna

Digunakan Dengan prototipe

atau produkDesain awal untukcek kebutuhan

Prototipe ataumodel

Tipe data Kuantitatif, statistik,hasil kuesioner

Kuantitatif, sketsa,skenario, dll

Studi kasus dari ahli

Umpan balikuntuk desain

Laporan pengujian Deskripsi/penjabar

anDaftar masalah dariahli

Filosofi Pendekatan aplikatifdengan eksperimen Observasi yangobjektif


16/30

Kombinasi Pendekatan

Field Studyuntuk evaluasi ide desain awaldan dapatkan umpan balik.

Membuat perubahan pada desain.

Usability Test untuk cek fitur desain khusus.

Field Study untuk melihat apa yang terjadi

pada lingkungan alaminya.

Membuat perubahan akhir.


17/30

Jenis Evaluasi

1.Evaluasi Eksperimen / Observasi

Mengumpulkan pendapat pengguna

Mengamati penggunaan

Eksperimen spesifikasi kegunaan

2. Evaluasi Prediktif

3. Evaluasi Interpretatif


18/30

Evaluasi Prediktif

Dasar :

- Mengamati pengguna dapat memakan

waktu dan mahal.

- Mencoba untuk memprediksi penggunaan

daripada mengamati secara langsung.

- Melestarikan sumber daya (biaya rendah

dan cepat).


19/30

Evaluasi Prediktif

Pendekatan:

- Ulasan pakar (sering digunakan)

Ahli IMK berinteraksi dengan sistem dan

mencoba untuk mencari potensi masalah danmemberikan umpan balik preskriptif.

Baik jika:

- Tidak digunakan sebelumnya prototipe.- Dikenal dengan domain atau tugas.

- Memahami perspektif pengguna.


20/30

1 evaluasi Heuristik

Dikembangkan oleh Jakob Nielsen.

Kriteria pegunaan diidentifikasi. Beberapa ahli evaluator menilai sistem

berdasarkan heuristik sederhana dan

umum (prinsip-prinsip atau aturan

praktis).


21/30

Prosedur:- Mengumpulkan input

- Mengevaluasi sistem

- Tanya jawab dan koleksi

- Peringkat kesederhanaan

Contoh:

- Perilaku sistem dapat diprediksi

- Perilaku sistem adalah konsisten- Umpan balik tersedia

Evaluasi heuristik men-debug (menulusuri

kesalahan) desain.


22/30

2 Discount Usability Testing

Hibrida dari pengujian kegunaan

empiris dan evaluasi heuristik.

Memiliki dua atau tigathink-aloud, sesi

pengguna dengan kertas atau

dihasilkan model prototipemock-up.


23/30

3 Cognitive Walkthrough

Menilai pembelajaran dan kegunaan melalui

simulasi cara pengguna menjelajahi danmenjadi familiar dengan sistem interaktif.


24/30

ProsesCognitive Walkthrough

- Tugas konstruksi dirancang dari model

spesifikasi sistem atau layar mock-up.

- Menelusuri melalui kegiatan (kognitif danoperasional) yang diperlukan untuk berpindah

dari satu layar ke layar yang lain.

- Meninjau kembali tindakan yang diperlukan

untuk tugas, mencoba untuk memprediksibagaimana perilaku pengguna dan masalah

apa yang mereka temui.


25/30

Persyaratan- Deskripsi pengguna dan latar belakang mereka.

- Deskripsi tugas pengguna untuk dilakukan.

- Daftar lengkap tindakan yang diperlukan untuk

menyelesaikan tugas.

- Prototipe atau deskripsi sistem.


26/30

Asumsi:- Pengguna memiliki rencana kasar.

- Pengguna mengeksplorasi sistem, mencari

tindakan untuk berkontribusi terhadap kinerjatindakan.

- Pengguna memilih tindakan yang tampaknya

terbaik untuk tujuan yang diinginkan.

- Pengguna menafsirkan respon dan menilaikemajuan yang dibuat dalam mencapai

tugas.


27/30

Metodologi:- Langkah melalui urutan tindakan

Action 1

Response A, B,

Action 2

Response A

-Untuk masing-masing, ajukan empat pertanyaandan mencoba untuk membangun sebuah cerita

yang memiliki kebenaran.

U


28/30

U

4 user/Cognitive Modeling

Membangun model pengguna untuk

memprediksi penggunaan.

- Pengguna sebagai model prosesor

GOMS dan model keystroke.

- Model kontekstual

Activity theory, distributed cognition.


29/30

Anda dapat memilih 2 aplikasi

Temukan hal-hal yang perlu di evaluasi dari

aplikasi berikut:Antivirus

Zip Tools

Instant Messenger

Search Engine

Email Application


30/30

Documents

IMK 9 - Evaluasi