1

Bab 10

Temubual, Soalselidik dan

Pandangan Pakar

2

Objektif Peranan temubual dan soalselidik dalam

penilaian Rekabentuk asas soalselidik Bagaimana melakukan temubual, penilaian

heuristik dan ‘cognitive walkthrough’ Bagaimana mengumpul, menganalisa dan

mempersembahkan data Kelebihan dan kelemahan teknik-teknik ini

3

Temubual Tidak berstruktur – tidak berpandukan

kepada skrip. Fleksibel dan meluas, tetapi tidak boleh direplika

Berstruktur – berdasarkan kepada skrip tertentu, mirip soalselidik. Boleh direplika tetapi tidka feksibel dan meluas

Separa-berstruktur (semi-structured) – berpandukan kepada skrip tetapi idea/isu menarik boleh dibincang lebih dalam.

4

Asas Temubual Rangkakerja DECIDE Matlamat dan persoalan mempengaruhi

temubual Dua jenis soalan:

‘soalan tertutup’ – format jawapan yang telah ditentukan, spt. “ya” ata “tidak”

‘soalan terbuka’ – tidak mepunyai format tertentu

‘Soalan tertutp’ adalah lebih cepat dan mudah untuk dianalisa

5

Perkara yang perlu dielakkan semasa menyediakan soalan temubual

Soalan yang panjang Ayat majmuk – pecahkan kepada dua Bahasa dan jargon yang mungkin tidak

difahami oleh responden Soalan yang mempunyai andaian

tertentu (leading questions) , cth: “kenapa anda suka….?”

Bias yang tidak disedari, cthnya dari segi jantina

6

Komponen Temubual Pengenalan – memperkenalkan diri, menerangkan

matlamat temubual, yakinkan responden tentang isu etika, kebenaran untuk merekod, borang informed consent form

Warm up – dimulakan dengan soalan yang mudah dan menyenangkan

Utama - ajukan soalan menurut susunan logikal Cool-off period – selitkan beberapa soalan mudah

untuk mengurangkan tekanan Penutup – terima kasih kepada responden

7

Proses Temubual Gunakan rangkakerja DECIDE sebagai

panduan Berpakaian mirip kepada peserta Semak peralatan rakaman lebih awal Wujudkan sistem kod nama tertentu

untuk merahsiakan nama peserta Be pleasant Minta peserta mengisi borang perakuan

pemberitahuan (informed consent form)

8

Probes dan Prompts Probes (siasatan) – digunakan untuk

mendapatkan maklumat lanjut, cth: “ada apa-apa yang anda perlu tambah berkenaan hal ini?”

Prompts (galakan) – digunakan untuk membantu peserta meneruskan ayat atau penerangan tertentu, cth: “ya, teruskan”, atau membantu mengingat nama

Perlu pastikan bahawa kedua-dua di atas tidak menyebabkan bias

9

Temubual Berkumpulan Juga dikenali sebagai ‘kumpulan fokus’ Biasanya melibatkan 3-10 peserta Mengumpul maklumat dan pendapat

yang pelbagai dan meluas Perlu ada pengurusan supaya:

Setiap peserta memberi sumbangan Perbincangan tidak didominasi oleh orang

tertentu Topik agenda dibincangkan

10

Menganalisa Data Temubual Bergantung kepada jenis temubual Temubual berstruktur boleh dianalisa

sepertimana soalselidik Temubual tidak berstruktur menghasilkan data

sepertimana yang dihasilkan oleh teknik pemerhatian – participant observation

Data dari temuduga tidak berstruktur perlu dianalisa dengan segera tuntuk mengenalpasti topik dan tema

11

Soalselidik Soalan boleh ‘terbuka’ atau ‘tertutup’ Soalan ‘tertutup’ paling mudah dianalisa, dan

boleh dilakukan secara berkomputer Boleh diberikan kepada suatu populasi yang besar Media penyebaran – kertas, email dan laman web Kelebihan soalselidik elektronik – data masuk

terus ke dalam pangkalan data, dan mudah dianalisa

Masalah soalselidik elektronik - persampelan iaitu saiz populasi tidak diketahui

12

Gaya Soalselidik Pelbagai mengikut matlamat gunakan

rangkakerja DECIDE Format soalselidik termasuk:

Pilihan ‘ya’ , ‘tidak’ Pilihan lebih dari satu Skala Likert Skala semantik Soalan terbuka

Skala Likert mempunyai julat titik tertentu

Biasanya 3, 5, dan 7

13

Membangun Soalselidik Menyatakan tujuan soalselidik dengan jelas

dan menjamin anonymity responden Merancang soalan – jika soalselidik berasaskan

web, bangunkan secara off-line dahulu Tentukan samada pernyataan adalah dalam

bentuk posotif, negatif, atau gabungan Soalan diuji terlebih dahulu (pilot test) Tentukan bagaimana data akan dianalisa dan

dapatkan nasihat ahli statistik jika perlu

14

Cara Mendapatkan Respon yang Baik Pastikan tujuan kajian jelas Jamin anonymity Pastikan soalan direkabentuk dengan baik

dan teliti Sediakan versi pendek untuk mereka yang

tiada masa untuk mengisi versi panjang Buat follow-up dengan email, telefon,

surat Sediakan insentif 40% renspon adalah agak tinggi, dan 20%

biasanya boleh diterima

15

Kebaikan Soalselidik Online Respon selalunya diterima dengan

cepat Tiada kos penghantaran dan fotokopi Data boleh dikumpulkan ke dalam

pangkalan data secara terus Masa yang diperlukan untuk analisa

lebih singkat Kesilapan pada soalselidik boleh

dibetlkan dengan cepat

16

Masalah Soalselidik Online Persampelan adalah sukar jika saiz

populasi tidak diketahui Sukar untuk mengesan atau

mengelak dari seorang responden mengisi lebih dari sekali

Terdapat kes di mana responden atau orang lain mengubah soalan dalam soalselidik melalui email

17

Analisis dan Persembahan Data Persembahkan data dengan jelas –

jadual boleh membantu Gunakan statistik mudah spt: min,

median, mod, sisihan piawai Peratusan juga baik, tetapi memerlukan

saiz populasi Carta bar boleh menunjukkan data

berkategori (nominal) Analisis statistik yang lebih terperinci

boleh dilakukan jika perlu

18

Contoh-contoh Soalselidik SUMI (Software Usability

Measurement Inventory) MUMMS (Measuring the Usability of

Multi-media System) www.ucc.ie/hfrg/questionnaires

QUIS (Questionnaire for User Interface Satisfaction)

19

Pandangan Pakar Pakar menggunakan pengetahuan mereka

tentang pengguna dan teknologi untuk review kebolehgunaan perisian

Kritik atau komen boleh dalam bentuk laporan formal dan tidak formal

Penilaian heuristik – suatu review yang berpandukan kepada suatu set heuristik

Walkthrough – melibatkan pengalaman langkah-demi langkah menggunakan senario terancang dan lakaran skrin

20

Penilaian Heuristik Dibangunkan oleh Jacob Nielsen pad

awal 1990-an Berdasarkan kepada heuristik yang

diperolehi dari analisa empirikal ke atas 249 masalah kebolehgunaan

Telahpun dikemaskini untuk teknologi sekarang, spt HOMERUN utk web

Garispanduan rekabentuk menjadi asasuntuk membangunkan heuristik

21

Heuristik Nielsen Keterlihatan (visibility) status sistem Padanan di antara sistem dengan dunia sebenar Kawalan dan kebebasan pengguna Ketekalan (consistency) dan piawaian Bantuan kepada penggun auntuk mengecam,

diagnos, dan perbetulkan ralat Mengelak ralat Pengecaman (recognition) berbanding

mengingat semula (recall) Kebolehlenturan (flexibility) dan keberkesanan

(efficiency) penggunaan sistem Nilai estetik dan rekabentuk minimalist Bantuan dan dokumentasi

22

Penilaian Potongan (discount) Penilaian heuristik juga dikenali

sebagai penilaian potongan (discount evaluation) apabila hanya 5 penilai yang digunakan

Kajian empirikal membuktikan bahawa secara kasar 5 penilai adalah cukup untuk mengesan 75-80% masalah kebolehgunaan

23

Tiga Fasa Penilaian Heuristik Sesi briefing untuk memberitahu pakar/penilai

tentang apa yang perlu dilakukan Fasa penilaian yang memakan masa 1-2 jam

yang mana: Setiap pakar/penilai berkerja secara berasingan Pertama kali, gunakan sistem secara keseluruhan

untuk membiasakan diri dengan sistem Kali kedua, tumpukan kepada ciri tertentu dalam

sistem

Debriefing – kesemua pakar/penilai berbincang untuk kenalpasti masalah utama

24

Kelebihan dan Masalah Beberapa isu etika dan praktikal perlu

dipertimbangkan Mungkin sukar dan agak mahal untuk

mendapatkan pakar Pakar yang baik mempunyai pengetahuan

tentang domain aplikasi dan pengguna Masalah:

Masalah penting mungkin akan tertinggal Banyak masalah remeh yang akan dicamkan

25

Cognitive Walkthrough Memfokus kepada ‘mudah untuk dipelajari’ Perekabentuk akan menyentuh aspek dan

penggunaan tertentu menggunakan senario

Satu atau lebih pakar akan ‘berjalan melalui’ rekabentuk prototaip (senario)

Pakar diberitahu mengenai andaian tentang populasi pengguna, konteks penggunaan, dan perincian tugas

Pakar dibantu oleh 3 soalan

26

Tiga Soalan1. Will the correct action be sufficiently evident

to the user? Adakah tindakan yang betul (sepatutnya

dilakukan) akan kelihatan jelas kepada pengguna?

2. Will the user notice that the correct action is available?

Adakah pengguna sedar akan kewujudan tindakan tersebut?

3. Will the user associate and interpret the response from the action correctly?

Bolehkan pengguna memahami dengan betul akan hubungan di antara respon dari sistem dengan tindakan yang telah diambilnya?