EVALUASI

KELOMPOK 3 :ALDO FERDIANSYAH (50413622)DAVIN DIRGANTARA (52413056)LUTHFI SYAM NUGRAHA (55413101)M. FAQIH SULAIMAN (55413648)NICO PRASETIAWAN (56413421)SATRIA NURSETIA .N (58413298)YARDHA DWIYAN .W (59413402)3IA17

Pengenalan Evaluasi Perancangan Eksperimen Partisipasi, IRB, dan Etika Pengumpulan Data Analisa Data dan Interpretasi Hasil

Evaluasi adalah menilai dampak dari serangkaian kerja yang sudah dicapai dalam rentang waktu tertentu dengan mengukur relevansi, efisiensi, dan efektivitas program. Bagian yang dievaluasi pada interaksi manusia dan komputer adalah desain dan implementasinya.

Proses penilaian dengan cara eksperimen, penelitian, atau observasi disebut evaluasi empiris.

Data empiris merupakan data yang diperoleh/disimpulkan dari sebuah eksperimen atau penelitian.

Melihat seberapa jauh sistem berfungsi. Melihat efek interface bagi pengguna. Mengidentifikasi permasalahan yang

terjadi pada sistem.

Perancangan eksperimen berupa:HipotesaVariabelRancanganParadigma

Merupakan prediksi yang dihasilkan dalam eksperimen.

Masih menggunakan variabel independent dan dependent, dimana variasi di dalam variabel independent akan menyebabkan perbedaan pada variabel dependent.

Terdiri dari:Variabel independentVariabel dependent

1. Between-Groups (Randomized) Ciri-ciri dari rancangan ini:•Masing-masing subyek diberikan kondisi yang berbeda yakni kondisi eksperimen dan control.•Setiap user menghasilkan satu kondisi•Semakin banyak jumlah subyek yang tersedia akan menyebabkan hasilnya akan berkurang dan perbedaan antar setiap individu akan membuat bias hasil. Hal ini dapat diatasi dengan memilih dengan hati-hati subyek yang dipilih dan menjamin setiap kelompok di masyarakat terwakili

2. Within-GroupsCiri-ciri dari rancangan ini:•Setiap user akan menampilkan kondisi yang berbeda•Jumlah user yang tersedia lebih sedikit•Pengaruh dari subyek lebih sedikit

• “Quick and dirty” evaluation• Usability testing• Field studies• Predictive evaluation

A. PartisipasiMerupakan keikutsertaan, peranserta atau keterlibatan yang berkaitan dengan keadaaan.Bentuk partisipasi antara lain :-Partisipasi harta benda-Partisipasi tenaga-Partisipasi keterampilan

B. IRB(Institutional Review Board)IRB atau kelembagaan dewan peninjau, juga dikenal sebagai komite etika independen, adalah panitia yang telah ditunjuk secara resmi untuk menyetujui, memantau, dan meninjau biomedis dan perilaku penelitian yang melibatkan manusia.

C. Etika Etika evaluasi terdiri dari 4 hal, yaitu:a.Kerahasiaan hasil evaluasib.Keamanan evaluasic.Intepretasi hasil evaluasid.Penggunaan evaluasi

TEKNIK OBSERVASIMerupakan pengamatan yang melibatkan semua indera (penglihatan, pendengaran, penciuman, pembau, perasa).Fungsi perangkat lunak yang digunakan pada teknik observasi yaitu :Untuk memonitor test/pengujianMembuat catatan kejadian penting yang diobservasi dari video proses testingMembantu membuat umpan balik dengan diagnosa mengenai masalah penggunaan sistem.

JENIS-JENIS TEKNIK OBSERVASIThink aloudCara yang popular dalam mengumpulkan informasi dengan melihat interaksi user. Analisa ProtokolUntuk merekam kegiatan user, diantaranya kertas dan pensil, rekam suara dan video, computer logging, dllAutomatic protocol analysis tools EVA (Experimental Video Annotator)yaitu sistem prototipe yang berjalan pada multi-media workstation yang dihubungkan langsung ke video recorder.Post-task walkthroughsTerdapat beberapa keadaan yang menyebabkan subyek tidak dapat berbicara selama observasi sebenarnya seperti subyek sedang mengerjakan tugas yang sangat penting dan banyak. Pada keadaan ini post-task walkthroughs dapat melihat secara subyektif perilaku user.

TEKNIK QUERYInterview/WawancaraMewawancara user tentang pengalaman mereka dengan sistem interaktif yang menyediakan informasi secara langsung dan terstruktur.KuisionerMerupakan suatu teknik dengan memberikan sejumlah pertanyaan yang sudah pasti diberikan dan dalam bentuk tercetak. Hal pertama yang harus dilakukan evaluator adalah menentukan tujuan dari kuesioner seperti informasi apa yang akan diambil.Terdapat beberapa jenis kuisioner yaitu General, Open-ended, Scalar, Multi-choice, dan Ranked.

Analisa data adalah proses penyederhanaan data ke dalam bentuk yang lebih mudah dibaca dan diinterpretasikan.Analisa dan interpretasi data diperlukan untuk merangkum apa yang telah diperoleh, serta menilai apakah data tersebut berbasis kenyataan, teliti, dan benar.Analisa dan interpretasi data juga diperlukan untuk memberi jawaban terhadap pertanyaan-pertanyaan yang diajukan.

Data KuantitatifData kuantitatif merupakan data yang

berupa angka atau bilangan, baik yang diperoleh dari hasil pengukuran maupun diperoleh dengan cara mengubah data kualitatif menjadi data kuantitatif.

Contoh data kuantitatif: skor tes awal Tina untuk mata pelajaran matematika= 65, berat badan Tini 47 kg, panjang meja tulis 150 cm.

Data KualitatifData kualitatif merupakan data yang

berupa kalimat-kalimat, atau data yang dikategorikan berdasarkan kualitas objek yang diteliti, misalnya: baik, buruk, pandai, dan sebagainya.

Contoh data kualitatif: siswa berdiskusi secara aktif, perhatian siswa terhadap mata pelajaran IPS rendah, dan rata-rata skor UAS semester ini naik.

Memilih/reduksi data. Mendeskripsikan/memaparkan data

hasil temuan. Menarik kesimpulan hasil deskripsi.

Any Questions ?