bab v implementasi dan uji cobakc.umn.ac.id/1559/5/bab v.pdf · oleh user dan jawaban yang...

BAB V

IMPLEMENTASI DAN UJI COBA

!5.1 Spesifikasi Perangkat

Berikut adalah penjabaran dari kebutuhan spesifikasi sistem dalam

melakukan penelitian. Rincian spesifikasi sistem yang digunakan pada penelitian

ini akan dibagi menjadi dua bagian yaitu kebutuhan Software dan kebutuhan

Hardware.

5.1.1 Software

★ Eclipse SKD Version: 4.2.0 Juno.

★ Google Speech Recognition Library (RecognizerActivity).

★ Android OS Version 4.0.4 Ice Cream Sandwich.

★ Operating System Apple Mac OSX Version 10.9.0 (Mavericks).

★ XAMPP untuk Mac OSX versi 1.7.3.

★ MySQL Server versi 5.1.44

★ PHP versi 5.0,4

5.1.2 Hardware

★ Apple Computer sebagai server (Intel Core i7 2.40 Ghz, 8GB RAM)

★ Layar display.

★ Microphone.

★ Speaker.

★ Android Device (Motorola RAZR MAXX XT910)

!!

�126Implementasi Shallow ..., Ahmad Eries Antares,FTI UMN 2014

�127

Sedangkan spesifikasi perangkat minimal yang dibutuhkan untuk

penggunaan aplikasi adalah sebagai berikut.

5.1.3 Software Minimum

★ Android OS Version 4.0.4 Ice Cream Sandwich.

★ Operating System (OSX, Windows, Linux, dll)

★ XAMPP untuk Mac OSX versi 1.7.3

★ MySQL Server versi 5.1.44

★ PHP versi 5.0,4

5.1.4 Hardware Minimum ★ Processor Pentium 1.33 GHz ★ Memory 1GB (1024 MB) ★ Kapasitas Hardisk 1 GB ★ Layar display.

★ Microphone sebagai sarana input suara.

★ Speaker.

★ Android Device (Minimal versi 4.0.4)

!5.2 Implementasi Aplikasi

Berikut ini adalah hasil implementasi sistem yang dilakukan berdasarkan

pada hasil analisis dan perancangan aplikasi yang dilakukan sebelumnya. Sistem

terdiri dari dua buah aplikasi yaitu aplikasi mobile berbasis Android yang

digunakan sebagai perantara user untuk bertanya kepada sistem dan sebuah

aplikasi web-based berbasis PHP yang digunakan user untuk mengelola

knowledge pada sistem. Selain itu, seluruh proses parsing pengolahan dilakukan

pada server, aplikasi mobile hanya perantara antara server dengan user.

!5.2.1 Implementasi Pada Aplikasi Front-End

Berikut adalah screenshot dari aplikasi mobile yang digunakan user

sebagai perantara mengajukan pertanyaan kepada sistem.

Implementasi Shallow ..., Ahmad Eries Antares,FTI UMN 2014

�128

! !

Gambar 5.1 Screenshot main activity pada device Android.

!Pada aplikasi ini hanya terdapat satu buah halaman activity. Seluruh

kebutuhan user untuk menggunakan aplikasi telah tersedia pada activity ini. Disini

terdapat sebuah listview yang menampilkan seluruh pertanyaan yang diajukan

oleh user dan jawaban yang dikembalikan oleh sistem.

Selain itu pada bagian bawah halaman terdapat sebuah tombol untuk

memberikan input pertanyaan ke sistem menggunakan speech recognition. Ketika

tombol tersebut diklik, aplikasi berubah menjadi mode recording, dan siap

menerima input berupa speech. Ketika dalam mode recording ini, user dapat

memberikan input berupa speech kepada aplikasi. Input tersebut nantinya akan

dikirim dan diolah secara cloud oleh API Google menjadi sebuah string yang akan

dikirimkan kembali ke aplikasi dan diproses lebih lanjut oleh sistem.

!


�129

! !

Gambar 5.2 Screenshot main activity dalam mode recording speech.

!Setelah proses selesai dilakukan pada sistem, maka jawaban yang dicari

oleh user akan dikembalikan ke aplikasi lalu ditampilkan pada listview. Proses

pengiriman string ke server, dan menunggu input dari server kembali dilakukan

secara asynchronous dengan menggunakan fitur thread pada pemrograman

Android.

!5.2.2 Implementasi Pada Aplikasi Back-End

Aplikasi back-end merupakan sebuah aplikasi web-based dengan bahasa

pemrograman PHP yang berguna untuk mengelola knowledge yang terdapat pada

sistem.

Aplikasi ini terdiri dari tiga fitur utama, yaitu fitur Add, untuk menambah

pengetahuan baru, fitur browse untuk mengelola pengetahuan yang telah ada, dan


�130

fitur process monitoring untuk melihat proses yang terjadi pada sistem ketika

melakukan pengolahan pertanyaan mulai dari parsing hingga pencarian kandidat

jawaban. Berikut adalah penjelasan dari masing - masing halaman yang ada.

!1. Halaman Utama (Home Page)

Halaman ini merupakan halaman utama dari aplikasi. Setiap aplikasi

pertama dijalankan user langsung dihadapkan pada halaman ini. Home page

berisikan tiga pilihan menu fitur utama yang terdapat pada sistem.

!

!

Gambar 5.3 Screenshot main Home page pada aplikasi server.

!Ketiga menu fitur tersebut antara lain menu Add, untuk masuk ke

halaman penambahan pengetahuan baru, lalu menu browse, untuk masuk ke

halaman pengelolaan pengetahuan yang telah ada di sistem, dan yang terakhir

adalah menu process monitoring, untuk melihat bagaimana sebuah input

pertanyaan di-parsing dan dicari kandidat jawaban yang relevan.


�131

Apabila salah satu dari ketiga menu tersebut dipilih, maka user akan

berpindah halaman web, dan untuk kembali ke home page user dapat memilih

menu pada navigasi utama yang tersedia pada setiap halaman.

!2. Halaman Add Knowledge

Halaman ini adalah fitur pada aplikasi untuk menambahkan pengetahuan

baru kedalam sistem. Ketika membuka halaman fitur ini, user dihadapkan dengan

sebuah text area yang berguna untuk menuliskan kalimat knowledge yang ingin

dimasukkan. Selain itu, juga terdapat sebuah button untuk melakukan submit

knowledge yang telah dituliskan di text area.

!

!

Gambar 5.4 Screenshot fitur Add Knowledge pada aplikasi server.

!Ketika user melakukan submit input, dengan menggunakan proses dan

metode yang sama dengan proses input pertanyaan, input knowledge pada text

area ini diproses dengan metode Shallow-Parsing dan dicari informasi yang

dibutuhkan. Setelah selesai di-parsing, maka ditampilkan hasilnya kepada user

untuk melakukan konfirmasi dan pemberian tag Predictive Annotation.


�132

!

Gambar 5.5 Screenshot pemrosessan pada fitur Add Knowledge pada aplikasi

server.

!3. Halaman Browse Knowledge

Halaman ini adalah fitur pada aplikasi untuk melakukan pengelolaan

knowledge yang telah ada di dalam sistem. Ketika pertama membuka halaman

fitur ini, user dihadapkan oleh list seluruh knowledge yang terdapat pada sistem.

Knowledge tersebut dibagi berdasarkan tag Predictive Annotation-nya. Pada

halaman ini juga, user dapat melakukan perubahan atau penghapusan knowledge

tersebut.

!


�133

!

Gambar 5.6 Screenshot fitur Browse Knowledge pada aplikasi server. !

!

Gambar 5.7 Screenshot Edit pada fitur Browse Knowledge pada aplikasi server. !


�134

!

Gambar 5.8 Screenshot Delete pada fitur Browse Knowledge pada aplikasi

server.

!4. Halaman Process Monitoring

Halaman ini adalah fitur tambahan pada aplikasi. Penambahan fitur ini

pada aplikasi dimaksudkan untuk mempermudah dalam proses testing dari sistem,

karena pada sistem yang ditampilkan untuk user tidak ditampilkan proses yang

terjadi dibelakangnya. User hanya memberikan input kepada sistem dan langsung

menerima feedback berupa jawaban tanpa tau proses proses yang dilalui oleh

input tersebut hingga mendapatkan sebuah jawaban.

!


�135

!

Gambar 5.9 Screenshot fitur halaman Process Monitoring pada aplikasi server.

!Pada fitur ini, halaman menampilkan seluruh proses yang terjadi ketika

sistem mendapatkan input dari user berupa pertanyaan. Proses tersebut mulai dari

masuknya input pertanyaan, parsing, hingga pencarian kandidat jawaban yang

relevan dengan pertanyaan. Berikut ini adalah data yang ditampilkan pada

halaman ini.

• Question, merupakan input yang masuk ke sistem berupa pertanyaaan,

statement, request, ataupun sapaan.

• PoS Tagging, merupakan bentuk dari input yang masuk setelah diberikan

tag berupa word class dari kamus ataupun dari corpus yang terdapat di

sistem.

• Input Type, merupakan tag kategori yang diberikan kepada input

berdasarkan ciri - ciri input tersebut. Tag yang tersedia antara lain adalah

GREETING$, QUESTION$, REQUEST$, dan STATEMENTS.

• Question Phrase, merupakan frasa kata tanya, atau frase kata perintah

yang terkandung di dalam input. Tag ini didapatkan hanya ketika input


�136

yang masuk ke sistem berupa kalimat tanya atau kalimat perintah

(memiliki tag QUESTION$ atau REQUEST$).

• Predictive Annotation, merupakan tag yang berguna untuk

mengelompokkan input kalimat pertanyaan berdasarkan jawaban yang

diharapkan dari frasa kata tanya yang dimiliki kalimat input tersebut.

• Question Focus, merupakan fokus dari pertanyaan yang dicari. Question

focus ini terdiri dari beberapa frasa - frasa yang terdapat pada kalimat

tersebut.

• Start Time, merupakan time stamp yang dicatat ketika aplikasi

pertamakali melakukan parsing pada input. Waktu ini berguna untuk

mengetahui kapan aplikasi memulai prosesnya.

• End Time, merupakan time stamp yang dicatat ketika aplikasi selesai

melakukan parsing pada input, hal ini ditandai ketika seluruh informasi

parsing telah diperoleh. Waktu ini berguna untuk mengetahui kapan

aplikasi selesai melakukan seluruh proses parsing.

• Duration, merupakan selisih waktu antara Start Time dengen End Time.

Waktu ini dibutuhkan untuk mengetahui berapa lama aplikasi

membutuhkan waktu untuk menyelesaikan seluruh proses parsing. Durasi

ini dalam satuan mili-second.

• Answer Candidate, pada bagian ini ditampilkan seluruh jawaban dengan

peringkat relevansi dari masing - masing jawaban tersebut. Jawaban yang

memiliki score yang semakin tinggi, maka tingkat relevansinya semakin

dekat dengan input pertanyaan tersebut. Proses Information Retrieval ini

menggunakan metode TF-IDF dengan sedikit modifikasi.

!5.3 Implementasi Metode Parsing

Fokus penelitian pada sistem ini adalah pada bagian parsing, baik

parsing input pertanyaan maupun parsing knowledge. Karena konsep utama dari

sistem ini adalah dengan menggunakan sebuah tools yang sama dapat melakukan


�137

indexing antara pertanyaan dengan jawaban yang relevan. Berikut adalah diagram

dari konsep utama dari sistem. Dimana proses parsing yang dilakukan pada sistem

terjadi pada proses berwarna merah (Natural Language Processing dan Indexer)

!

!

Gambar 5.10 Diagram konsep utama dan fokus penelitian.

!Berikut ini adalah langkah - langkah yang dilakukan mulai dari input

berupa speech hingga dikembalikannya jawaban relevan kepada user.

!

!

Gambar 5.11 Proses yang dilalui input selama Shallow-Parsing.

!


�138

Metode parsing yang digunakan sendiri terdiri dari beberapa tahap

pemrosesan. mulai dari pre-processing, hingga pencarian question focus. Berikut

ini adalah penjabaran dari diagram tahap yang dilakukan selama proses parsing.

• Pre-processing, ini merupakan proses awal sebelum menuju proses

parsing dengan metode yang telah ditentukan. Pada function ini input

yang masuk di-filter supaya dapat diproses dan database cache

dipersiapkan untuk menampung input.

• PoS Tagging, pada function ini masing masing kata pada input diberikan

tag kelas kata sesuai role kata tersebut di dalam kalimat. Proses ini

dilakukan dua kali yang pertama menggunakan data di dalam kamus, lalu

jika masih belum didapatkan kelas katanya maka digunakan data dari

corpus yang telah dibangun.

• Get Input Type, pada function ini input yang masuk dianalisa dan

dikategorikan tergolong sebagai apa input tersebut. Terdapat empat

katagori input yang dapat di-handle sistem, yaitu GREETING$,

QUESTION$, REQUEST$ dan STATEMENT$. Masing - masing

memiliki rule handling yang berbeda.

• Get Question Phrase. Function ini dilakukan ketika input yang masuk

adalah QUESTION$ atau REQUEST$. Pada fase ini dilakukan analisa

dan dicari frasa kata tanya atau kata perintahnya.

• Get Predictive Annotation, function ini merupakan lanjutan dari fase Get

Question Phase, disini input dikategorikan berdasarkan ekspektasi

jawaban yang dicari berdasarkan frasa kata tanya yang telah diperoleh

sebelumnya.

• Stopwords Parsing, function ini berguna untuk menyederhanakan input.

Disini kata kata yang berupa stopwords dieliminasi untuk memperoleh

data yang lebih efisien untuk diproses lebih lanjut.

• IOB Tagging, function ini adalah fase persiapan sebelum melakukan text

chunking, disini setiap kata diberikan tag IOB seperti yang dilakukan oleh


�139

Ramshaw (1995). Tag yang tersedia antaralain I-Inside, O-Outside dan B-

begin. Hal ini untuk memudahkan pemotongan input menjadi frasa kunci.

• Stemming Imbuhan, untuk meningkatkan akurasi dari pencarian kunci,

kata - kata yang dirasa penting dan menjadi kata kunci dari input

dilakukan stemming. Stemming berguna untuk menyeragamkan sebuah

kata karena dalam Bahasa Indonesia terdapat berbagai macam imbuhan

yang memodifikasi sebuahkata menjadi bervariasi bentuknya.

• Get Question Focus, ini merupakan function akhir dari proses Shallow-

Parsing, disini dikumpulkan seluruh kata kunci baik kata dasar maupun

frasa. Data inilah yang nantinya digunakan pada sistem pencarian dan

ranking dari jawaban.

!5.4 Implementasi Metode Information Retrieval

Selain parsing, salah satu implementasi dari topik Natural Language

Processing dalam penelitian ini adalah Information Retrieval. Information

Retrieval disini berguna untuk melakukan pencarian kandidat jawaban yang

relevan dengan pertanyaan yang diajukan. Namun, karena ini hanya sebagai

pelengkap, bukan merupakan fokus utama penelitan, maka dipilihlah sebuah

metode yang sederhana yaitu TF-IDF dengam modifikasi untuk menyesuaikan

dengan sistem yang sedang dibagun.

Metode TF-IDF ini sendiri terdiri dari beberapa langkah proses. Berikut

adalah langkah - langkah dan penjelasan function yang dilakukan untuk mencari

score relevansi dari masing - masing jawaban pada sistem.

• Mencari nilai TF, pada fase ini sistem melakukan perhitungan nilai TF

(Term Frequencies) dari sebuah knowledge. Perhitungan dilakukan

dengan menggunakan formula yang telah ditentukan sebelumnya. Pada

function ini terdapat modifikasi pemberian poin berlebih ketika

melakukan pembandingan. Dimana untuk data yang benar - benar sama


�140

memiliki bobot 1 poin lebih tinggi dari data yang hanya memiliki

kemiripan.

!

Gambar 5.12 Potongan source code pencarian nilai TF.

!• Mencari nilai IDF, untuk fase ini sistem melakukan pencarian nilai IDF

(Inverse Document Frequencies), dimana dengan menggunakan formula

yang telah ada dan dimodifikasi sesuai kebutuhan sistem dicari nilai IDF

dari dokumen knowledge yang telah ada.

!

Gambar 5.13 Potongan source code pencarian nilai IDF.

!


�141

• Mencari nilai TF*IDF, setelah diperoleh kedua nilai TF (Term

Frequencies) dan IDF (Inverse Document Frequencies) maka dilakukan

perkalian dari kedua nilai tersebut.

!

Gambar 5.14 Potongan source code pencarian nilai TF-IDF.

!• Penyusunan Ranking, seleah diperoleh masing masing nilai TF-IDF dari

jawaban, maka dilakukanlah penyusunan berdasarkan nilai tersebut.

Semakin tinggi nilai TF-IDFnya maka semakin relevan knowledge

tersebut. Knowledge dengan nilai tertinggilah yang diambil sebagai

jawabn dari input.

!

Gambar 5.15 Potongan source code penyusunan ranking

!!


�142

5.5 Uji Coba Aplikasi

5.5.1 Tempat dan Waktu Pengujian

Aplikasi ini menggunakan teknologi Speech Recognition untuk

memperoleh inputnya, oleh karena itu tempat pengujian aplikasi ini berpengaruh

cukup banyak pada hasil rekognisi suara yang dilakukan aplikasi. Tempat

pengujian aplikasi dilakukan di tiga tempat yang berbeda, yaitu ruangan kamar

berukuran 3x5 meter dengan tingkat noise rendah, lalu pada rumah tamu

berukuran 8x8 meter dengan tingkat noise sedang dan terakhir pada area publik,

dalam hal ini ruangan Lawson, dengan tingkat noise tinggi.

Ketiga ruangan yang berbeda tersebut dipilih untuk mengetahui seberapa

jauh aplikasi dapat meng-handle tingkat noise yang berbeda karena nantinya

aplikasi ini akan diimplementasi kan di ruang marketing Universitas Multimedia

Nusantara yang tergolong area publik dengan tingkan noise yang cukup tinggi.

Untuk waktu pengujiannya sendiri dilakukan mulai dari hari Sabtu, 28

Desember 2013 hingga hari Jumat 22 Februari 2014. Pengujian aplikasi ini

berlangsung cukup lama karena dilakukan beberapa tipe pengujian sistem dari

berbagai aspek dengan knowledge yang berbeda - beda.

!5.5.2 Persiapan Pengujian

Pengujian akan berpusat pada kinerja sistem dalam melakukan

pengolahan, parsing, dan indexing input berupa string dengan bahasa Natural

Language, khususnya Bahasa Indonesia. Pengujian dilakukan pada beberapa

aspek antara lain adalah keakurasian dari sistem dalam mencari jawaban relevan

yang sesuai dengan pertanyaan yang diinputkan dengan bahasa natural.

Untuk melakukan pengujian, penulis menyiapkan sebuah set kalimat

tanya berhubungan dengan Universitas Multimedia Nusantara yang dikumpulkan

dari beberapa orang secara acak, masing - masing memberikan lima pertanyaan.

Hingga diperoleh seluruhnya adalah 100 pertanyaan. Pengumpulan pertanyaan

tidak dilakukan secara sepenuhnya acak, karena knowledge mengenai Universitas


�143

Multimedia Nusantara yang dimiliki oleh sistem masih berupa data dummy. Oleh

karena itu penulis meminta responden memberikan variasi pertanyaan yang

kemungkinan muncul dalam bahasa natural untuk jawaban yang terdapat dalam

daftar yang telah ada.

Selain input berupa pertanyaan, penulis juga menambahkan pengujian

berupa sapaan, permintaan, dan statemen untuk menguji kemampuan sistem

dalam meng-handle input sederhana lainnya.

Berikut adalah 100 pertanyaan yang berhasil dikumpulkan penulis untuk

melakukan pengujian.

!Tabel 5.1 100 daftar pertanyaan yang dijujikan pada sistem.

1 - Apa itu kampus universitas multimedia nusantara ?

2 - Apa tujuan pendirian kampus universitas multimedia nusantara ?

3 - Bagaimana alur test masuk universitas multimedia nusantara ?

4 - Bagaimana cara mendaftar di kampus universitas multimedia nusantara?

5 - Berapa biaya pendaftaran di universitas multimedia nusantara ?

6 - Berapa lama kuliah di universitas multimedia nusantara ?

7 - Dimana lokasi kampus universitas multimedia nusantara ?

8 - Fasilitas yang ada di kampus universitas multimedia nusantara apa saja?

9 - Kapan kuliah perdana dimulai ?

10 - Apa program studi yang ada di kampus Universitas Multimedia Nusantara?

11 - Ada berapa program studi di kampus universitas Multimedia Nusanta?

12 - Berapa jumlah Mahasiswa di kampus ini?

13 - Universitas Multimedia Nusantara letaknya dimana sih ?

14 - Ada apa siaja program studi di kampus universitas multimedia nusantara ?

15 - Bagaimana fasilitas kampus universitas multimedia nusantara ?

16 - Bagaimana Kawasan Kampus universitas multimedia nusantara dan Sekitarnya ?

17 - Ada jalur apa saja pada untuk bergabung di Universitas Multimedia Nusantara ?

18 - Bagaimana jalur beasiswa pada Universitas Multimedia Nusantara ?

19 - Bagaimana jalur masuk Universitas Multimedia Nusantara ?

20 - Apakah Ada Kontrak Kerja Setelah Lulus Dari Universitas Multimedia Nusantara ?


�144

Tabel 5.1 100 daftar pertanyaan yang dijujikan pada sistem. (lanjutan 1)

21 - Bagaimana lulusan universitas multimedia nusantara?

22 - Bagaimana proses belajarnya?

23 - Bagaimana Beban Kuliah?

24 - Biaya kuliah di Universitas Multimedia Nusantara bagi jalur reguler?

25 - Universitas Multimedia Nusantara itu kampus negeri atau swasta?

26 - Apakah pendaftaran bisa dilakukan online?

27 - Bagaimana transportasi umum menuju kampus universitas multimedia nusantara ?

28 - Apakah Tersedia beasiswa ?

29 - Apa perbedaan Program Studi Desain Komunikasi Visual, Desain Grafis, dan Seni Grafis?

30 - Kapan universitas multimedia nusantara berdiri ?

31 - Kapan universitas multimedia nusantara didirikan ?

32 - Siapa rektor pertama universitas multimedia nusantara ?

33 - Siapa rektor universitas multimedia nusantara sekarang ?

34 - Penghargaan apa saja yang telah di peroleh universitas multimedia nusantara ?

35 - Berapa laboratorium yang ada di universitas multimedia nusantara ?

36 - Laboratoriom apa saja yang ada di universitas multimedia nusantara ?

37 - Fasilitas apa saja yang ada di studio TV UMN ?

38 - Fakultas apa saja yang di miliki universitas multimedia nusantara ?

39 - Ada ukm apaan aja di universitas multimedia nusantara ?

40 - Bagaimana cara pembayaran uang kuliah ?

41 - Di universitas multimedia nusantara ada fasilitas apa aja ?

42 - universitas multimedia nusantara itu dimana sih ?

43 - universitas multimedia nusantara ada jurusan apa saja ?

44 - Prestasi apa yang telah dicapai universitas multimedia nusantara ?

45 - Bagaimana dengan transportasi umum ke universitas multimedia nusantara ?

46 - Apakah ada Bis universitas multimedia nusantara ?

47 - Bagaimana kualitas dari dosen dosen di universitas multimedia nusantara ?

48 - Berapa biaya regulernya ?

49 - Apakah ada kantin di UMN ?

50 - Apakah universitas multu=imedia nusantara sudah diakreditasi ?

51 - apa akreditasi fakutas ICT ?

52 - apa akreditasi fakultas DKV ?


�145


53 - apa akreditasi fakultas Ilkom ?

54 - apa akreditasi fakultas Ekonomi?

55 - bagaimana cara untuk ke universitas multimedia nusantara ?

56 - apa penghargaan yang sudah diraih universitas multimedia nusantara ?

57 - apa moto universitas multimedia nusantara?

58 - apa visi universitas multimedia nusantara?

59 - apa misi universitas multimedia nusantara?

60 - kapan universitas multimedia nusantara didirikan?

61 - kapan universitas multimedia nusantara berdiri?

62 - apa fasilitas disekitar universitas multimedia nusantara?

63 - apakah universitas multimedia nusantara menyediakan dormitori?

64 - apa ada dormitori di universitas multimedia nusantara?

65 - siapa pendiri universitas multimedia nusantara?

66 - ada berapa fakultas di universitas multimedia nusantara ?

67 - apa prospek karir fakutas ICT?

68 - apa prospek karir fakultas DKV ?

69 - apa prospek karir fakultas Ilkom ?

70 - apa prospek karir fakultas ekonomi?

71 - ada berapa program peminatan program studi manajemen ?

72 - ada berapa program peminatan program studi akuntansi ?

73 - ada berapa program peminatan program studi IT ?

74 - ada berapa program peminatan program studi sistem komputer ?

75 - ada berapa program peminatan program studi DKV?

76 - ada berapa program peminatan program studi sistem informasi ?

77 - ada berapa program peminatan program studi sistem komputer ?

78 - kapan tes masuk reguler dilakukan?

79 - ada berapa kali tes masuk dilakukan?

80 - ada berapa grade masuk universitas multimedia nusatara ?

81 - Kapan Pendaftaran Jalur Beasiswa dimulai ?

82 - Kapan Pendaftaran Jalur PMDK dimulai ?

83 - Kapan Pendaftaran Jalur Tes Reguler ketujuh dimulai ?

84 - Kapan Pendaftaran Jalur Tes Reguler kedelapan dimulai ?


�146


!!

85 - Kapan Pendaftaran Jalur Tes Reguler kesembilan dimulai ?

86 - Berapa Uang pangkal untuk Program Studi Teknik Informatika dengan Grade B ?

87 - Berapa kapasistas dari parkiran UMN ?

88 - Kapan jadwal keberangkatan Bus UMN ?

89 - Berapa Frekuensi radio Universitas Multimedia Nusantara ?

90 - Bagaimana Radio Universitas Multimedia Nusantara disiarkan ?

91 - Sia[a yang menyiarkan Radio Universitas Multimedia Nusantara ?

92 - Kapan Radio Universitas Multimedia Nusantara disiarkan ?

93 - Apa yang dimaksud dengan Kompas Corner ?

94 - Apa itu Business Incubator ?

95 - Dimana Alamat Universitas Multimedia Nusantara ?

96 - Berapa Nomor Telepon Universitas Multimedia Nusantara ?

97 - Berapa Kontak Universitas Multimedia Nusantara yang dapat dihubungi ?

98 - Siapa Kontak Person Universitas Multimedia Nusantara yang dapat di hubungi ?

99 - Apa nama Facebook Universitas Multimedia Nusantara ?

100 - Apa Twitter Universitas Multimedia Nusantara ?

101 - Berapa Pin Blackberry Universitas Multimedia Nusantara ?


�147

Berikut adalah beberapa input tambahan yang penulis kumpulkan untuk

melakukan pengujian kemampuan sistem dalam meng-handle input sederhana

selain pertanyaan.

!Tabel 5.2 20 daftar variasi input yang dijujikan pada sistem.

!!

1 - Hai

2 - Halo

3 - Selamat pagi

4 - Selamat siang

5 - Selamat sore

6 - Selamat malam

7 - Nama saya AE Antares

8 - Disini hujan

9 - Dikampus ada kantin ga ?

10 - Sebutkan fakultas apa saja yang ada.

11 - Sebutkan biaya utuk teknik infomartika grade A

12 - Apa kabar ?

13 - Disana ada apa ?

14 - Jelaskan visi Universitas Multimedia Nusantara

15 - Jelaskan misi Universitas Multimedia Nusantara

16 - Sebutkan moto Kompas Gramedia

17 - Jelaskan apa itu Universitas multimedia nusantara

18 - Jelaskan Program Studi yang ada di kampus ini

19 - Gambarkan suasana di kampus Universitas Multimedia Nusantara

20 - Jelaskan keadaan sekitar kampus Universitas Multimedia Nusantara


�148

5.5.3 Skenario Pengujian

Dalam melakukan pengujian terhadap kinerja sistem melakukan parsing

dan mengembalikan jawaban yang relevan penulis menggunakan skenario

pengujian sebagai berikut.

1. Penulis mengumpulkan variasi kalimat tanya yang mungkin ditanyaan

dari beberapa calon user. Penulis juga mengumpulkan beberapa variasi

input lain seperti kalimat sapaan, statemen, dan kalimat perintah.

2. Dengan menggunakan data yang telah dikumpulkan tersebut, penulis

lalu bertanya kepada sistem menggunakan aplikasi pada device Android.

Karena speech recognition bukan merupakan fokus penelitian, maka

kesalahan dalam proses sintesis suara menjadi teks tidak dianggap

sebagai kesalahan sistem.

3. Penulis mencatat apakah feedback yang diberikan oleh sistem relevan

atau tidak dengan pertanyaan yang diberikan user.

4. Lalu penulis mengulangi pengujian menggunakan halaman process

monitoring yang terdapat pada server untuk mengetahui detail proses

yang dilakukan.

5. Lalu dengan menggunakan perhitungan statistik dilakukan perhitungan

presentasi akurasi sistem dalam melakukan parsing dan pengembalian

jawaban.

6. Evaluasi akan dilakukan dengan membandingkan jumlah data berapa

respon dari sistem yang salah dengan berapa respon dari sistem yang

sesuai. Respon sistem yang valid adalah respon dari input yang sesuai

dengan data yang telah dikumpulkan sebelumnya, jika hasi sistesis

speech menjadi text tidak sesuai maka pengucapan pertanyaan diulangi

lagi.

!


�149

Berikut adalah gambaran interface dari sistem selama melakukan

simulasi pengujian.

!

!

Gambar 5.16 Langkah - langkah pengujian aplikasi pada device Android !

!

Gambar 5.17 Hasil pengujian aplikasi pada Server

!5.5.4 Hasil Uji Coba

Pada bagian ini dijelaskan rincian hasil pengujian dengan menggunakan

data yang telah dikumpulkan oleh penulis sebelumnya. Seperti yang telah

diketahui setiap data dilakukan dua kali pengujian, yang pertama dengan

menggunakan device pada Android dan yang kedua dengan menggunakan

halaman Process Monitoring pada server. Ketika terjadi kesalahan pada


�150

pengucapan atau speech recognition maka proses tersebut diulangi hingga string

hasil speech recognition sama dengan data yang diujikan.

Berikut ini adalah tabel hasil pengujian pada 100 buah kalimat tanya

untuk bagian Question Answering System dengan topik kampus Universitas

Multimedia Nusantara.

!Tabel 5.3 100 hasil pengujian pada sistem.

No. Hasil Question Answering System Status

1 Q : Apa itu kampus universitas multimedia nusantara ?!A : Penghargaan yang telah diraih oleh Kampus Universitas Multimedia Nusantara adalah Juara 1 New Media Tower Kategori Gedung Hemat Energi yang diselenggarakan oleh Kementrian Energi dan Sumber Daya Manusia.

FALSE

2 Q : Apa tujuan pendirian kampus universitas multimedia nusantara ?!A : Tujuan pendirian kampus Universitas Multimedia Nusantara adalah mencerdaskan kehidupan bangsa dan memajukan kesejahteraan bangsa melalui upaya penyelenggaraan pendidikan tinggi dengan melaksanakan Tridarma Perguruan Tinggi (Pendidikan, Penelitian dan Pengabdian pada Masyarakat), untuk meningkatkan kualitas sumber daya manusia Indonesia.

TRUE

3 Q : Bagaimana alur test masuk universitas multimedia nusantara ?!A : Alur masuk Universitas Multimedia Nusantara adalah dengan melakukan pendaftaran online, melakukan pembayaran biaya pendaftaran, lalu mengikuti ujian saringan masuk.

TRUE

4 Q : Bagaimana cara mendaftar di kampus universitas multimedia nusantara?!A : Cara pendaftaran adalah dengan mengikuti prosedur seperti melakukan pendaftaran online, melakukan pembayaran biaya pendaftaran, lalu mengikuti ujian saringan masuk.

TRUE

5 Q : Berapa biaya pendaftaran di universitas multimedia nusantara ?!A : Biaya pendaftaran Universitas Multimedia Nusantara ada Rp. 200.000.

TRUE

6 Q : Berapa lama kuliah di universitas multimedia nusantara ?!A : Lama kuliah untuk program S1 adalah sekitar 4,5 tahun.

TRUE

7 Q : Dimana lokasi kampus universitas multimedia nusantara ?!A : Kantor Polsek Kelapa Dua berada sejauh lima menit dari kampus Universitas Multimedia Nusantara.

FALSE

8 Q : Fasilitas yang ada di kampus universitas multimedia nusantara apa saja?!A : Fasilitas yang ada di Universitas Multimedia Nusantara antara lain, Laboratorium untuk berbagai keperluan, Function Hall, Kantin, Radio, dan Stasiun Televisi.

TRUE

9 Q : Kapan kuliah perdana dimulai ?!A : Kuliah perdana dimulai pada bulan Juli.

TRUE

10 Q : Apa saja program studi yang ada di Universitas Multimedia Nusantara?!A : Program studi yang ada di Universitas Multimedia Nusantara antaralain Teknik Informatika, Sistem Informasi, Sistem Komputer, Akuntansi, Majemen, Komunikasi dan Desain Komunikasi Visual.

TRUE

11 Q : Ada berapa program studi di kampus universitas Multimedia Nusanta?!A : Universitas Multimedia Nusantara memiliki 7 program studi.

TRUE

12 Q : Berapa jumlah Mahasiswa di kampus ini?!A : Jumlah mahasiswa di Universitas Multimedia Nusantara adalah sekitar 5000 orang.

TRUE


�151

Tabel 5.3 100 hasil pengujian pada sistem. (lanjutan)


13 Q : Universitas Multimedia Nusantara letaknya dimana sih ? !A : Kantor Polsek Kelapa Dua berada sejauh lima menit dari kampus UMN

FALSE

14 Q : Ada apa siaja program studi di kampus universitas multimedia nusantara ?!A Program studi yang ada di Universitas Multimedia Nusantara antaralain Teknik Informatika, Sistem Informasi, Sistem Komputer, Akuntansi, Majemen, DKV

TRUE

15 Q : Bagaimana fasilitas kampus universitas multimedia nusantara ?!A : Universitas Multimedia Nusantara memiiki fasilitas yang sangat lengkap.

TRUE

16 Q : Bagaimana Kawasan Kampus universitas multimedia nusantara dan Sekitarnya ?!A : Keadaan sekitar kampus nyaman dan dekat dengan berbagai fasilitas umum.

TRUE

17 Q : Ada jalur apa saja pada untuk bergabung di Universitas Multimedia Nusantara ?!A : Terdapat tiga jalur pendaftaran Universitas Multimedia Nusantara Jalur Prestasi, Jalur Tes Reguler dan Jalur Beasiswa.

TRUE

18 Q : Bagaimana jalur beasiswa pada Universitas Multimedia Nusantara ?!A : Universitas Multimedia Nusantara memiliki jalur beasiwsa.

FALSE

19 Q : Bagaimana jalur masuk Universitas Multimedia Nusantara ?!A : Ada 3 Jalur masuk Universitas Multimedia Nusantara melalui Jalur Prestasi, Jalur Tes Reguler dan Jalur Beasiswa.

TRUE

20 Q : Apakah Ada Kontrak Kerja Setelah Lulus Dari Universitas Multimedia Nusantara ? TRUE

21 Q : Bagaimana kualitas lulusan universitas multimedia nusantara?!A : Universitas Multimedia Nusantara menghasilkan lulusan yang berkualitas dan dan siap menjadi technopreneur.

TRUE

22 Q : Bagaimana proses belajarnya? TRUE

23 Q : Bagaimana Beban Kuliah? TRUE

24 Q : Berapa biaya SKS untuk bagi Program Studi Teknik Informatika ?!A : Biaya per SKS untuk Program Studi Teknik Informatika adalah Rp 290.000.

TRUE

25 Q : Universitas Multimedia Nusantara itu kampus negeri atau swasta? FALSE

26 Q : Apakah pendaftaran bisa dilakukan online?!A : Biaya pendaftaran Universitas Multimedia Nusantara ada Rp. 200.000

FALSE

27 Q : Bagaimana transportasi umum menuju kampus universitas multimedia nusantara ?!A : Terdapat berbagai transportasi umum untuk menuju kampus.

TRUE

28 Q : Apakah Tersedia beasiswa ? TRUE

29 Q : Apa perbedaan Program Studi DKV, Desain Grafis, dan Seni Grafis? FALSE

30 Q : Kapan universitas multimedia nusantara berdiri ?!A : Universitas Multimedia Nusantara berdiri pada tanggal 25 November 2005.

TRUE

31 Q : Kapan universitas multimedia nusantara didirikan ?!A : Universitas Multimedia Nusantara berdiri pada tanggal 25 November 2005.

TRUE

32 Q : Siapa rektor pertama universitas multimedia nusantara ?!A : Rektor pertama Universitas Multimedia Nusantara adalah Prof. Yohanes Surya, Ph.D.

TRUE

33 Q : Siapa rektor universitas multimedia nusantara sekarang ?!A : Rektor Universitas Multimedia Nusantara adalah Dr. Ninok Leksono.

TRUE


�152

Tabel 5.3 100 hasil pengujian pada sistem. (lanjutan II)


34 Q : Penghargaan apa saja yang telah di peroleh universitas multimedia nusantara ?!A : Penghargaan yang telah diraih oleh Kampus Universitas Multimedia Nusantara adalah Juara 1 New Media Tower Kategori Gedung Hemat Energi yang diselenggarakan oleh Kementrian Energi dan Sumber Daya Manusia.

TRUE

35 Q : Berapa laboratorium yang ada di universitas multimedia nusantara ?!A : Universitas Multimedia Nusantara memiliki 16 laboratorium.

TRUE

36 Q : Laboratoriom apa saja yang ada di universitas multimedia nusantara ?!A : Laboratorium yang ada pada kampus Universitas Multimedia Nusantara antara lain lab komputasi dasar, multimedia, design, movie editing, sound editing, networking, dan komputer engineering.

TRUE

37 Q : Fasilitas apa saja yang ada di studio TV Universitas Multimedia Nusantara ?!A : Peralatan yang tersedia di studio TV UMN antara lain Teleprompter, Character Generator, Switcher, Video Mixer, HD Camcorder.

TRUE

38 Q : Fakultas apa saja yang di miliki universitas multimedia nusantara ?!A : Fakultas dimiliki Universitas Multimedia Nusantara antara lain Fakultas ICT, Fakultas Ekonomi, Fakultas Ilmu Komunikasi, dan Fakultas Seni dan Desain.

TRUE

39 Q : Ada Unit Kegiatan Mahasiswa apaan aja di universitas multimedia nusantara ?!A : Unit Kegiatan Mahasiswa yang ada di Universitas Multimedia Nusantara antaralain adalah Rencang, Tradisional Dance, Taekwondo, dan lain sebagainya

TRUE

40 Q : Bagaimana cara pembayaran uang kuliah ?!A : Apabila diterima di Perguruan Tinggi Negri melalui jalur SNMPTN biaya yang sudah dibayarkan akan dikembalikan setelah dipotong Rp 1.000.000.

FALSE

41 Q : Di universitas multimedia nusantara ada fasilitas apa aja ?!A : Fasilitas yang ada di Universitas Multimedia Nusantara antara lain, Laboratorium untuk berbagai keperluan, Function Hall, Kantin, Radio, dan Stasiun TV.

TRUE

42 Q : universitas multimedia nusantara itu dimana sih ?!A : Alamat Universitas Multimedia Nusantara di Scientia Garden, Jl. Boulevard Gading Serpong Tangerang - Banten.

TRUE

43 Q : Universitas multimedia nusantara ada jurusan apa saja ?!A : Jurusan Universitas Multimedia Nusantara antara lain Program Studi Teknik Informatika, Program Studi Sistem Komputer, Program Studi Sistem Informasi, Program Studi Manajemen, Program Studi Akuntansi, Program Studi Desain Komunikasi Visual, dan Program Studi Komunikasi.

TRUE

44 Q : Prestasi apa yang telah dicapai universitas multimedia nusantara ?!A : Perstasi telah diperoleh antaralain adalah di bidang olahraga dan akademik.

TRUE

45 Q : Bagaimana dengan transportasi umum ke universitas multimedia nusantara ?!A : Tersedia berbagai akses untuk menuju Universitas Multimedia Nusantara dengan menggunakan transportasi Umum, antaralain angkutan kota dan Bus UMN.

TRUE

46 Q : Apakah ada Bis universitas multimedia nusantara ?!A : Visi Universitas Multimedia Nusantara adalah Universitas Multimedia Nusantara menjadi perguruan tinggi unggulan di bidang ICT, baik di tingkat nasional maupun internasional, yang menghasilkan lulusan berwawasan internasional dan berkompetensi tinggi di bidangnya (berkeahlian) yang disertai jiwa wirausaha serta berbudi pekerti luhur.

FALSE

47 Q : Bagaimana kualitas dari dosen dosen di universitas multimedia nusantara ?!A : Universitas Multimedia Nusantara memiliki dosen dan tenaga pengajar yang berkualitas.

TRUE


�153

Tabel 5.3 100 hasil pengujian pada sistem. (lanjutan III)


48 Q : Berapa biaya regulernya ?!A : Terdapat tiga jalur pendaftaran Universitas Multimedia Nusantara Jalur Prestasi, Jalur Tes Reguler dan Jalur Beasiswa.

FALSE

49 Q : Bagaimana kondisi kantin di universitas Multimedia Nusantara ?!A : Kondisi Kantin Universitas Multimedia Nusantara menyediakan beragam pilihan makanan dengan tempat yang nyaman untuk berkumpuldan berdiskusi.

TRUE

50 Q : Apakah universitas multu=imedia nusantara sudah diakreditasi ?!A : Universitas Multimedia Nusantara memiliki program studi yang sudah memperoleh akreditasi yang baik.

TRUE

51 Q : Apa akreditasi fakutas ICT ?!A : Akreditasi untuk Fakultas ICT adalah B.

TRUE

52 Q : Apa akreditasi fakultas Desain Komunikasi Visual ?!A : Akreditasi untuk Fakultas Desain Komunikasi Visual adalah B.

TRUE

53 Q : Apa akreditasi fakultas Ilmu Komunikasi ?!A : Akreditasi untuk Fakultas Ilmu Komunikasi adalah B.

TRUE

54 Q : Apa akreditasi fakultas Ekonomi?!A : Akreditasi untuk Fakultas Ekonomi adalah B.

TRUE

55 Q : Bagaimana cara untuk ke universitas multimedia nusantara ?!A : Kondisi Kantin Universitas Multimedia Nusantara menyediakan beragam pilihan makanan dengan tempat yang nyaman untuk berkumpuldan berdiskusi.

FALSE

56 Q : Apa penghargaan yang sudah diraih universitas multimedia nusantara ?!A : Penghargaan yang telah diraih oleh Kampus Universitas Multimedia Nusantara adalah Juara 1 New Media Tower Kategori Gedung Hemat Energi yang diselenggarakan oleh Kementrian Energi dan Sumber Daya Manusia.

TRUE

57 Q : Apa motto Kompas Gramedia ?!A : Motto Kompas Gramedia adalah Enlightening People.

TRUE

58 Q : apa visi universitas multimedia nusantara?!A : Visi Universitas Multimedia Nusantara adalah Universitas Multimedia Nusantara menjadi perguruan tinggi unggulan di bidang ICT, baik di tingkat nasional maupun internasional, yang menghasilkan lulusan berwawasan internasional dan berkompetensi tinggi di bidangnya (berkeahlian) yang disertai jiwa wirausaha serta berbudi pekerti luhur.

TRUE

59 Q : Apa misi universitas multimedia nusantara?!A : Misi Universitas Multimedia Nusantara adalah Turut serta mencerdaskan kehidupan bangsa dan memajukan kesejahteraan bangsa melalui upaya penyelenggaraan pendidikan tinggi dengan melaksanakan Tridarma Perguruan Tinggi (Pendidikan, Penelitian dan Pengabdian pada Masyarakat), untuk meningkatkan kualitas sumber daya manusia Indonesia.

TRUE

60 Q : Kapan universitas multimedia nusantara didirikan?!A : Universitas Multimedia Nusantara berdiri pada tanggal 25 November 2005.

TRUE

61 Q : kapan universitas multimedia nusantara berdiri?!A : Universitas Multimedia Nusantara berdiri pada tanggal 25 November 2005.

TRUE

62 Q : Apa fasilitas di universitas multimedia nusantara?!A : Fasilitas yang ada di Universitas Multimedia Nusantara antara lain, Laboratorium untuk berbagai keperluan, Function Hall, Kantin, Radio, dan Stasiun Televisi

TRUE

63 Q : Apakah universitas multimedia nusantara menyediakan dormitori?!A : Universitas Multimedia Nusantara menyediakan fasilitas Dormitory untuk mahasiswa.

TRUE


�154

Tabel 5.3 100 hasil pengujian pada sistem. (lanjutan IV)

!


64 Q : Apa ada dormitori di universitas multimedia nusantara?!A : Universitas Multimedia Nusantara menyediakan fasilitas Dormitory untuk mahasiswa.

TRUE

65 Q : Siapa pendiri universitas multimedia nusantara?!A : Pendiri Universitas Multimedia Nusantara adalah Dr. (HC) Jakob Oetama.

TRUE

66 Q : Ada berapa fakultas di universitas multimedia nusantara ?!A : Universitas Multimedia Nusantara memiliki empat fakultas. Fakultas ICT, Fakultas Ekonomi, Fakultas Komunikasi, dan Fakultas Seni dan Design.

TRUE

67 Q : Apa prospek karir Program Studi Teknik Informatika ?!A : Universitas Multimedia Nusantara memiliki empat fakultas. Fakultas ICT, Fakultas Ekonomi, Fakultas Komunikasi, dan Fakultas Seni dan Design.Prospek karier dari Program Studi Teknik Informatika antara lain Creative mobile aplication developer, creative game developer dan database application programmer.

TRUE

68 Q : Apa prospek karir Program Studi Desain Komunikasi Visual ?!A : Prospek karier dari Program Studi Desain Komunikasi Visual antara lain web site designer, printed media designer, mutilmedia device designer, game environment designer, advertising designer, packaging designer, logo dan brand designer.

TRUE

69 Q : Apa prospek karir Program Studi Komunikasi ?!A: Prospek karier dari Program Studi Komunikasi antara lain Creative Multimedia Journalism, Creative Broadcaster, Creative TV Program Producer, Creative PR Executive dan Creative Writer.

TRUE

70 Q : Apa prospek karir Program Studi Manajemen ?!A : Prospek karier dari Program Studi Manajemen Peminatan Marketing Management adalah sebagai Manager yang menguasain strategi marketing di era digital.

TRUE

71 Q : Ada berapa program peminatan program studi manajemen ?!A : Program Studi Manajemen memiliki 4 bidang peminatan.

TRUE

72 Q : Ada berapa program peminatan program studi akuntansi ?!A : Program Studi Akuntansi memiliki 3 bidang peminatan.

TRUE

73 Q : Ada berapa program peminatan program studi Teknik Informatika ?!A : Program Studi Teknik Informatika memiliki 4 bidang peminatan.

TRUE

74 Q : Ada berapa program peminatan Program Studi Sistem Komputer ?!A : Program Studi Sistem Komputer memiliki 4 bidang peminatan.

TRUE

75 Q : Ada berapa program peminatan Program Studi Desain Komunikasi Visual?!A : Program Studi Desain Komunikasi Visual memiliki 4 bidang peminatan.

TRUE

76 Q : Ada berapa program peminatan program studi sistem informasi ?!A : Program Studi Sistem Informasi memiliki 4 bidang peminatan.

TRUE

77 Q : Ada berapa program peminatan program studi sistem komputer ?!A : Program Studi Sistem Komputer memiliki 4 bidang peminatan.

TRUE

78 Q : Kapan tes masuk reguler dilakukan?!A : Pendaftaran Jalur Tes Reguler ketujuh dimulai pada tanggal 2 Maret 2014.

TRUE

79 Q : Ada berapa kali tes masuk dilakukan?!A : Universitas mengadakan 7 kali ntuk tes ujian masuk dengan beberapa jalur masuk.

TRUE

80 Q : Ada berapa grade masuk universitas multimedia nusatara ?!A : Untuk setiap jalur masuk secara reguler Universitas Multimedia Nusantara memiliki 3 tingkatan grade masuk yaiut Grade A, Grade B, dan Grade C.

TRUE


�155

Tabel 5.3 100 hasil pengujian pada sistem. (lanjutan V)


81 Q : Kapan Pendaftaran Jalur Beasiswa dimulai ?!A : Pendaftaran Jalur Beasiswa dimulai pada tanggal 15 Juli 2013.

TRUE

82 Q : Kapan Pendaftaran Jalur PMDK dimulai ?!A : Pendaftaran Jalur PMDK dimulai pada tanggal 15 Juli 2013.

TRUE

83 Q : Kapan Pendaftaran Jalur Tes Reguler ketujuh dimulai ?!A : Pendaftaran Jalur Tes Reguler ketujuh dimulai pada tanggal 2 Maret 2014.

TRUE

84 Q : Kapan Pendaftaran Jalur Tes Reguler kedelapan dimulai ?!A : Pendaftaran Jalur Tes Reguler kedelapan dimulai pada tanggal 23 Maret 2014.

TRUE

85 Q : Kapan Pendaftaran Jalur Tes Reguler kesembilan dimulai ?!A : Pendaftaran Jalur Tes Reguler kesembilan dimulai pada tanggal 27 April 2014.

TRUE

86 Q : Berapa Uang pangkal untuk Program Studi Teknik Informatika dengan Grade B ?!A : Uang pangkal untuk Program Studi Teknik Informatika dengan Grade B adalah Rp 26.500.000.

TRUE

87 Q : Berapa kapasistas dari parkiran Universitas Multimedia Nusantara ?!A : Universitas Multimedia Nusantara

TRUE

89 Q : Berapa Frekuensi radio Universitas Multimedia Nusantara ?!A : Frekuensi radio Universitas Multimedia Nusantara adalah 107.7 FM.

TRUE

90 Q : Bagaimana Radio Universitas Multimedia Nusantara disiarkan ?!A : Radio Universitas Multimedia Nusantara disiarkan secara streaming di radio.umn.ac.id.

TRUE

91 Q : Siapa yang menyiarkan Radio Universitas Multimedia Nusantara ?!A : Radio Universitas Multimedia Nusantara disiarkan oleh Mahasiswa Universitas Multimedia Nusantara.

TRUE

92 Q : Kapan Radio Universitas Multimedia Nusantara disiarkan ?!A : Radio Universitas Multimedia Nusantara disiarkan pada hari Senin hingga Sabtu pukul 8 - 5 sore.

TRUE

93 Q : Apa yang dimaksud dengan Kompas Corner ?!A : Kompas Corner merupakan ruang interaktif untuk mengakses informasi yang telah diterbitkan harian Kompas dan juga sebagai ruang bertukar gagasan serta argumentasi.

TRUE

94 Q : Apa itu Business Incubator ?!A : Business Incubator adalah wadah untuk mahasiswa yang berjiwa technopreneur.

TRUE

95 Q : Dimana Alamat Universitas Multimedia Nusantara ?!A : Alamat Universitas Multimedia Nusantara di Scientia Garden, Jl. Boulevard Gading Serpong Tangerang - Banten.

TRUE

96 Q : Berapa Nomor Telepon Universitas Multimedia Nusantara ?!A : Nomor Telepon Universitas Multimedia Nusantara (021) 5422 0808 | Fax. (021) 5422 0800.

TRUE

97 Q : Berapa telepon Universitas Multimedia Nusantara yang dapat dihubungi ?!A : Nomor Telepon Universitas Multimedia Nusantara (021) 5422 0808 | Fax. (021) 5422 0800.

TRUE

98 Q : Siapa Kontak Person Universitas Multimedia Nusantara yang dapat di hubungi ?!A : Kontak Person Universitas Multimedia Nusantara antara lain Endang : 0818312824.

TRUE

99 Q : Apa nama Facebook Universitas Multimedia Nusantara ?!A : Facebook Universitas Multimedia Nusantara adalah Universitas Multimedia Nusantara.

TRUE


�156

Tabel 5.3 20 hasil pengujian pada input tambahan untuk sistem. (lanjutan VI)

!Tabel 5.3 20 hasil pengujian pada input tambahan untuk sistem.

!


100 Q : Apa Twitter Universitas Multimedia Nusantara ?!A : Twitter Universitas Multimedia Nusantara adalah @umn_serpong.

TRUE

101 Q : Berapa Pin Blackberry Universitas Multimedia Nusantara ?!A : Pin Blackberry Universitas Multimedia Nusantara adalah 2788479F.

TRUE


1 Q : Hai!A : Hai, ada yang bisa kami bantu ?

TRUE

2 Q : Halo!A : Halo, ada yang bisa kami bantu ?

TRUE

3 Q : Selamat pagi!A : Selamat pagi, ada yang bisa kami bantu ?

TRUE

4 Q : Selamat siang!A : Selamat siang, ada yang bisa kami bantu ?

TRUE

5 Q : Selamat sore!A : Selamat sore, ada yang bisa kami bantu ?

TRUE

6 Q : Selamat malam!A : Selamat malam, ada yang bisa kami bantu ?

TRUE

7 Q : Nama saya AE Antares!A : Terimakasih atas input yang telah anda berikan. Untuk mengetahui infomasi mengenai Kampus Universitas Multimedia Nusantara, silahkan masukan input berupa pertanyaan mengenai Kampus Universitas Multimedia Nusantara

TRUE

8 Q : Disini hujan!A : Terimakasih atas input yang telah anda berikan. Untuk mengetahui infomasi mengenai Kampus Universitas Multimedia Nusantara, silahkan masukan input berupa pertanyaan mengenai Kampus Universitas Multimedia Nusantara

TRUE

9 Q : Dikampus ada kantin ga ?!A : Terimakasih atas input yang telah anda berikan. Untuk mengetahui infomasi mengenai Kampus Universitas Multimedia Nusantara, silahkan masukan input berupa pertanyaan mengenai Kampus Universitas Multimedia Nusantara

TRUE

10 Q : Sebutkan fakultas apa saja yang ada!A : Fakultas dimiliki Universitas Multimedia Nusantara antara lain Fakultas ICT, Fakultas Ekonomi, Fakultas Ilmu Komunikasi, dan Fakultas Seni dan Desain.

TRUE

11 Q : Sebutkan biaya untuk teknik infomartika grade A!A : Uang pangkal untuk Program Studi Teknik Informatika dengan Grade A adalah Rp 24.000.000.

TRUE

12 Q : Apa kabar ?!A : Hai apakabar, ada yang bisa kami bantu ?

TRUE

13 Q : Disana ada apa ?!A : Maaf, informasi tersebut tidak terdapat dalam sistem.

TRUE


�157

Tabel 5.3 20 hasil pengujian pada input tambahan untuk sistem. (lanjutan I)

!!Berdasarkan tabel hasil uji coba sistem di atas, diperoleh data bahwa dari

101 pertanyaan yang diajukan kepada sistem, sistem mampu menjawab sebanyak

89 jawaban dengan benar. Dengan ini dinyatakan bahwa untuk 100 pertanyaan,

tingkat akurasi jawaban sistem adalah 89%. Hasil detail parsing pada input

terdapat pada lampiran skripsi ini.

Untuk pembahasan lebih lanjut dari hasil tersebut akan dijabarkan pada

sub-bab yang selanjutnya.

!5.5.5 Pembahasan

Berikut ini adalah rincian pembahasan dari uji coba aplikasi, perhitungan

akurasinya, dan analisis kesalahan yang telah penulis lakukan pada sistem ini.


14 Q : Jelaskan visi Universitas Multimedia Nusantara!A : Visi Universitas Multimedia Nusantara adalah Universitas Multimedia Nusantara menjadi perguruan tinggi unggulan di bidang ICT, baik di tingkat nasional maupun internasional, yang menghasilkan lulusan berwawasan internasional dan berkompetensi tinggi di bidangnya (berkeahlian) yang disertai jiwa wirausaha serta berbudi pekerti luhur.

TRUE

15 Q : Jelaskan misi Universitas Multimedia Nusantara!A : Misi Universitas Multimedia Nusantara adalah Turut serta mencerdaskan kehidupan bangsa dan memajukan kesejahteraan bangsa melalui upaya penyelenggaraan pendidikan tinggi dengan melaksanakan Tridarma Perguruan Tinggi (Pendidikan, Penelitian dan Pengabdian pada Masyarakat), untuk meningkatkan kualitas sumber daya manusia Indonesia.

TRUE

16 Q : Sebutkan moto Kompas Gramedia!A : Motto Kompas Gramedia adalah Enlightening People.

TRUE

17 Q : Jelaskan apa itu Universitas multimedia nusantara!A : Universitas Multimedia Nusantara adalah merupakan sebuah lembaga perguruan tinggi dengan teknologi informasi dan komunikasi sebagai dasar dalam setiap proses belajar mengajar di tiap mata kuliah yang diselenggarakannya.

TRUE

18 Q : Jelaskan Program Studi yang ada di kampus ini!A :Program studi yang dimiliki Universitas Multimedia Nusantara antara lain Program Studi Teknik Informatika, Program Studi Sistem Komputer, Program Studi Sistem Informasi, Program Studi Manajemen, Program Studi Akuntansi, Program Studi Desain Komunikasi Visual, dan Program Studi Komunikasi.

TRUE

19 Q : Gambarkan suasana di kampus Universitas Multimedia Nusantara!A : Keadaan sekitar kampus nyaman dan dekat dengan berbagai fasilitas umum.

TRUE

20 Q : Jelaskan keadaan sekitar kampus Universitas Multimedia Nusantara!A : Keadaan sekitar kampus nyaman dan dekat dengan berbagai fasilitas umum.

TRUE


�158

Seperti yang telah dijelaskan sebelumnya, tingkat akurasi ketepatan jawaban dari

sistem untuk 100 pertanyaan yang diujikan adalah 89%, dimana sistem dapat

menjawab 89 pertanyaan dengan benar dari seluruh 100 pertanyaan yang

diajukan.

Akan tetapi, setelah dilakukan pengecekan proses secara detail

menggunakan fitur process monitoring pada sistem kesalahan jawaban yang

diberikan tidak seluruhnya terjadi pada proses parsing yang menjadi fokus

penelitian ini.

Berikut ini dijelaskan beberapa aspek yang mempengaruhi akurasi

jawaban sistem di luar kesalahan pada proses parsing.

1. Beberapa kesalahan terjadi pada proses perubahan gelombang akustik

menjadi teks yang disebabkan oleh noise ataupun lambatnya kinerja

hardware device, sehingga menghasilkan teks input yang tidak lengkap

sesuai dengan yang diucapkan. Akan tetapi untuk kesalahan ini dilakukan

pengucapan ulang.

2. Karena hasil dari pe-ranking-an (TF-IDF Information Retrieval) sangat

berpengaruh, dimana hanya knowledge dengan score tertinggi yang dipilih

menjadi jawaban, maka kurangnya akurasi pada metode TF-IDF ini akan

berpengaruh pada salah atau benarnya jawaban yang akan dikembalikan

oleh sistem.

3. Kesalahan juga sering terjadi karena tidak lengkapnya atau terlalu luas dan

umumnya pertanyaan yang diajukan pada user. Sebagai contoh, untuk

pertanyaan “Apakah Universitas Mutimedia Nusantara itu ?” dengan tag

“Apakah|X Universitas|NN Mutimedia|NN Nusantara|NN itu|IN”.

Pertanyaan tersebut hanya akan diperoleh hasil parsing berupa question

focus [‘Universitas Multimedia Nusantara’] dan kata tanya ‘Apakah’.

Padahal, terdapat banyak knowledge yang juga mengandung kata

‘Universitas Multimedia Nusantara’ oleh karena itu, sistem akan

mengambil knowledge dengan posisi teratas pada ranking meskipun score


�159

yang diberikan tidak terlalu baik. Hal ini akan memberikan jawaban yang

salah untuk customer.

4. Kesalahan lain adalah pada kurang lengkapnya knowledge yang dimiliki

oleh sistem karena knowledge ini dibangun secara manual oleh penulis.

Jika tidak terdapat jawaban yang diharapkan dari input pertanyaan yang

diajukan, maka yang dikembalikan adalah jawaban yang paling dekat

keterkaitannya berdasarkan score TF-IDFnya. Sistem hanya akan memberi

informasi ‘data tidak ditemukan’ jika score dari knowledge peringkat

pertama adalah 0.

5. Kesalahan yang dilakukan dalam pemberian tag Predictive Annotation pada

masing - masing knowledge, sehingga sistem tidak dapat menemukan

jawaban di kategori yang tepat.

!Untuk kesalahan parsing yang dilakukan oleh sistemnya sendiri

disebabkan oleh beberapa faktor berikut antara lain.

1. Tidak lengkapnya kamus maupun corpus yang digunakan penulis dalam

melakukan proses Part-of-Speech Tagging (PoS Tagging) sehingga

memberikan dampak pada proses yang selanjutnya. Hal ini disebabkan oleh

penggunaan resource dari Bahasa Indonesia yang masih kurang lengkap

dan belum banyak dikembangkan.

2. Tidak lengkapnya resource rule-based dan memory-based yang digunakan

oleh penulis dalam melakukan proses IOB tagging pada text chunking. Hal

ini juga disebabkan kurangnya pengembangan processing untuk Bahasa

Indonesia.

3. Tidak lengkapnya frasa tanya yang digunakan pada sistem. Sekali lagi hal

ini disebabkan oleh kurangnya pengembangan resource pada processing

untuk Bahasa Indonesia.

!


bab v implementasi dan uji cobakc.umn.ac.id/1559/5/bab v.pdf · oleh user dan jawaban yang...

Documents