2020 : Pengukuran antusiasme mahasiswa dalam perkuliahan menggunakan hasil pengenalan ekspresi wajah pada sistem monitoring perkuliahan berbasis video

Dr.Eng. Nanik Suciati S.Kom., M.Kom.

Year

2020

Published in

-

External link

Type

RESEARCH

Keywords

-


Abstract

Penelitian ini bertujuan untuk mengembangkan aplikasi pengukuran tingkat antusiasme mahasiswa dalam perkuliahan menggunakan hasil pengenalan ekspresi wajah pada sistem monitoring perkuliahan berbasis video. Lingkungan pemantauan yang ditargetkan adalah perkuliahan offline di ruang kelas Departemen Teknik Informatika yang direkam menggunakan kamera IP. Sistem monitoring perkuliahan terdiri dari empat modul utama, yaitu modul pengenalan wajah, modul pengenalan ekspresi, modul pengelolaan data kehadiran, serta modul pengukuran tingkat antusiasme mahasiswa. Terdapat 4 langkah pada modul pengenalan ekspresi, yaitu deteksi wajah, pelacakan wajah, ekstraksi fitur wajah, dan klasifikasi ekspresi wajah. Pembagian kelas ekspresi mengacu pada beberapa penelitian sebelumnya yaitu marah, sedih, bahagia, terkejut, netral, ditambah dengan bosan, mengantuk dan tidur. Berkaitan dengan antusiasme dalam perkuliahan, kelas-kelas ekspresi tersebut selanjutnya dikelompokkan menjadi dua, yaitu positif dan negatif. Kelas positif berarti mahasiswa antusias dalam mengikuti perkuliahan, dan kelas negatif menandakan kondisi sebaliknya. Proses deteksi area wajah dan klasifikasi ekspresi diimplementasikan menggunakan algoritma deep learning dengan melakukan transfer learning pada beberapa pre-trained model Convolutional Neural Network, seperti YOLO, Dlib, MTCNN, VGG, ResNet dan MobileNet. Pada modul pengukuran tingkat antusiasme mahasiswa, terdapat 2 fitur penting yang harus disediakan, yaitu fitur pengelolaan database ekspresi peserta kuliah, dan fitur perhitungan antusiasme. Selain itu, perlu dilakukan integrasi keseluruhan modul serta pengembangan antar muka sistem untuk memudahkan user admin mengelola dan menganalisis data perkuliahan. Target luaran dari penelitian ini adalah prototype aplikasi pengukuran tingkat antusiame mahasiswa dalam perkuliahan dan publikasi di jurnal/seminar internasional.