TA DIGITAL
Sistem AIOT Untuk Rekomendasi Musik Berdasarkan Ekspresi Wajah Menggunakan ESP32-Cam Dan Tiny Yolo = AIOT System for Music Recommendation Based on Facial Expressions Using ESP32-Cam and Tiny Yolo
Divandra Jamby dan Aulia Oktaviandri Rochani, “Sistem AIoT Untuk Rekomendasi Musik Berdasarkan Ekspresi Wajah Menggunakan Esp32-Cam dan Tiny Yolo” Tugas Akhir DIII Program Studi Teknik Informatika, Jurusan Teknik Elektro Politeknik Negeri Semarang, di bawah bimbingan Liliek Triyono, S.T., M.Kom., dan Sirli Fahriah, S.Kom., M.Kom.. 30 Juli 2024.
Sistem rekomendasi musik berbasis ekspresi wajah merupakan inovasi dalam pemanfaatan teknologi AIoT (Artificial Intelligence of Things) yang memadukan teknologi pengenalan wajah dengan pemutaran musik otomatis. Penelitian ini mengembangkan sistem yang menggunakan modul ESP32-CAM untuk menangkap gambar wajah pengguna dan algoritma Tiny YOLOv2 untuk mendeteksi dan mengidentifikasi ekspresi wajah. Ekspresi yang terdeteksi, seperti bahagia, sedih, dan netral, digunakan sebagai dasar untuk merekomendasikan dan memutar musik yang sesuai dengan suasana hati pengguna. Sistem ini dirancang untuk memberikan pengalaman mendengarkan musik yang lebih personal dan relevan secara emosional, serta meningkatkan kesejahteraan pengguna dengan menyesuaikan pemutaran musik berdasarkan kondisi emosional mereka. Implementasi sistem dilakukan dengan menggunakan Node-RED untuk mengatur alur data dan komunikasi antar perangkat, serta face-api.js untuk analisis ekspresi wajah. Pengujian sistem menunjukkan bahwa sistem dapat mendeteksi ekspresi wajah dan memutar musik yang sesuai dengan tingkat akurasi yang memadai. Hasil dari penelitian ini menunjukkan bahwa teknologi pengenalan ekspresi wajah dapat diintegrasikan secara efektif dengan sistem rekomendasi musik, memberikan solusi yang inovatif dan praktis bagi pengguna. Evaluasi tingkat kepuasan pengguna dilakukan dengan menyebarkan kuesioner kepada 30 responden, dan hasilnya menunjukkan bahwa 91,6% responden sangat puas dengan sistem ini, dan 76,6% merasa bahwa sistem ini meningkatkan pengalaman mendengarkan musik mereka. Sistem ini juga memiliki potensi untuk diterapkan pada berbagai aplikasi lain yang memerlukan penyesuaian layanan berdasarkan kondisi emosional pengguna.
Kata Kunci: AIoT, Rekomendasi Musik, Ekspresi Wajah, ESP32-CAM, Tiny YOLOv2, Node-RED, face-api.js
No other version available
Computer Science, Information & General Works 
Philosophy & Psychology 
Religion 
Social Sciences 
Language 
Pure Science 
Applied Sciences 
Art & Recreation 
Literature 
History & Geography