IMPLEMENTASI YOLOv11 UNTUK DETEKSI KATA BAHASA ISYARAT BISINDO DAN SIBI

Ahmad Syaefudin; Hidayatus Sibyan; Rina Mahmudati; M. Fuat Asnawi; Nur Hasanah

doi:10.32500/jebe.v7i2.11208

Authors

Ahmad Syaefudin Universitas Sains Al-Qur'an
Hidayatus Sibyan Universitas Sains Al-Qur'an
Rina Mahmudati Universitas Sains Al-Qur'an
M. Fuat Asnawi Universitas Sains Al-Qur'an
Nur Hasanah Universitas Sains Al-Qur'an

DOI:

https://doi.org/10.32500/jebe.v7i2.11208

Keywords:

Bahasa Isyarat, BISINDO, SIBI, YOLOv11, Deteksi Objek

Abstract

Komunikasi merupakan hak dasar manusia, namun penyandang disabilitas rungu sering menghadapi hambatan dalam berinteraksi dengan masyarakat umum yang minim pemahaman bahasa isyarat. Penelitian ini bertujuan untuk mengimplementasikan dan mengevaluasi kinerja algoritma YOLOv11 dalam mendeteksi kata pada Bahasa Isyarat Indonesia (BISINDO) dan Sistem Isyarat Bahasa Indonesia (SIBI) secara real-time. Metode yang digunakan meliputi pengumpulan dataset sebanyak 1.745 citra yang mencakup 12 kelas kata, preprocessing menggunakan Roboflow untuk anotasi dan augmentasi, serta pelatihan model menggunakan Google Colab. Hasil penelitian menunjukkan bahwa model YOLOv11 mampu mendeteksi bahasa isyarat dengan sangat baik, mencapai nilai mean Average Precision (mAP@50) sebesar 98%, Precision 96.8%, dan Recall 96.4% pada tahap validasi. Implementasi sistem dilakukan berbasis web menggunakan framework Flask, memungkinkan deteksi interaktif melalui kamera. Secara keseluruhan, penelitian ini menunjukkan bahwa penerapan model YOLOv11 efektif dalam mendukung penerjemahan bahasa isyarat secara real-time. Implikasi dari penelitian ini adalah meningkatnya aksesibilitas komunikasi bagi penyandang disabilitas rungu, khususnya dalam interaksi sehari-hari dengan masyarakat umum, serta membuka peluang pengembangan sistem penerjemah bahasa isyarat yang lebih luas, adaptif, dan terintegrasi pada berbagai platform digital.

References

Daniels, S., Suciati, N., & Fathichah, C. (2021, February). Indonesian sign language recognition using yolo method. In IOP Conference Series: Materials Science and Engineering (Vol. 1077, No. 1, p. 012029). IOP Publishing.

Farah, S., Husna, D., Desintha, S., & Mustikawan, D. A. (2025). Perancangan Buku “Jari Berbicara” Sebagai Pengenalan Bahasa Isyarat Bagi Kalangan Generasi Z. Jurnal Desain, 12(1).

Gumelar, G., Hafiar, H., & Subekti, P. (2018). Konstruksi Makna Bisindo Sebagai Budaya Tuli Bagi Anggota Gerkatin. Informasi, 48(1), 65.

Alfikri, H, R., Siswo Utomo, M., Februariyanti, H., & Nurwahyudi, E. (2022). Pembangunan Aplikasi Penerjemah Bahasa Isyarat Dengan Metode CNN Berbasis Android. Jurnal Teknoinfo, 16(2).

Isma, S. T. (2018). Meneliti Bahasa Isyarat Dalam Perspektif Variasi Bahasa. (Naskah Publikasi/Tesis) .

Jegham, N., Koh, C. Y., Abdelatti, M., & Hendawi, A. (2024). YOLO Evolution: A Comprehensive Benchmark and Architectural Review of YOLOv12, YOLO11, and Their Previous Versions. arXiv preprint arXiv:2411.00201.

Jocher, G., et al. (2025). Ultralytics YOLO. Tersedia di: https://github.com/ultralytics/ultralytics.

Li, X., Jettanasen, C., & Chiradeja, P. (2025). Exploration of Sign Language Recognition Methods Based on Improved YOLOv5s. Computation, 13(3), 59.

Mailani, O., Nuraeni, I., Syakila, S. A., Lazuardi, J., & Komunikasi, P. I. (2022). Bahasa Sebagai Alat Komunikasi Dalam Kehidupan Manusia. Jurnal Kampret, 1(2).

Munandar, A., Yunizar, Z., & Retno, S. (2024, December). Indonesian Sign Language (BISINDO) Alphabet Detection System Using YOLO (You Only Look Once) Algorithm. In Proceedings of Malikussaleh International Conference on Multidisciplinary Studies (MICoMS) (Vol. 4, pp. 00001-00001).

Octaviani, Y. (2020). Kemampuan Interaksi Sosial Tunarungu di Kelurahan Batununggal Kota Bandung..

Renaningtias, N., Utama, F. P., & Sobri, A. N. A. (2025). Detection System Indonesian Sign Language (BISINDO) in Video with YOLOv7. JSAI (Journal Scientific and Applied Informatics), 8(1), 1-8.

Tawfik, M., & Badawy, W. (2025, November). Performance Evaluation of YOLO Models for Sign Language Detection: A Comparative Study. In 2025 Twelfth International Conference on Intelligent Computing and Information Systems (ICICIS) (pp. 120-127). IEEE.

Utami, I. S. (2016). Sikap Siswa Tunarungu Terhadap SIBI (Sistem Isyarat Bahasa Indonesia).