Repository UHAMKA(INSTEK - S3) - Adellia, Hasan [2026-10-30]Firman NoorHasanauthorPerbedaan pemahaman antara pengguna Bahasa Isyarat Indonesia (BISINDO) dan masyarakat yang belum menguasainya masih menghambat komunikasi. Penelitian ini bertujuan mengembangkan prototipe pengenalan 15 kosakata atau frasa dasar BISINDO secara real-time dengan keluaran teks dan suara. Dataset terdiri atas 4.500 sequence yang direkam oleh satu peraga isyarat, yaitu peneliti sendiri. Sistem menggunakan MediaPipe untuk mengambil landmark tangan dan tubuh. Fitur koordinat dan velocity disusun menjadi sequence 30 frame, kemudian diproses menggunakan model Transformer Encoder dan LSTM. Hasil prediksi diolah menggunakan CTC dan Levenshtein Distance, ditampilkan melalui Streamlit, dan diubah menjadi suara dengan Text-to-Speech. Evaluasi dilakukan pada 450 sequence yang juga digunakan sebagai data validasi. Hasilnya menunjukkan accuracy 95,56%, precision 95,53%, recall 95,57%, F1-score 95,55%, dan CER 4,00%. Pada pengujian real-time, akurasi mencapai 92,00% pada jarak ±100 cm, 92,67% pada pencahayaan terang, dan 92,67% pada posisi kamera lurus. Namun, akurasi turun menjadi 65,33% pada jarak jauh, 81,33% pada pencahayaan redup, dan 78,00% pada posisi serong. Hasil penelitian masih terbatas pada kosakata, peraga isyarat, dan kondisi pengujian yang digunakan.T Technology (General)2026-10-30Department of Informatics Engineering, Universitas Islam Negeri (UIN) Alauddin Makassar, IndonesiaArticle

For work being deposited by its own author: In self-archiving this collection of files and associated bibliographic metadata, I grant Repository UHAMKA the right to store them and to make them permanently available publicly for free on-line. I declare that this material is my own intellectual property and I understand that Repository UHAMKA does not assume any responsibility if there is any breach of copyright in distributing these files or metadata. (All authors are urged to prominently assert their copyright on the title page of their work.)

For work being deposited by someone other than its author: I hereby declare that the collection of files and associated bibliographic metadata that I am archiving at Repository UHAMKA) is in the public domain. If this is not the case, I accept full responsibility for any breach of copyright that distributing these files or metadata may entail.

Clicking on the deposit button indicates your agreement to these terms.