Pengenalan Isyarat Tangan untuk Terjemahan Bahasa Isyarat
Sistem computer vision real-time yang mendeteksi gerakan tangan dan menerjemahkannya menjadi alfabet bahasa isyarat.
Komunikasi antara pengguna bahasa isyarat dan orang yang tidak memahaminya biasanya bergantung pada kehadiran penerjemah atau salah satu pihak mempelajari bahasa pihak lain, dua hal yang tidak selalu praktis saat itu juga. Tool penerjemah yang ada sering kali terlalu lambat atau terlalu berat untuk dipakai dalam percakapan langsung, sehingga manfaat sehari-harinya terbatas. Dibutuhkan tool yang ringan dan berlatensi rendah untuk menjembatani kesenjangan ini secara real-time tanpa perangkat keras khusus.
Sitetisfy membangun aplikasi Python dengan algoritma hand-tracking MediaPipe untuk mendeteksi posisi jari dan gerakan tangan melalui kamera standar secara real-time. Setiap gerakan yang terdeteksi diklasifikasikan dan dipetakan ke huruf alfabet bahasa isyarat yang sesuai, dengan seluruh pipeline dioptimalkan agar latensi rendah sehingga hasilnya terasa seperti percakapan langsung, bukan transkripsi yang tertunda. Karena berjalan di atas MediaPipe dan bukan perangkat pengenalan khusus, tool ini tetap mudah diakses dan cukup ringan untuk berjalan di perangkat konsumen biasa.
Fitur Unggulan
Deteksi tangan dan pelacakan landmark real-time via MediaPipe
Klasifikasi gerakan yang dipetakan ke alfabet bahasa isyarat
Pemrosesan berlatensi rendah untuk umpan balik instan
Umpan balik visual di layar untuk huruf yang dikenali
Arsitektur ringan yang berjalan di perangkat konsumen standar
Desain yang dapat dikembangkan untuk menambah gerakan baru seiring waktu