Mikro Denetleyici Sistemler ile Türk İşaret Dili Kelime Çevirici
Turkish Sign Language Word Converter with Micro Controller Systems
Yazar: Gökçe, Fatih; Kekül, Hakan
Dergi: Avrupa Bilim ve Teknoloji Dergisi No. 28, 2021
Anahtar kelimeler: Engineering ; Mühendislik ; Türk İşaret Dili,Flex Sensör,İvme Sensörü,Gyro Sensör,Mikro Denetleyici,Arduino ; Turkish Sign Language,Flex Sensor,Acceleration Sensor,Gyro Sensor,Micro Controller,Arduino

Bu çalışmanın amacı Türkçe dilinde kullanılan kelimelerin işaret dili karşılıklarını, oluşturulan model yardımıyla tespit etmektir. Bu sayede konuşma engelli bireyler ve toplumun geri kalanı arasındaki iletişimin kolaylaştırılması amaçlanmaktadır. Konuşma engelliler ile engelli olmayan bireyler arasında iletişim sağlamak her zaman zor olmuştur. Engelli ve engelli olmayan bireyler arasında iletişimi sağlamak için önerilen yöntem, mikro denetleyici (Arduino), görüntüleme birimi (LCD Panel) ile flex, ivme ve gyro sensörler kullanmaktadır. Kelimelerin modellenebilmesi için bir eldiven tasarlanmıştır. İşaret dili çevirici eldiven sayesinde engelli bireylerle engelli olmayan bireyler iletişim sağlayabileceklerdir. İşaret dili çeviriciyi eline takan engelli bir birey işaret dilindeki bir sözcüğü işaret ettiğinde eldiven üzerindeki her bir parmağa denk gelen beş flex, ivme ve gyro sensörlerinden gelen veriler mikro denetleyiciye aktarılmaktır. Mikro denetleyicide işaret dili çevirici eldivenden gelen bu verilere göre işaretin hangi ifadeyi kastettiğini tespit ederek görüntüleme biriminde yazı olarak göstermektedir. İşaret dili çevirici projesinde işaret dilindeki kelimeleri çevirirken Türk işaret dili kullanılmıştır. İşaret dilinde hareketi yapılan bir ifadenin ne anlama geldiğini görüntüleme biriminde göstermek için, örnek olarak seçilen işaret dili hareketlerinin işaret dili çevirici eldiven takılarak yapıldığında elde edilen beş flex sensör verisi, üç ivme verisi ve üç gyro verisi olmak üzere toplam onbir verinin değerleri tespit edilmiştir. Örnek seçilen her işaret dili hareketi için tespit edilen onbir veri kayıt edilmiştir. Mikro denetleyici üzerinde çalışan programda bu değerlere göre işaret dili hareketleri sınıflandırılmıştır.

The aim of this study is to determine the sign language equivalents of the words used in the Turkish language with the help of the model created. In this way, it is aimed to facilitate communication between speech-impaired individuals and the rest of the society. It has always been difficult to establish communication between speech impaired and non-disabled individuals. The proposed method to provide communication between disabled and non-disabled individuals uses microcontroller (Arduino), display unit (LCD Panel) and flex, acceleration and gyro sensors. A glove was designed to model words. Thanks to the sign language translator glove, disabled individuals and non-disabled individuals will be able to communicate. When a disabled person wearing a sign translator points to a word in sign language, the data from the five flex, acceleration and gyro sensors corresponding to each finger on the glove is transferred to the microcontroller. In the microcontroller, the sign language translator detects which expression the sign means according to this data coming from the glove and displays it as text in the display unit. In the sign language translator project, Turkish sign language was used while translating the words in the sign language. In order to show what an expression in sign language means in the display unit, the values of a total of eleven data, five flex sensor data, three acceleration data and three gyro data, obtained when the selected sign language movements are made by wearing sign language translator gloves, were determined. Eleven data were recorded for each selected sign language gesture. Sign language movements are classified according to these values in the program running on the microcontroller.