İşitme ve Konuşma Engelli Bireyler için İşaret Tanıma Sistemi Geliştirme

Bora OKTEKİN; Nadire ÇAVUŞ

Article Details

İşitme ve Konuşma Engelli Bireyler için İşaret Tanıma Sistemi Geliştirme

Authors:

Bora OKTEKİN | Nadire ÇAVUŞ

Publisher:

Cyprus International University

Main Topics:

Folklore

Journal:

Folklor/Edebiyat 2019 Vol.25 Issue 97, pp.575-590

Document Type:

Article

Publication Date:

9/2019

Document Language:

Turkish

Document ID (Org No.):

2000418572

eISSN:

2791-6057

pISSN:

1300-7491

Abstract:

 


İşaret dili, el hareketlerinin, parmakların, kolların veya vücut hareketinin oryantasyonu ile konuşanın
fikirlerini iletmek için yüz ifadeleriyle eş zamanlı olarak yaptıkları hareketlerdir. İşaret dilleri, son yıllarda
tüm araştırmacıların gözdesi konumundadır. Yapılan hareketler sensörler yardımı ile tanınabilmektedir.
Ancak, hareket verilerinin bilgisayar sistemlerine aktarılması büyük önem taşımaktadır. Alan yazın
incelemesi sonucunda bu yönde yapılan çalışmaların yeterli olmadığı belirlenmiştir. Ayrıca, yapılmış
çalışmaların daha çok Amerikan İşaret Dili, İngiliz İşaret Dili ve Arap İşaret Dili yönünde olduğu ve Türk
İşaret Dili yönünde yapılan çalışmaların yeterli olmadığı tespit edilmiştir. Bu çalışmada, işitme ve
konuşma engelli bireylerin diğer bireyler ile iletişimlerini kolaylaştırabilecek akıllı bir sistem
geliştirilmiştir. Bu bağlamda yapılan çalışmanın alan yazındaki bu eksikliğin giderilmesine fayda
sağlayacağı düşünülmektedir. Çalışma kapsamında geliştirilen akıllı sistemde, Türk İşaret Dili’nde ses
bilimi olarak adlandırılan ve işaretlerin de temelini oluşturan 33 tane temel işaret baz alınmıştır. Bu
işaretlerin sistem tarafından tanınabilmesi için Microsoft Kinect v2 sensörü kullanılmıştır. Sistemin
altyapısında C# programlama dili ile sınıflandırma algoritmalarından Saklı Markov Modeli ve veritabanı
olarak da MongoDB kullanılmıştır. Yapılan vaka çalışması sonucunda; 33 temel işaretin %82’inin
geliştirilen sistem tarafından doğru bir şekilde tanımlandığı gözlemlenmiştir. Elde edilen doğruluk oranı
göz önünde tutularak geliştirilen işaret tanıma sisteminin hem işitme ve konuşma engelli bireylere, hem
de diğer bireylere yardımcı olacağı ve aralarındaki iletişim kurma problemini çözeceği düşünülmektedir.

.

Article Details

İşitme ve Konuşma Engelli Bireyler için İşaret Tanıma Sistemi Geliştirme

Authors: Bora OKTEKİN | Nadire ÇAVUŞ

Publisher: Cyprus International University

Main Topics: Folklore

Journal: Folklor/Edebiyat 2019 Vol.25 Issue 97, pp.575-590

Document Type: Article

Publication Date: 9/2019

Document Language: Turkish

Document ID (Org No.): 2000418572

eISSN: 2791-6057

pISSN: 1300-7491

Issues

Authors:

Bora OKTEKİN | Nadire ÇAVUŞ

Publisher:

Cyprus International University

Main Topics:

Folklore

Journal:

Folklor/Edebiyat 2019 Vol.25 Issue 97, pp.575-590

Document Type:

Article

Publication Date:

9/2019

Document Language:

Turkish

Document ID (Org No.):

2000418572

eISSN:

2791-6057

pISSN:

1300-7491