İşaret dilinin bilgisayarlı yorumlanması


Tezin Türü: Yüksek Lisans

Tezin Yürütüldüğü Kurum: Karadeniz Teknik Üniversitesi, Fen Bilimleri Enstitüsü, Fen Bilimleri Enstitüsü, Türkiye

Tezin Onay Tarihi: 2009

Tezin Dili: Türkçe

Öğrenci: SELDA BAYRAK

Danışman: Vasıf Nabıyev

Açık Arşiv Koleksiyonu: AVESİS Açık Erişim Koleksiyonu

Özet:

Bu tez çalışmasında işitme engellilerin kullandığı, işaret dilinin bilgisayarlı yorumlanması hedeflenmiştir. Bunun için, işaret dilinde kullanılan kelimelerinin temsil şeklini belirlemek ve bu şekli kullanarak sınıflandırma işlemlerinin yapılması gerekmektedir.İlk olarak, verilerin elde edileceği videoda elin hareketinin takibi gerçekleştirilmiştir. Nesne takibi için ortalama kayma algoritması kullanılmıştır. Böylece zaman içinde elin şeklindeki değişim ve yörüngesi elde edilmektedir.Bir sonraki aşamada elde edilen yörüngeden özellik vektörleri çıkarılmaktadır. El şeklinin özellik vektörlerini çıkarmak için, Zernike momentler hesaplanmaktadır.Son olarak da çeşitli el işaretlerinin tanınması için saklı Markov model sınıflandırması önerilmiştir. Tanıma işleminde eğitilmiş sistemdeki işaretler arasındaki benzerliğe göre karar verilmektedir.