Bilgisayarlı Dudak Okuma


YAVUZ Z. , NABİYEV V.

15. Sinyal İşleme ve İletişim Uygulamaları Kurultayı, Eskişehir, Türkiye, 11 - 13 Haziran 2007, cilt.1-3, ss.1216-1219

  • Cilt numarası: 1-3
  • Basıldığı Şehir: Eskişehir
  • Basıldığı Ülke: Türkiye
  • Sayfa Sayıları: ss.1216-1219

Özet

İşaret  dilinin  çözümlenmesi  karmaşık  hesapsal  süreçleri içermekte ses işleme, görüntü işleme, örüntü tanıma, doğal dil işleme  gibi  değişik  alanları  kapsamaktadır.  İşaretin  ve  sesin tanınmasında  gerekli  olan  bu  süreçler,  insan-bilgisayar etkileşiminin  gelişmesinde  önemli  rol  oynamaktadır.  Bu makalede  insan  konuşmasının  tanınmasında  görüntü bilgilerinden  faydalanılarak  bilgisayarlı  dudak  okuma üzerinde  durulmaktadır.  Dudak  bölgesinin  bulunması,  dudak hareketlerinin takibi ve bilgisayarlı dudak okuma için gerekli özelliklerin elde edilmesi ile ilgili yaklaşımlar önerilmektedir.  

The analysis of sign language covers different areas such as audio and image processing, pattern recognition, natural language processing that require complex computational processing. These processes required recognizing the sign and audio, plays an important role in development of human-computer interaction. In this paper we focused on automatic lipreading by utilizing visual information in speech recognition. Some approaches about finding lip area, tracking lip contours and obtaining required features about automatic lipreading are suggested.