Bilgisayarlı görü ve ses algılama tekniği ile hareketli nesne takibi

Bu çalışmada bilgisayarlı görü yöntemi ve ses algılama metodu ile hareketli cisimlerin takibi, gerçekleştirilen bir uygulama üzerinde paralel olarak çalıştırılmıştır. Geliştirilen uygulamada iki adet kamera ve iki adet mikrofon ile paralel olarak ses ve görüntü işleme teknikleri kullanılarak hareketli cisimler takip edilecektir. Kameralardan alınan bilgiler bir resim olarak alınıp üzerinde görüntü işleme teknikleri kullanılarak hareketin yönü ve hızı tespit edilecektir. Bu tespit akabinde motorlar yardımı ile gerçekleştirilen deney düzeneğine komut olarak gönderilmekte ve mekanik düzeneği harekete geçirmektedir. Bu sayede görüntü takibi işlemi gerçekleştirilmiştir. Ses takibi ise ses kaydı alınan bilgi, ses işleme tekniği ile birlikte daha önce kaydedilen ses örnekleri ile eşleştirilerek sesin anlamı çıkartılır ve bu program tarafından yüklenen anlam mekanik düzeneğe komut olarak yansıtılır. Bu sayede yazılım tarafından gönderilen komutlar yardımı ile kontrol düzeneği prototipi harekete geçirmektedir. Bu çalışma sayesinde insanlaştırılan robotların algılama yetenekleri geliştirilerek hareket ve sese duyarlı robotların oluşturulmasına zemin hazırlayacak bir uygulama geliştirmiştir.