Derin operasyonel ağlar ile işitsel-görsel duygu tanıma

Duyguların kişilerarası iletişim, pazarlama, sağlık hizmetleri ve hizmet sektörü üzerinde önemli bir etkisi vardır. Bu nedenle duyguların sınıflandırılması konusunda günümüze kadar pek çok çalışma yapılmaya devam etmektedir. İşitsel-görsel duygu tespiti, makine öğrenimi alanında yaygın bir çalışma alanıdır. Temel amacı insan duygularını tanımlamak ve sınıflandırmaktır. Kişilerin aktardığı duygusal durumları değerlendirmek ve anlamak için bilgisayarda görü ve ses işleme yöntemlerinden yararlanır. Ancak çalışmaların çoğu metin ya da görsel gibi tek tip veriyi analiz ederek yürütülüyor. Bu araştırma, duygu tanımlamayı sağlamak için çeşitli girdileri kullanan operasyonel sinir ağı tabanlı bir derin öğrenme modelini tanıtmaktadır. Önerilen model, hem görsel hem de işitsel özellikleri birleştiren kapsamlı bir strateji kullanmaktadır. Önerilen mimari, geleneksel evrişim katmanlarını operasyonel katmanlarla değiştirmektedir. Deneysel bulgular, operasyonel evrişimli mimarinin, geleneksel evrişimli sinir ağı tasarımından daha iyi performans göstermektedir.