Derin öğrenme ve anahtar nokta poz tahminlemesi yöntemiyle insan duruşu tahminlemesi

İnsanlara ait video ve resimlerde yer alan insan duruşunu yorumlamak, hangi hareketlerde olduğunun belirlenerek tanınması ve anlamlandırılması insan duruşu tahminlemesinin en temel yapısını oluşturmaktadır. Bu tez çalışmasında resim ve videolarda yer alan görüntüler değerlendirilerek hareketin ne olduğuna, hangi amaçlar doğrultusunda yapıldığına karar veren bir sistem oluşturulmuştur. Böylelikle amaçlanan doğrultuda otomatik bir sistem halinde insan hareketlerinin tespiti yapılarak, istenilen zaman aralıkları belirlenerek, anlamlandırma işlemlerinin bütününü kapsayan bir çalışma yapılmıştır. Eldeki veri setlerinde yer alan görüntülerde ölçüt alınan kriterlerde anlamlandırılma aşamasından sonra hangi hareketlerin yapıldığı sınıflandırılmaya tabii tutulmaktadır. Tasarlanan sistemde hareketler anlamlandırma mekanizmasına bağlı olarak bir örüntü ifade edebilecek bir biçimde oluşturulmak zorundadır. Anlık veya durağan görüntülerin çıkarımı yapıldıktan sonra bilgi içermeyen zaman aralıkları sistemin dışında tutulduğunda bir sonuca varılmaktadır. Doğruluk paylarına bağlı kalınarak sistemin ne oranda verimli olabildiği elde edilmektedir. İnsanların yer aldığı resim ve videolarda konum koordinatlarından yola çıkılarak bir sonraki aşamada ne yapacağı veya iskelet sisteminin ne oranda değişeceği sistematik bir sistemde oluşturulmaktadır. Optik akış hesabı ile eklemler üzerinde yapılmakta olan analizler sayesinde hareket bilgisinin elde edilerek hareketin gücünü ifade eden analizler yapılmıştır. Görüntü de belirlenen bölge üzerindeki hareket bilgisinin eklemlerin tespiti ile belirlenerek hareket oluşturduğu alanlarda çalışmalar ilerletilmektedir. Bu alanlarla bağlı olarak çeşitli histogramlar geliştirilmektedir. Histogramlar iskelet çıkarımını ve hareket sınıflandırmasına kolaylık sağlamaktadır. Eklemlerin iskelet ağaç yöntemiyle tespiti ile ardışık şekillerde zaman kavramını da içeren betimleyiciler ile güvenilirliği esas alarak bu eklemler çerçevesinde kayan bir sınıflandırma mekanizması oluşturulmak istenmektedir. Bu çalışma itibariyle hareketsiz veya hareketli varlıkların otonom hareketini tanıyan ve anlamlandırabilen işlevsel bir yapı elde edilmesi hedeflenmektedir. Tahminlemedeki problemi çözümleyerek işe yarar ve kolaylaştırıcı mekanizma sağlaması açısından verimli bir yapı oluşturulmaktadır. İnsan vücudunun tespitinin daha net ve açıklayıcı biçimde hareketlerin anlamlandırılması çalışmalarında daha kolay ve anlaşılır bir yapı meydana oluşturulmuştur.