End to end 3D face model synthesis using textual descriptions

Gerçek resim kalitesinde resimler üretebilen çeşitli üretici modeller olmasına rağmen, bu modeller üretilen resimleri kontrol edememektedir. Üretilen resimlerinin kontrolünü sağlayan Koşullu Çekişmeli Üretici Ağlar alanındaki araştırmalar oldukça limitlidir. Dahası, doğal dil yapısında verilen betimleyici açıklamaları kullanarak gerçekçi insan yüzü resmi üretebilen sinir ağları ile ilgili araştırmalar da yetersizdir. Üretilen resimler ya düşük kalitede olmakta, ya da çeşitlilik sağlayamamaktadır. Bu sorunu çözmek için, Stil Çekilmeli Üretici Ağlar (StyleGAN) yapısının bir çeşidi olan, ve yüksek boyuttaki özellikleri ayırıp, yüksek kaliteli, verilen betimlemeler üzerinde koşullanmış resimler üretebilen Koşullu Stil Çekişmeli Üretici Ağ (cStyleGAN) yapısını öne sürüyoruz. Ayrıca, CelebA veri kümesini, Tanımlama Üretim Modülü'müz (Description Generation Module) ile resimler için ürettiğimiz doğal dil yapısındaki, iki boyutlu resimlerin üretiminde kullanılacak olan koşullu üretici ağların eğitiminde faydalı olacak tanımlamalar ile genişletiyoruz. İki boyutlu resimler iyi bir bilgi sağlamasına rağmen, bir resmi farklı açılardan, farkı ışıklar altında, ve bir derinlik bilgisi ile gözlemlemek daha fazla bilgi iletebilir. Bu yüzden, verilen doğal dil tanımlamalarından üç boyutlu insan yüzü modelleri üretebilen uçtan uca yapımızı da öne sürüyoruz.