El hareketlerinin derin öğrenme tabanlı tanınması ve artırılmış gerçeklik uygulaması geliştirme

dc.contributor.advisorYücedağ, İbrahim
dc.contributor.authorGüler, Osman
dc.date.accessioned2021-12-01T18:07:17Z
dc.date.available2021-12-01T18:07:17Z
dc.date.issued2021
dc.departmentDÜ, Fen Bilimleri Enstitüsü, Elektrik-Elektronik ve Bilgisayar Mühendisliği Ana Bilim Dalıen_US
dc.description.abstractSon yıllarda gelişen teknoloji ile birlikte insan-bilgisayar etkileşimi çalışmaları yaygınlaşmıştır. Özellikle artırılmış gerçeklik uygulamaları insan bilgisayar etkileşimi alanında yaygınlaşan bir çalışma alanı olmuştur. Görüntü işleme alanında ise derin öğrenme yöntemlerinin kullanılmasıyla birlikte son yıllarda önemli gelişmeler yaşanmıştır. Nesne tanıma, nesne sınıflandırma, yüz tanıma, hareket tanıma ve el hareketi tanıma uygulamaları, derin öğrenme yöntemleri sayesinde artık günlük hayatta kullanılan cihazlarda etkin bir şekilde kullanılmaktadır. Bu çalışmada, insan-bilgisayar etkileşiminde önemli bir rol oynayan artırılmış gerçeklik teknolojileri araştırılmıştır. Derin öğrenme ile el hareketi tanıma modeli geliştirilmiş ve el hareketleri ile kontrol edilebilen bir artırılmış gerçeklik uygulaması tasarlanmıştır. El hareketi tanıma ve sınıflandırması için evrişimli sinir ağı ile kapsül ağ algoritması kullanılarak hibrit bir model oluşturulmuştur. 14 farklı el hareketi içeren toplam 14000 görüntüden oluşan HandGesture14 (HG14) adlı bir veri seti oluşturulmuştur. Önerilen modelin nesne tanımadaki başarısını ölçmek için HG14, Fashion-MNIST ve CIFAR-10 veri setleri üzerinde derin öğrenme önerilen hibrit model ile VGG16, ResNet50, DenseNet121, MobileNet, InceptionV3 ve CapsNet modelleri kullanılarak eğitimler gerçekleştirilmiştir. Eğitimlerin sonuçları karşılaştırılmış ve doğruluk oranları değerlendirilmiştir. Önerilen hibrit model, HG14 veri setinde %90, Fashion-MNIST veri setinde %93.88 ve CIFAR-10 veri setinde %81.42 ile doğruluk oranlarına ulaşmıştır.en_US
dc.description.abstractIn recent years, human-computer interaction has become widespread with the developing technology. In particular, augmented reality applications have become a widespread field of study in the field of human-computer interaction. In the field of image processing, there have been significant developments in recent years with the use of deep learning methods. Object recognition, object classification, face recognition, gesture recognition and hand gesture recognition applications developed with deep learning methods are now effectively used in devices used in daily life. In this study, augmented reality technologies that play an important role in human-computer interaction were investigated. A hand gesture recognition model has been developed with deep learning and an augmented reality application that can be controlled by hand gestures has been designed. A hybrid model was created for hand gesture recognition and classification by using convolutional neural network and capsule network algorithm. A dataset called HandGesture14 (HG14) was created, consisting of a total of 14000 images containing 14 different hand gestures. In order to measure the success of the proposed model in object recognition, trainings were carried out on the HG14, Fashion-MNIST and CIFAR-10 datasets using the hybrid model proposed for deep learning and VGG16, ResNet50, DenseNet121, MobileNet, InceptionV3 and CapsNet models. The results of the trainings were compared and the accuracy rates were evaluated. The proposed hybrid model achieved accuracy rates of %90 in the HG14 dataset, %93.88 in the Fashion-MNIST dataset and %81.42 in the CIFAR-10 dataset.en_US
dc.identifier.endpage116en_US
dc.identifier.startpage1en_US
dc.identifier.urihttps://tez.yok.gov.tr/UlusalTezMerkezi/TezGoster?key=v7BkNnnepTnbhn8rNR77LUqX3wRAXNM7LshL4oZMFEI8zcslhqF-8VXLYS4q3bRA
dc.identifier.urihttps://hdl.handle.net/20.500.12684/8805
dc.identifier.yoktezid689227en_US
dc.institutionauthorGüler, Osmanen_US
dc.language.isoenen_US
dc.publisherDüzce Üniversitesien_US
dc.relation.publicationcategoryTezen_US
dc.rightsinfo:eu-repo/semantics/openAccessen_US
dc.subjectBilgisayar Mühendisliği Bilimleri-Bilgisayar ve Kontrolen_US
dc.subjectComputer Engineering and Computer Science and Controlen_US
dc.titleEl hareketlerinin derin öğrenme tabanlı tanınması ve artırılmış gerçeklik uygulaması geliştirmeen_US
dc.title.alternativeDeep learning based recognition of hand gestures and development of augmented reality applicationen_US
dc.typeDoctoral Thesisen_US

Dosyalar

Orijinal paket
Listeleniyor 1 - 1 / 1
Yükleniyor...
Küçük Resim
İsim:
689227.pdf
Boyut:
6.94 MB
Biçim:
Adobe Portable Document Format
Açıklama:
Full Text / Tam Metin

Koleksiyon