Development of synthetic and real-world pose estimation dataset to be used in human tracking system

---

Tezin Türü: Yüksek Lisans

Tezin Yürütüldüğü Kurum: Orta Doğu Teknik Üniversitesi, Fen Bilimleri Enstitüsü, MAKİNE MÜHENDİSLİĞİ ANABİLİM DALI, Türkiye

Tezin Onay Tarihi: 2022

Tezin Dili: İngilizce

Öğrenci: MUSTAFA ERSOY

Danışman: AHMET BUĞRA KOKU

Açık Arşiv Koleksiyonu: AVESİS Açık Erişim Koleksiyonu

Özet:

Bu çalışmada, "Metupose" isimli sentetik ve genişletilebilir insan iskelet takibi veri seti sunduk. İskelet takibi, bir görüntü veya videodaki insan eklemlerini algılayarak insan duruşunu algılamaktır. Veri seti, Blender 3D programında değişken insan modelleri ve çevreye sahip şekilde üretilmiştir. Ayrıca, literatürdeki iskelet takibi modellerinin doğruluğunu artırmada kullanılmıştır. Metupose veri setinde 178000 görüntü vardır. Her bir görüntüde 1,2,3 veya 4 insan olmak üzere toplamda 402000 insan bulunmaktadır. Farklı iskelet takibi modellerini veri setimizle eğittiğimizde tüm model/veri seti durumlarında doğruluk artışı gözlemledik. İkinci katkımız ise, veri setinde yeni görüntüler oluşturmaya yarayan kaynak kodudur. Metupose veri setinde birçok uygulama için yeterli görüntü olsa da kullanıcılar kendilerine ait veri seti oluşturmak isteyebilir veya görüntü sayısını artırmak isteyebilir. Kullanıcıların kolayca yeni veri seti oluşturabilmesi için, orijinal Blender dosyalarını ve basit konfigürasyon dosyasını yayımladık. Normal koşullarda, gerçek hayat veri seti üretmek çok zaman alabilir ve hatalara açıktır. Çalışmamızın avantajı, sadece yazılım üzerinden otomatik şekilde hatasız veri seti üretmeye imkân sağlamasıdır. Son olarak, Metupose veri seti ile eğittiğimiz iskelet takibi modellerini Raspberry Pi kamerasına sahip Jetson Nano'da çalıştırdık. Sonuçlar, bu sistemin, insan-robot etkileşimi çalışmalarında düşük maliyetli bir alternatif olabileceğini gösterdi.