Odhad pozice rukou během řízení automobilu

Abstract

Odhad pozice ruky hraje klíčovou roli v interakcích člověka s počítačem, navíc do jisté míry umožňuje analyzovat chování člověka. Řešení tohoto problému je netriviální kvůli komplikovaným variacím ruky způsobeným komplexní artikulací, překrýváním částí ruky i tvarové, velikostní a barevné nejednoznačnosti. V této práci se k této problematice stavíme komplexně návrhem několika různých metod jak pro detekci, tak pro odhad pozice ruky a ověřením jejich přesnosti. Porovnáváme metody odhadu z hloubkové mapy a z RGB obrazu a následně je aplikujeme na reálná data z trenažéru řízení. Navíc navrhujeme vlastní nástroj k anotaci RGB-D dat pomocí něhož jsme vytvořili testovací datové sady.

Hand pose estimation plays a fundamental role in human computer interactions, moreover it allows us to analyze human behavior. The problem is nontrivial due to complicated hand variations caused by complex articulations, self-occlusions or shape, size and color ambiguities. We provide complex proposal of different detection and pose estimation methods and their evaluation. The comparison of deep map and RGB based pose estimation is provided and applied to real-life data from the driving simulator. Furthermore we design an annotation tool for RGB-D data which we used to produce a test dataset.